我无法抓取一个Java脚本依赖的网站。我需要从使用XHR请求发送到服务器的API调用中获取学校列表，该请求获取JSON对象 我使用与XHR请求相同的请求头，包括Cookie值。不确定为什么它不工作。附加来自google chrome请求标题(网络选项卡)的Python代码和屏幕截图，以及来自vs代码术语的错误： # -*- coding: utf-8 -*-
import scra
浏览 24提问于2020-11-24得票数 0
我正在尝试使用scrapy抓取this website上可用的文章。我正在尝试使用以下代码。
浏览 51提问于2021-03-17得票数 0
1回答
我试图在Python中使用BeautifulSoup来获取CNN中搜索结果的总数。<div class="cnn-search__results-count">
如截图1所示：我写的代码是：
url_cnn = 'https://
浏览 1提问于2020-03-21得票数 0
回答已采纳
1回答
问题是，在现代网页设计中，大多数网站都使用一些JavaScript来修改DOM (通常使用React、Angular，甚至是一些jQuery)。问题是，如果我用request node.js包销毁一些网站，并将html代码传递给cheerio，那么我就无法解析代码并获得我想要的信息。
浏览 1提问于2018-05-17得票数 0
在我的parse函数中，下面是我编写的代码：links = hs.xpath(".//*[@id='requisitionListInterface.listRequisition']")for x in links: item["title"] = x.xpath('.//*[contains(@title, "View this job descripti
浏览 0提问于2015-07-23得票数 0
我目前有两个JavaScript变量，我需要从中检索值。HTML由一系列没有id/name属性的嵌套DIVs组成。是否可以使用HTMLAgilityPack从这些变量中检索数据？<div style="margin: 12px 0px;" align="left">variable1 = "var1";
variable2
浏览 0提问于2011-06-11得票数 4
回答已采纳
我是JavaScript的新手，我正在尝试从JavaScript发送api请求。var api_key = "<api_key>&qu
浏览 2提问于2019-12-25得票数 0
1回答
我正在开发一个网站example.com，一个API api.example.com。目前，该网站及其API由BasicAuth使用用户名和密码进行保护。我无法从网站到其API进行AJAX调用(我使用jQuery)。我尝试了我在网络上找到的所有添加BasicAuth参数到调用中的方法，但是都没有效果。当我检查Chrome在网络上发生了什么时，我发现没有提交报头，请求方法不是GET，而是选项。这是我最
浏览 2提问于2015-07-24得票数 0
回答已采纳
4回答
实际上，我对Python的语法分析很在行。我在刮。我需要头版的每英里当前价格。使用这种方法收集原始文本格式的数据。我也尝试过其他方法。 soup = getContent(url) plaint_text = source_code.text
soup = BeautifulSoup(plaint_
浏览 0提问于2019-03-24得票数 3
同时从JavaScript调用api在下面的代码中，我想通过JavaScript调用var password=/userinfo",
dataType: 'js
浏览 4提问于2017-03-08得票数 0
回答已采纳
我正在使用requests抓取以下网站的。为了做到这一点，我正在浏览网站以定位XHR调用，并获得如下所示的urlimport requests,json
header={some data from the XHR I我的问题是，如果我切换tab，比如从Corner切换到Fixture，就不会调用新的XHR。事实上，只有"Live Matches“和"Corners”允许这种直接的XHR连接
浏览 4提问于2020-05-21得票数 2
我正在尝试为Twitch做一个网络抓取器，它将获得流的标题和流信息。我可以从其他网站中取出页面的特定部分，但当我放入一个流时，它看起来不像inspect元素中的html。它看起来就像一团乱麻。
浏览 20提问于2021-01-08得票数 0
我已经做了一个扩展，它将跟踪一个人在漫画网站上阅读的漫画，并在他们最爱的网页上列出他们最后一次阅读的章节。最近，我提出了一个有用的特性来使扩展更好一些。我想给用户的选择，以便能够只跟踪漫画，他们在网站上的最爱。因此，当他们阅读时，扩展将不断地检查背景，如果是在他们的最爱，如果是，然后保存它，如果没有，不要保存它。该网站有一个收藏页，其中包含了一个人收藏的所有漫画的列表。我想要能够不断地抓取每一个漫画的名称，在该网页上的背景隐藏对用户。所以我的问题是，有没有办法在后台抓取特定页面的html，并不断地获取特定
浏览 6提问于2014-12-04得票数 1
回答已采纳
1回答
我想访问亚马逊内部给定类别中的所有项目，但似乎类别页面是通过搜索生成的。在URL中修改页面搜索参数只会将您带到第100个页面。有什么办法可以克服这一点吗？这是一个示例
浏览 0提问于2013-04-24得票数 1
回答已采纳
下面的代码无法刮掉class_=datarow。我也尝试过使用read_html，但是这个表class="table_equities"中有一些表，这使得read_html不适合我。
浏览 0提问于2020-09-26得票数 0
1回答
我正在尝试使用Javascript向图像识别API提交一个Post请求，但是我无法想出如何发送实际的图像。我知道我不能仅仅使用本地文件发送它(当我试图运行它时，我得到了“只支持协议方案的跨源请求”错误)。如何使用Post请求发送图像？到目前为止我的代码是：
浏览 6提问于2015-10-14得票数 2
回答已采纳
2回答
我正在使用Django 1.2.3开发一个网站。我的ajax get请求工作得很好，但是post请求在开发模式(127.0.0.1:8000)下工作，但是当我使用apache + nginx将站点推入生产环境时就不行了。中：我的警报永远不会被调用...这是一个问题，因为我想通
浏览 2提问于2011-04-18得票数 1
回答已采纳
嗨，我正在尝试从一个API中提取一些东西，它应该会返回给我一个字符串，上面有Ethereum最近的价格。var xhr = new XMLHttpRequest();xhr.onreadysta
浏览 7提问于2017-12-12得票数 0
回答已采纳
3回答
></html><html> <script type="text/javascript" src="httpsjquery/1.7.2/jquery.min.js"></script> <p><
浏览 0提问于2012-08-27得票数 0
回答已采纳
我使用Scrapy用python编写了一个脚本，以便使用身份验证从网站上抓取数据。我正在抓取的页面真的很痛苦，因为主要是由javascript和AJAX请求组成的。我已经成功地从第一页抓取了所需的所有数据，然后使用以下代码更改了单击此输入按钮的页面： yield FormRequest.from_response(response,,
浏览 38提问于2019-02-21得票数 0
云服务器
ICP备案
腾讯会议
云直播
对象存储
腾讯云开发者
