1回答
抓取使用ajax的网页
、、、、
我正在尝试从印度政府的网站上抓取数据。首先，我需要提交一个表单来获取数据。
在上面的图片中，你可以看到表单的截图。该表单允许您选择印度境内的邦、邦内的区、区内的街区和街区内的村镇。我需要收集所有乡下人的数据。提交表单时发送的表单数据包含已选中的所有panchayat的复选框的值。有超过25万个panchayat，几乎不可能手动完成。因此，我使用漂亮的
浏览 3提问于2018-01-10得票数 2
回答已采纳
我只需要从特定的(跨域)请求中获取'html‘。
我使用JQuery.ajax()函数传递dataType=json，以便JQuery生成一个script标记并触发请求。; $.ajax({ type: 'GET', url: url, dataType"complete "+data); }, data: {},
浏览 4提问于2011-06-13得票数 1
回答已采纳
我是一个网络抓取的新手。我正在尝试从获取FASTA文件，但不知何故无法获取。这个类中的FASTA文件，但当我运行这段代码时，我只能看到FASTA标题：
url = "https://www.ncbi.nlm.nih.gov/nuccore/193211599?
浏览 0提问于2017-05-09得票数 0
1回答
使用AJAX请求抓取页面
、、、
我正在使用带有jsDOM的Node.js来抓取网页并在其中执行JavaScript。但是，如果页面包含AJAX请求，则不会执行这些请求。
是否有在抓取的页面中执行AJAX调用的选项？
浏览 1提问于2011-05-27得票数 4
回答已采纳
2回答
我想抓取一些网页，如下所示
http://www.youtube.com/channel_ajax?action_load_more_feed_items=1&activity_view=1&paging=1352148528&channel_id=UCCw8aVnsIeu9S6OPQyaQ14g
我想抓取整个页面手动，我必须反复点击按钮，直到没有更多的加载，通过
浏览 1提问于2013-01-10得票数 0
2回答
我知道使用Python的Beautiful Soup抓取HTML的基础知识。但是，页面会进行AJAX调用，以获取球员上场时间的数据。(我使用firebug识别了网络调用)。我的问题是:有没有可能使用python来“抓取”这些信息？我需要什么工具，除了HTML我还应该知道什么？(我目前正在阅读有关JavaScript和AJAX的文章)。我为这个不明确的问题道歉，但我
浏览 0提问于2013-11-02得票数 0
我是一个新的HTML5，我需要显示一个超文本标记语言页面内的其他超文本标记语言页面没有使用框架和框架。请帮帮我。
浏览 0提问于2011-10-19得票数 0
回答已采纳
3回答
HTML页面抓取
、、、
抓取具有AJAX/动态数据加载功能的网页的最佳方式是什么？
例如:抓取一个网页，该网页加载了20张图片，但当用户向下滚动页面时，它会加载更多的图片(有点像Facebook)。在这种情况下，如何抓取所有图像，而不仅仅是前20个图像？
浏览 0提问于2012-12-06得票数 3
1回答
我试图抓取列表项(状态名称：)；这些状态在网页上可以作为列表可见，但是是动态的。我可以在BeautifulSoup里刮吗？是可行的吗？请给我一些提示。全新的网络抓取！为其他工具打开
<div class="md-nav-item cite hidden-xs" data-popover=".citation-popover" data-popover-url="/ajax
浏览 3提问于2017-09-09得票数 0
回答已采纳
1回答
如何从ajax类型的网页中抓取网页源代码: curl似乎不能获得ajax生成的源代码。
如果重复，很抱歉，但是正在寻找抛出的问题没有找到答案。
浏览 0提问于2012-03-30得票数 1
2回答
我使用apache Nutch 1.10来抓取网页并提取页面中的内容。其中一些链接包含动态内容，这些内容是在调用ajax时加载的。Nutch无法抓取和提取ajax的动态内容。我该如何解决这个问题呢？
浏览 1提问于2015-10-06得票数 3
1回答
我正在为一个特定的网页做网页抓取，我注意到我的代码只抓取了只显示第一个滚动的部分。当进一步向下滚动时，页面会自动显示更多信息。下面是似乎控制这种算法的代码。ajax-progress-throbber">
<i class="glyphicon glyphicon-refresh glyphicon-spin">some_links_here" titl
浏览 1提问于2019-10-31得票数 0
1回答
我试图使用漂亮汤查找方法来刮，但是在HTML页面中找不到表值。当我通过内部API加载页面时，我发现该网站正在立即生成数据。有什么帮助吗？
提前谢谢。
浏览 0提问于2019-03-05得票数 0
回答已采纳
3回答
我想知道如何抓取使用AJAX在所呈现的网页上获取内容的网页。通常，这类页面的HTTP GET只会获取嵌入了JavaScript代码的HTML页面。但我想知道是否有可能以编程方式(最好是Java)查询这样的页面，并模拟web浏览器类型的请求，以便在AJAX调用之后获得HTML内容。
浏览 1提问于2010-02-08得票数 5
回答已采纳
哇，这很复杂，但我基本上需要通过一个单独的Perl脚本来触发网页中的$.ajax函数。
我有一个网页，它的$.ajax调用一个Perl文件，该文件抓取数据并将其返回给网页。然后javascript分析数据并创建另一个javascript函数调用，该函数调用请求Perl发送带有该数据的电子邮件。Perl抓取数据，发送给js，js再次调用Perl通过电子邮件发送分析后的数据。我被要求编
浏览 0提问于2014-11-18得票数 0
1回答
我正在尝试抓取http://www.snapdeal.com/offers/deal-of-the-day，它使用以下页面的AJAX调用加载JSON数据：我使用的代码块如下所示，我得到日志消息超时，但不是Waiting for AJAX request:，而是waitForResource超时
casper.options.onResourceReques
浏览 0提问于2015-07-11得票数 3
在浏览器中只能使用JavaScript/jQuery和Ajax从外部网页(跨域)获取某个元素的值吗？
类似于基本的抓取。
浏览 2提问于2017-01-10得票数 0
使用javascript和jquery，我正在抓取一个网页链接列表，这些链接要么是网页，要么是大型二进制文件(PPT等)。
如何检测内容是否是网页('text/html')？我确信它正在使用$.ajax查看header，并且我知道有一些类似的发布问题，但我找不到适合这个特定问题的示例。
浏览 3提问于2017-11-15得票数 0
回答已采纳
云服务器
ICP备案
对象存储
云点播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号