我一直在使用HTML AGILITY PACK获取一些数据，通过选择一些标签从网页中获取数据，但我有一个bug之类的问题。SpanNodes = doc.DocumentNode.SelectNodes("//div[@class='form-field wide-80 如何使用C#在浏览器中刷新网页，或者如何使用超文本标记语言敏捷包通过在web浏览器中打开网页来获取数据？....
浏览 0提问于2013-04-19得票数 0
我能找到座位空位的json或xml数据或其他信息吗？另外，如果它使用其他协议，你能告诉我是哪一个吗？
提前谢谢。
浏览 23提问于2014-07-01得票数 0
2回答
我想从网站上获取数据。我想要易趣上不同商品的价格。我想把这些产品和它们的价格放在我的数据库里。纳奇在这里会有帮助吗？如果不是的话，我更喜欢哪种刮刀/爬行？
浏览 5提问于2014-06-17得票数 0
回答已采纳
我可以使用php获得一个普通页面的html内容。但我打算获得一个页面的内容，当你向下滚动时，它会动态增长(就像在facebook中一样)。我应该如何获得这样一个页面的内容呢？
浏览 1提问于2012-06-04得票数 0
我正在尝试使用selenium从网页中抓取一些数据。我已经成功地让selenium在树莓派上无头工作，我可以连接到我试图抓取的网页，返回页面的标题，并返回我连接到的URL。我一直在看教程中关于如何抓取数据的示例，它们都是这样的：然而，我试图抓取的网页中的每一块<em
浏览 5提问于2021-03-16得票数 0
我想弄清楚是否有可能从DPD进口最新的包裹状态。例如，我希望从下面的链接获得“传递”状态，并将其导入到google：
非常感谢您的帮助！格雷格
浏览 4提问于2022-03-08得票数 0
我只是在寻找屏幕抓取包含flash视频的网页。在使用抓取网页时，我喜欢抓取嵌入的代码片段并下载视频数据。有人能帮上忙吗？
参考可能的帮助：
浏览 0提问于2015-01-19得票数 1
1回答
如何用Ruby抓取动态网站
、、、、
我想刮一个反应网站，有产品的名称和描述。HTML结构如下所示： <span data-reactid=".5c2v.$menuItemContent.0.1">Product name</span><p class="menu-index-page__item-desc" data-reactid=&
浏览 0提问于2018-10-16得票数 0
3回答
将HTML转换为RDF
、、、
我正在寻找一个通用的API/web服务/工具/等等。这允许将给定的HTML页面转换为尽可能具体的RDF图(最有可能使用框架本体和/或映射器)。
浏览 0提问于2010-02-25得票数 5
回答已采纳
3回答
HTML页面抓取
、、、
抓取具有AJAX/动态数据加载功能的网页的最佳方式是什么？
例如:抓取一个网页，该网页加载了20张图片，但当用户向下滚动页面时，它会加载更多的图片(有点像Facebook)。在这种情况下，如何抓取所有图像，而不仅仅是前20个图像？
浏览 0提问于2012-12-06得票数 3
1回答
我有一个模拟器应用程序，它不断地将JSON格式的数据输出到给定的主机名和端口号(UDP)。我希望能够将模拟器输出指向Django web应用程序，这样我就可以监控/处理传入的数据。如何使用Django实时接收和处理数据？有什么工具或包可以实现这一点？我确实遇到了这个答案：，但我不完全理解。而且，我不需要在数据库中存储任何流数据。我只需要根据流数据执行查找。也许这根本不是Django的问题？
浏览 2提问于2015-09-23得票数 5
在抓取之后，我在HTML末尾得到了最奇怪的输出。谁能告诉我这是否是亚马逊的开发者故意的？或者这是其他的东西？
浏览 15提问于2018-09-06得票数 0
1回答
我正在尝试修改我在网上找到的python2.7Craigslist刮板，使其与python3.6一起工作。我假设它是下面这部分代码： if listing.find('span',{'class':'result-price'})
浏览 11提问于2017-06-22得票数 0
我有一个问题，我不知道如何从新闻网页上获取新的新闻文章。我用python写了一个抓取器脚本，当我运行它时，它从源(今天发布的运行时间)获取所有新闻，并将它们保存到一个CSV文件中(我保存: URL，标题，日期，时间，图像URL，类别，内容)。最后，我想将这些结果写入我的数据库。但是使用这个脚本，我必须周期性地运行它(假设每10分钟运行一次)来检查是否有新发布的内容。这是实现这一点的编写方式吗？
浏览 0提问于2019-12-09得票数 0
2回答
在解析HTML数据之后，我希望提取其中的一些数据，并将其显示在显示器上。之后，用户将输入搜索词，并按下一个按钮。这个按钮将执行“搜索”按钮后面的脚本。
浏览 0提问于2012-03-30得票数 0
回答已采纳
我一直在看到有人在服务器端使用jquery+jsdom使用jQuery。我正在用服务器端的ExpressJS和客户端的angularJS构建我的应用程序。我正在考虑使用jQuery来执行http请求，但最终决定使用request模块。我想知道在服务器端使用jQuery的原因是什么？是否有任何合理的案例来证明这一点？
浏览 1提问于2016-04-14得票数 0
回答已采纳
6回答
爬行和网络抓取有区别吗？
如果有不同之处，为了收集一些网络数据来提供一个数据库，以便在定制的搜索引擎中使用，最好的方法是什么？
浏览 2提问于2010-12-02得票数 96
回答已采纳
我很难解析来自外部网站的数据，例如，仅使用Java的stackoverflow.com。为了了解这个网页的内容，我去了，并在那里找到了我需要的所有信息XMLHTTPRequest response！问题是如何仅使用Java而不使用Servlets来获取这些数据。
浏览 5提问于2016-03-17得票数 0
回答已采纳
3回答
我希望从许多不同的地方政府网站上获取公共数据。此数据不是以任何标准格式(XML、RSS等)提供的并且必须从HTML中抓取。我需要抓取这些数据，并将其存储在数据库中以备将来参考。理想情况下，抓取例程将在循环的基础上运行，并且只将新记录存储在数据库中。对于我来说，应该有一种方法可以在这些网站上轻松地检测到旧记录中的新记录。
我最大的问题是:实现这一目标的最佳方法是什么？我还知道，一些编程语言也可以更容易地解析HTML数据。我是一个具有几种
浏览 0提问于2012-09-04得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
