4回答
抓取网页内容
、、、、
我正在开发一个项目，我想在后台抓取一个网站的内容，并从那个抓取的网站获得一些有限的内容。例如，在我的页面中，我有"userid“和"password”字段，通过它们，我可以访问我的邮件，抓取我的收件箱内容，并将其显示在我的页面中。
我通过单独使用javascript完成了上面的工作。
浏览 0提问于2009-02-25得票数 19
3回答
试着抓取网页内容
、、、
我想得到这个网页的单词列表： (你应该输入的单词列表)，我已经从HTML中得到了单词列表，但是我无法得到它的内容。有人能帮我吗？
浏览 7提问于2022-06-11得票数 1
回答已采纳
我可以使用php获得一个普通页面的html内容。但我打算获得一个页面的内容，当你向下滚动时，它会动态增长(就像在facebook中一样)。我应该如何获得这样一个页面的内容呢？
谢谢!
浏览 1提问于2012-06-04得票数 0
我的问题是基于一个我非常陌生的领域，所以如果可能的话，我希望能有一些耐心/有用的资源。这个想法对我来说是完全陌生的。我以前写过解析应用程序和xml文件的程序，但从来没有从网站上剥离过信息。因此，我完全迷失了方向。比方说，我想写一个简单的Windows phone7应用程序，它只允许我选择一个车站，然
浏览 0提问于2012-05-03得票数 1
回答已采纳
2回答
他们是否有办法在没有任何浏览器的情况下，在抓取html之后执行网页javascript的加载事件。即我需要抓取网页内容通过javascript呈现例如bbc新闻网页的视频在页面加载后通过javacscript呈现，我对抓取视频链接和镜头描述感兴趣。
浏览 0提问于2012-06-27得票数 1
1回答
我是一个程序设计语言的初学者，和我正在学习刮。有可能在这样的评论中获得数据吗？<tr> <td valign="top">BEKASI</td> <td valign="top">
浏览 1提问于2018-11-18得票数 0
回答已采纳
我有一个问题，我不知道如何从新闻网页上获取新的新闻文章。我用python写了一个抓取器脚本，当我运行它时，它从源(今天发布的运行时间)获取所有新闻，并将它们保存到一个CSV文件中(我保存: URL，标题，日期，时间，图像URL，类别，内容)。当我再次运行脚本时，它会检查CSV文件是否处理了URL，这样它就不会写入重复内容，而只写入新内容。最后，我想将这些结果写入我的数据库。但是使用这个脚本，我必须周期性地运行它(假设每10分钟运行一次)来检查是否有新发布的内容。这是实现这一点的编写方式吗
浏览 0提问于2019-12-09得票数 0
1回答
今天又开始工作了，发现Ruby既不能访问显示的网页的控件，也不能访问网页的数据。我正在寻找关于如何继续访问显示的网页中的数据的建议。我对javascript不是很了解，但是如果我有一个明确的计划要遵循，我就会去追求。我相信我找到了href来加载第二个网页，但它只是再次加载初始页面，因此其他机制也在发挥作用(即脚本中提到了cookie)。要下载这些信息，
浏览 0提问于2018-03-11得票数 3
回答已采纳
首先，我需要问爬虫和屏幕刮擦之间的区别。其次，我希望爬行或屏幕刮除下拉字段，这些字段具有不同的排列，这样我就可以在自己的数据库中获得数据。例如，当我选择一个类别时，会有一个类别下拉，然后当我选择它的子类别时填充它的相关子类别，然后用不同的combinations.All填充它的相关子类别，等等，我想要的是在数据库中有不同排列的类别。我将使用C#.net谢谢。瓦卡尔·伊克巴尔。
浏览 2提问于2011-01-07得票数 0
2回答
我想从网站上获取数据。我想要易趣上不同商品的价格。我想把这些产品和它们的价格放在我的数据库里。纳奇在这里会有帮助吗？如果不是的话，我更喜欢哪种刮刀/爬行？
浏览 5提问于2014-06-17得票数 0
回答已采纳
1回答
有时，当使用多个并发连接和抓取我的PHP脚本中的cURL时，会返回不完整的网页。curl_getinfo()中有没有一些值可以让我知道一个网页是100%被抓取还是只有90%被抓取？返回页面的内容大小标题是返回内容的实际大小，还是整个页面的大小？如果是这样，我可以根据响应的实际大小检查content-size。
谢谢!
浏览 0提问于2013-04-12得票数 0
回答已采纳
1回答
我正在开发一个网站，应该得到其他网站的新闻内容，类似于。但不需要重定向到主持人那里去阅读新闻内容。
现在的问题是，我不知道什么是最好的方式得到的内容完全。现在我想问的是，如果有必要直接访问这些网站，从不同的网站获取整个新闻内容的最好方法是什么？对不起，因为我的英语不太好，如果我的问题不够清楚，我可以提前解释，谢谢。
浏览 5提问于2014-08-14得票数 1
回答已采纳
1回答
我的要求是将mcode传递给下面的web aspx查询，然后将结果网页打印到pdf。
https://wwww.abcd.com/xyz/subject.aspx?
浏览 2提问于2020-03-18得票数 0
1回答
搜索引擎是否会抓取具有“noindex”元属性的页面？我之所以问这个问题，是因为我们有一些由分面导航引起的几乎重复的内容，而过滤过的页面已经声明了“noindex”，我想知道这些页面是否还会被检测为复制的呢？
浏览 0提问于2016-11-03得票数 7
回答已采纳
在抓取之后，我在HTML末尾得到了最奇怪的输出。谁能告诉我这是否是亚马逊的开发者故意的？或者这是其他的东西？
浏览 15提问于2018-09-06得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM活动推荐
腾讯云开发者
