1回答
我正在抓取3个网址，每个网址都有多个页面。前2个链接有2个页面，第3个链接有3个页面。不管怎样，当我抓取它们时，它抓取URL 1的页面1，然后抓取URL 2的页面1，而不是URL 1的页面2。然后，它返回并抓取URL 1的页面2和URL 2的页面2，然后依次抓取URL 3的所有三个页面。那么，它为什么不像URL 1的第1,2页，URL 2的第1,2页，然后是URL 3的第1, 2，3页，按顺序抓取它们呢?有没有办法解决这个问题？
浏览 9提问于2019-06-07得票数 1
回答已采纳
我有一个网页抓取脚本，它基本上是从一个网站上抓取一个故事(标题、描述/摘要和故事文本)，通常在多个页面中，然后将其全部写到一个文本文件中。目前，我复制一个url并从PyCharm运行python脚本，它给出了我需要的结果。但是，我希望自动运行脚本部分，以便每当我复制包含特定文本(例如网站名称)的url时，它就会自动输出文本文件，而无需每次复制url时运行脚本。
浏览 7提问于2021-12-30得票数 1
下面是我将Here抓取结果输出到bibtex文件的尝试。由于BetterBibtex已经有了生成自定义引号键的功能，所以我不想在这里重新发明轮子。目前，我使用BibtexParser库将搜索结果输出到字典，然后将该字典输入数据库，并使用该数据库生成一个bibtex文件，这是最终的输出。
只是想知道是否有一种更好、更有效的方法来做到这一点。
浏览 0提问于2021-08-20得票数 2
回答已采纳
我试着用不同的网页抓取一个叫iens的网站。现在我可以成功地抓取一页。items: return restaurantList
这给了我所需要的结果但是，当我想要抓取多个页面时，如下所示：print scrape(14)
我得到了网页12上数据的正确结果，但我没有得到网页1
浏览 1提问于2016-12-09得票数 0
1回答
我试着从下面的链接中抓取网页，使用R编程中的R背心包。我抓取的链接是library("xml2")
我的要求是希望从结果中删除\\n,\\t。我想给多个页面进行分页，这样我就可以用分
浏览 13提问于2017-12-22得票数 1
4回答
我正在抓取一个网页，其中包含这样的日期：“2013年11月8日”。在我返回日期之后，它们被组织成一个无序的字符串数组。
浏览 5提问于2013-11-08得票数 0
回答已采纳
1回答
我正在使用Django框架构建一个web抓取应用程序。我需要一些关于如何加速我的应用程序的技巧。到目前为止，仅仅解析3个urls就需要几乎一分钟的时间来加载页面，这是一个问题。我需要运行得更快，因为我想在我的网页上解析多达10个urls。如你所见，我的代码只针对一个div，这就是我的应用程序运行如此缓慢的原因。我想我可以尝试多个div来缩小我的“汤”的范围，但我在过去遇到了困难，所以我希望能得到一些指导。
浏览 11提问于2021-07-08得票数 0
1回答
抓取用户屏幕大小/浏览器分辨率
、、、、
在浏览我的网页时，我如何抓取用户的屏幕大小或浏览器分辨率(仅限宽度)，最好是使用javaScript/jQuery或PHP，并输出结果？
浏览 3提问于2013-05-02得票数 0
回答已采纳
我在一个XML文件中有几个无序列表，我需要用XSL文件将它们转换成HTML。我的XML中的这些列表如下所示： <FoodItem ID="1"> </Fo
浏览 0提问于2019-06-09得票数 0
Chrome浏览器支持多个用户(角色)，因此我们可以使用不同的cookie和会话数据加载网页。这工作得很好，做我想做的事。现在我希望在多个用户帐户上安装一个扩展，以便在用户之间共享信息。详细信息和想法：我也有一个chrome扩展，它抓取</
浏览 8提问于2017-09-21得票数 0
我正在抓取多个网页，但有些网站的内容/文本带有div标签，而不是p或span，因此遇到了问题。p和span标记中获取文本，但是，如果代码片段如下所示： <div>Hello<p>this is a test</p></div> 使用find_all('div')和.getText()将提供以下输出： Hello this is a test 我希望得到的只是你好的结果。我尝试过使用recursive=Fals
浏览 85提问于2020-04-16得票数 2
回答已采纳
2回答
为了方便起见，我使用Java解析一个随机网站的超文本标记语言，假设它是。在解析HTML数据之后，我希望提取其中的一些数据，并将其显示在显示器上。之后，用户将输入搜索词，并按下一个按钮。这个按钮将执行“搜索”按钮后面的脚本。我想在几个网站上做到这一点，所以给我一种只与google一起工作的方法不会对我有太大帮助。
浏览 0提问于2012-03-30得票数 0
回答已采纳
我正在和一位朋友合作，尝试将几个网页的结果放入一个数据帧(，其中的页数会增加)。我以前没有做过太多的网络抓取工作，也尝试过使用Pandas read_html和BeautifulSoup，但我找不到从哪里开始的问题。理想情况下，我们希望将所有5000+结果放到一个CSV中，显示标题、发布日期、里程、年份、抄送和位置。
使用Pandas和web抓取库，这样的事情很容易做到吗？谢谢你的帮忙!
浏览 0提问于2017-11-22得票数 0
我想同时抓取10个网页。然而，我最终在大多数获取的网页上出现了大量503 (太多请求)错误。我怎么才能解决这个问题？
下面是我运行的php脚本。这是我的机器上的输出结果。
浏览 3提问于2014-09-28得票数 0
回答已采纳
[<p>d = \u221a2RH</p>, <p>d = 2Rlh</p>, <p>d = 2Rl\u221ah</p>, <p>d = 2Rh</p>]
上面的文本是从抓取网页中得到的输出数据。在抓取多个HTML文本之后，我们将其存储在一个列表中。
浏览 2提问于2019-11-24得票数 0
回答已采纳
1回答
我正在使用Apache Nutch来抓取网页。当我搜索特定的名字时，我想抓取网页，例如，如果我搜索比尔盖茨，我想获得该搜索结果的结果链接。我有像这样的网址有没有抓取该页面的选项？我在regex-urlfilter.txt中添加了接受所有内容的代码。我该如何抓取链接？提前谢谢。
浏览 1提问于2013-05-23得票数 0
回答已采纳
它工作得很好，并显示结果。页面存储在数据库中，并允许管理员编辑(作为CMS解决方案)...谷歌如何从我的数据库内容中搜索和显示内容？我想知道google follow的技术或方法？
浏览 3提问于2011-09-13得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
