1回答
我正在尝试刮一个电子商务网站(Lazada.sg)，我发现了一个基于scrapy：的Github代码。我正在尝试复制乐高项目。如果我能在显示URL的格式上得到一些帮助，我会很高兴，因为它的格式与他对刮刮的格式相同，所以我可以在我自己的用例中重用他的代码。谢谢
浏览 7提问于2022-09-07得票数 1
回答已采纳
我处于需要从不提供任何API的页面中获取一些数据的位置。
在传递带有登录凭据的参数时，我可以通过创建https post到forms url来登录吗？如果是-节点是否会创建一些会话cookie/存储值，以便稍后我可以提出另一个获取auth键的get请求？如果没有，还有别的办法吗？
浏览 5提问于2015-12-29得票数 1
回答已采纳
1回答
我试图刮linkedin的个人资料和帖子。我试过用selenium和webdriver。它的工作原理很完美，但经过一些尝试，linkedin会阻塞帐户或ip地址。
浏览 9提问于2022-01-27得票数 -3
回答已采纳
2回答
它包括登录到网站也。尝试从站点获取数据，这显示了一些客户端数据的分析。如果我的应用程序显示了这些数据，我需要：
这是什么可以做，通过网络抓取？
浏览 4提问于2014-02-27得票数 1
回答已采纳
，它有一个拖放视觉界面，使孩子可以构造编程指令，为屏幕上的行动，并控制乐高WeDo硬件。但是，尽管有开源的特性，除了乐高之外，对更便宜的硬件的改造却很少。
浏览 0提问于2016-09-26得票数 0
回答已采纳
1回答
我试图从bet365废弃一些奇怪的数据，遵循他们的UI流程，并需要帮助。书页都是这样的。
但是当我尝试使用Pyppeteer的点击或javascript来做它，即querySelector()和click()，它只是奇怪地失败了。我试着点击不同的坐标，键进入和空格，点击与延迟，所有的失败。
有人能告诉我如何用
浏览 9提问于2022-08-09得票数 0
我可以刮书页。问题是google使用javascript/ajax，所以curl确实获得了gmail的html版本，并且该版本没有我想要的信息。它只能在ajax版本的gmail上使用。我对如何做到这一点表示怀疑：，我看过几篇关于使用带有javascript功能的无头浏览器的文章。显然，其中一些可以用python来控制。然而，这似乎相当复杂。
浏览 2提问于2011-07-10得票数 0
回答已采纳
1回答
到目前为止，我在网络抓取方面的大部分经验都是非常简单和容易理解的。发送请求，下载HTML，并提取所需的信息。目前，我对从Spotify Web应用程序中抓取顶级游戏数据感兴趣。这些数据无法通过API访问，但在浏览不同的艺术家页面时可以看到。我的问题是，这些数据是如何在幕后生成的，是否有可能抓取这些数据？
浏览 5提问于2015-02-09得票数 2
1回答
我在casperJS中构建了一个刮刀器，用于从Google+页面中抓取数据。效果很好。除了在测试场景中，我没有找到任何关于如何实现这一点的文档或内容。还有，但它已经9个月没有更新了，人们都说它坏了。
浏览 2提问于2014-07-12得票数 2
回答已采纳
1回答
我需要刮数据从某些网站在12:00上午PST，并呈现在我的网站上的刮刮数据。我应该如何实现这一点？是服务器端还是客户端？我应该使用吗？
浏览 0提问于2015-10-01得票数 0
回答已采纳
这个公式，=IMPORTHTML("https://www.krungsriasset.com/TH/NAV.html", "table", 1)很好用。还应该做些什么？
浏览 2提问于2021-04-20得票数 1
回答已采纳
1回答
我已经翻阅了几天，但没有成功，所以我希望这不是一个复制。如果是的话我道歉。我有一个本地网络上的设备，它提供了一个以HTML读取的数据，该数据是实时更新的。到目前为止，我的BeautifulSoup和URLLIB2解析这些数据的尝试都没有成功。任何帮助都将不胜感激。
如果结果输出：from bs4 import BeautifulSoupimport urllib2url = 'http://192.168.1.2/index.html#home-vie
浏览 2提问于2017-07-28得票数 0
我得到了这个网站，我试图刮，但据我所知，缺乏对.js的机械化支持，一个顽固的网站，需要支持javascript的浏览器不是一个好的组合…网址：
浏览 3提问于2010-11-07得票数 2
回答已采纳
2回答
我是刮从flipkart的数据，我想刮所有产品的名称，价格和评级。所以我想从所有的页面中抓取所有所需的信息。在这个链接中有11页：，所以我如何做循环直到我到达页面的末尾，即到第11页的编号。
浏览 2提问于2020-03-04得票数 0
回答已采纳
1回答
假设我有一个Youtube视频的id (视频超链接中“”后面的数字和符号)，我如何用android代码将文件的音频流作为mp3下载到SD卡上？(我写了一个2.x版本的应用程序，但缺少这部分)。
浏览 2提问于2012-02-03得票数 0
回答已采纳
1回答
我正在尝试将"BTC网络电源“从url 导入excel。=importXml("https://rollercoin.com/network-power/btc"; "//p[@class='currency-info-power']")由于某种原因，这没有载入任何东西。当我加载页面时，我注意到加载这部分页面需要几秒钟的时间。有什么可能导致这种情况的原因，以及如何解决？
我甚至尝试使用=IMPORTDATA(“https://rol
浏览 3提问于2021-11-30得票数 2
回答已采纳
1回答
我一直试图刮一些网站(基于AJAX的)我的研究。我有一个条件，我应该刮的内容，而不是登录到各自网站的帐户。怀疑
我可以看到页面源代码与不登录.I的巨大差异，知道这是因为AJAX，但是我需要刮其中一个站点，最好是pinterest，我对Web很陌生，所以如果你们知道如何做这件事，请告诉我。
浏览 2提问于2017-08-02得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
