1回答
我正在尝试将一个项目部署到scrapinghub，下面是我得到的错误
slackclient 1.3.2 has requirement websocket-client<0.55.0,>=0.35,
浏览 15提问于2020-05-15得票数 1
1回答
我正在尝试部署到ScrapingHub，这是我得到的错误...shub_deploy_n9zmxfto.log我有一个本地csv文件，我正尝试将其包含在部署和打开该
浏览 24提问于2020-05-11得票数 0
我已经尝试了一些爬虫程序来从我本地机器上的Python环境中提取web数据。理想情况下，我想主办一个网站，可以启动爬虫聚合内容，并显示在网站上。
浏览 40提问于2019-07-24得票数 0
message": "shub-image-info exit code: 1", "details": null, "error": "image_info_error"}
你好，我写了一个刮擦蜘蛛，我试图部署到刮取中心，我需要使用BeautifulSoup来处理损坏的HTML部件，我在部署时会遇到以下错误。
浏览 5提问于2019-10-28得票数 2
回答已采纳
我正在尝试将我刮过的数据放在云上的firebase帐户上，但是当我运行这个蜘蛛时，我会得到这个ImportError。我试着创建新项目，甚至在特定版本的firebase和shub上重新安装Python，但没有帮助。Traceback (most recent call last): yield n
浏览 0提问于2017-07-03得票数 0
回答已采纳
0回答
我对爬行器进行了更改，以使用scrapinghub API的一些方法，并尝试使用"shub deploy“将其重新部署到Scrapy Cloud。我收到一个错误: ImportError:没有名为scrapinghub的模块from scrapinghub import Connection
shub版本2.5.0抓取集线器
浏览 3提问于2016-12-29得票数 0
1回答
我部署了一些抓取蜘蛛来抓取数据，我可以从ScrapingHub下载.csv格式的数据。
其中一些爬虫有FilePipeline，我用它来下载文件(pdf)到特定的文件夹。有没有什么方法可以通过平台或应用程序接口从ScrapingHub检索这些文件？
浏览 0提问于2017-06-15得票数 0
1回答
我在scraping-hub上部署了一个项目，但是我的爬行器不能工作，因为scraping-hub使用了一个旧版本的扭曲库。这个项目在我的本地机器上运行得很好，不管怎样，我可以制作一个扭曲的更新版本的鸡蛋，并将其部署在scraping-hub上。
浏览 1提问于2016-02-17得票数 0
1回答
我正在ScrapingHub上部署一群蜘蛛。蜘蛛本身起作用了。我想根据爬行器是在本地运行还是在ScrapingHub上运行来更改提要输出(如果它在本地运行，那么输出到临时文件夹，如果它在ScrapingHub输出上运行到S3)。但是，尝试从settings.py (在Scrapy项目中)打印使用ScrapingHub接口设置的环境变量会返回None。下面有一个代码片段，它显示了我试图做的事情。然而，更改AWS键会导致上传失败，因此这些值在某个时候会传递到Scrapy，只是在文件最初加载时
浏览 1提问于2019-06-18得票数 3
2回答
我在上部署了一个项目，我根本没有该代码的任何副本。
如何在本地主机上从Scrapinghub下载整个项目的代码？
浏览 7提问于2017-07-27得票数 4
回答已采纳
1回答
我计划将一个Scrapy蜘蛛部署到ScrapingHub，并使用调度特性每天运行该蜘蛛。我知道，默认情况下，Scrapy不访问相同的URL。但是，我想知道这种重复的URL避免是否在ScrapingHub的计划开始时是持久的？以及我是否可以设置它，以便Scrapy在预定的启动过程中不会访问相同的URL。
浏览 2提问于2018-05-24得票数 1
回答已采纳
movieActorPhoto)
if countLen == dataLen:但是，当我想要将我的项目部署到Scrapinghub时，我得到了错误我从github 找到了解决方案
浏览 0提问于2018-03-17得票数 1
在我的docker-compose.yml文件中，我可以执行以下操作： image: scrapinghub/splash{
"name": "splash","image": "scrapinghub/splash&qu
浏览 0提问于2018-04-15得票数 2
2回答
如何找出一个网站中重复的URL数量？因为scrappy框架在默认情况下不会抓取重复的urls。我只需要找出哪些URL正在重复，以及重复了多少次。
浏览 5提问于2018-03-01得票数 0
Docker已经成功地提取了scrapinghub/splash，但是当我使用docker run -p 8050:8050 scrapinghub/splash运行它时，我得到了以下错误：
docker:来自守护进程的错误响应:驱动程序在端点zen_elion上的外部连接失败，zen_elion绑定为0.0.0.0:8050失败:端口已经被分配。
浏览 3提问于2020-01-23得票数 0
回答已采纳
当我尝试shub时，将它部署到云中并获得以下错误。project: non_field_errors
我现在的设置如下所示。
浏览 4提问于2017-11-05得票数 0
回答已采纳
然后将蜘蛛部署到Scrapinghub中，并运行stockInfo spider。没有发生错误，下载的网页在哪里？ f.write(response.body)正如Thiago
浏览 0提问于2019-03-16得票数 7
回答已采纳
我目前正在尝试创建一个机器人，它可以在特定日期向一组人发送电子邮件。我在想如何在特定的日期发送它，比如9月15日，11月15日等。from_address = "myemailaddress@gmail.com"text = "Test message"
message = "Subject: {}
浏览 0提问于2019-09-24得票数 1
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号