这是我的蜘蛛。在我执行了蜘蛛之后，什么也没有出现。我不知道为什么它是空白的。我觉得问题在于收益和回报，但我不知道如何改变它。import scrapyfrom scrapy import Selector
class CSDNBlogSpider(<e
浏览 1提问于2017-02-06得票数 0
回答已采纳
2回答
我的一个程序周期性地崩溃，但我不知道为什么。我正在调试模式下运行它，但是没有弹出任何东西。程序突然退出。我也有其他的bug抛出了exception...but，不是这个。有没有什么神奇的方法可以抓到它？
浏览 1提问于2010-09-25得票数 10
回答已采纳
我正在尝试从国际商会网站上废弃前100名t20击球手，但是我得到的csv文件是空白的。我的代码中没有错误(至少我不知道)。这是我的项目文件 Ranking = scrapy.Field()
浏览 2提问于2016-05-22得票数 0
回答已采纳
在涡轮齿轮development.ini文件中，有一个类似于以下内容的值：
beaker.session.secret对象的base_config键包含用于存储用户会话的秘密。当您创建一个项目时，幽门会自动为您生成一个随机的
浏览 1提问于2013-12-29得票数 0
回答已采纳
我的crontab中有以下条目：然而，这个任务没有运行。更糟糕的是，日志文件是创建的(但是没有内容-文件大小0)，所以我没有</e
浏览 5提问于2017-10-27得票数 1
回答已采纳
我正在迁移到Windows，并希望让Scrapy与Pycharm一起工作。我尝试添加以下内容：以及更改- /Library/Python/2.7/site-packages/scrapy/cmdline.py我的输出如下所示-
from scrapy import cmdline
浏览 0提问于2017-11-16得票数 0
我在查询xml文档中的节点时遇到一些困难。该文档为我尝试过这些查询，但似乎都不起作用。captionedimage[1]//RelatedImages/*[1]
非常感谢您的帮助
浏览 0提问于2013-04-20得票数 0
回答已采纳
1回答
我已经建立了一个简单的刮板下载图片从一个网站。不幸的是，我在下载这些图片时遇到了问题，所以没有任何东西被下载。我曾在网上搜索过类似的问题，并练习过这些，但对我来说不管用。我以前做过这项工作，所以我不明白为什么现在不行了。我的刮刀：from scrapy_exercises.items import ScrapyExe
浏览 4提问于2022-07-05得票数 1
回答已采纳
关于scrapy正在使用的python版本的快速问题。我在archlinux上从AUR存储库安装了scrapy，它默认使用python 2.7。Scrapy支持python 3.3+。有没有人知道如何在不卸载2.7的情况下强制使用3.3，在网上找不到任何东西。
浏览 4提问于2016-12-15得票数 5
2回答
我是一个新手，我已经将下面的代码插入到scrapy.cfg文件中。deploy:scrapyd2]username = john如果我在代码代码下面运行$scrapyd-deploy -lscrapyd2 http://scrapyd.mydomain.com/
浏览 1提问于2014-10-03得票数 1
3回答
因此，我一直试图使用管道中的请求库来尝试下载PDF。但是，PDF下载时总是0字节。我得到了一个错误:错误处理URL，它可以追溯到我发出原始请求的那一行，尽管我似乎无法根据我以前读过的问题和文档找到问题所在。URL通过Item URL字段传入。有人能告诉我我做错了什么吗。pipelines here# Don't forget to add your pipeline to the ITEM_PIPELINES setting
# See: http:&#
浏览 6提问于2015-12-03得票数 0
回答已采纳
如果有人能回答我，请给我一个电话。我知道这样也许不适合问这个问题
我用Java 8中的套接字创建了聊天应用程序，我使用了TLS 1.2，我的问题是:是否有人可以读取我发送的数据(他可以解密)？我应该注意的是，我使用的服务器只用于向目标客户端发送传入消息(而不是在其上存储任何内容)。我问这个问题是因为我一直在想，如果有人使用<em
浏览 0提问于2022-12-18得票数 1
1回答
几个月来，我一直在使用scrapy来验证我网站上的链接，它非常适合爬行我的整个站点。现在我试图更新我的脚本以禁用递归，我只想刮一组特定的URL，到目前为止我还没有成功。这是siteScrape.py的内容from scrapy.http import HtmlResponse
fr
浏览 2提问于2021-02-26得票数 0
如果有人能回答我，请给我一个电话。我知道这样也许不适合问这个问题
我用Java 8中的套接字创建了聊天应用程序，我使用了TLS 1.2，我的问题是:是否有人可以读取我发送的数据(他可以解密)？我应该注意的是，我使用的服务器只用于向目标客户端发送传入消息(而不是在其上存储任何内容)。我问这个问题是因为我一直在想，如果有人使用<em
浏览 0提问于2022-12-18得票数 0
回答已采纳
这可能是一个重复的问题。我正在尝试运行一个Scrapy爬虫，但无法运行。为什么我得到错误信息"HtmlResponse没有属性urljoin"？如果request_count是3，response_count也是3，那么Scrapy统计数据意味着什么？我的代码在这里。在这件事上如果能有任何帮助，我将不胜感激。import scrapy
from scrapy.h
浏览 2提问于2016-09-28得票数 0
1回答
我试图用一个简单的爬虫来抓取这个链接https://tonaton.com/en/ads/ghana/electronics，但是scrapy没有抓取这个链接。我不知道我的代码出了什么问题。下面是我的代码。 import scrapy
name =
浏览 11提问于2021-08-27得票数 0
回答已采纳
我试图在Windows10上学习BashOnUbunty上的Scrapy，我使用gen蜘蛛命令创建了一个蜘蛛(yelprest)，然后通过创建蜘蛛文件(遵循官方教程)直接创建了另一个蜘蛛(quotes_spider第一个蜘蛛还没有测试，但是我试着用第二个蜘蛛来完成教程，当我尝试运行时，我得到了一个指向第一个蜘蛛的错误。此外，当我尝试运行任何其他刮取命令(如version )时，我会得到与上面相同的错误。以下是错误：
(BashEnv)
浏览 2提问于2017-10-30得票数 0
回答已采纳
1回答
项目：sudo scrapy crawl indeed_resume -o items.csv/home/shap/Desktop/resume_crawlers/resume_scraper-master/resume_data/spiders/resume
浏览 3提问于2017-01-09得票数 0
回答已采纳
我使用芹菜安装远程服务器使用织物。class ChangeBackStatusOnErrorTask(celery.Task): db.session.commit() raise
浏览 6提问于2017-07-16得票数 0
1回答
我正在尝试创建一个虚拟环境来安装scrapy。我使用以下命令安装了它：然后我创建了一个虚拟环境并检查了pip freeze。它向我展示了基本的包。我激活了虚拟环境并安装了scrapy，使用：这些包也可以在venv之外访问，我可以使用以下命令查看/usr/bin中的剪贴画：
which
浏览 8提问于2017-07-10得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
