回答情况：
提问时间：
问题标签：
我使用Ubuntu14.04 x64，我遵循Scrapy文档使用pip安装软件包然后，我跟踪示例项目的初始化，并尝试执行示例爬行器。scrapy crawl example2015-02-23 10:23:42+0100 [scrapy] INFO: Scrapy 0.14.4 started (bot: example):
AttributeError: 'module' object has no attribute &
浏览 1修改于2020-06-20得票数 5
回答已采纳
我正在尝试学习scrapy教程，但我被困在了关键的一步，"scrapy crawl dmoz“命令。crawl dmoz
2013-08-14", line 5, in <module>
pkg_resources.run_script('Scrapy==0.16.5', '<em
浏览 1修改于2013-09-21得票数 0
我在python中创建了一个scrapy项目。所以我创建了两个脚本：$ cat dmoz_spider.py
# define the fieldsfor yo
浏览 0修改于2016-01-20得票数 0
回答已采纳
我的问题是我不能将Splash脚本嵌入到我的抓取程序中，Splash正在工作，我设法在的浏览器中呈现了我想要的东西，所以我复制了脚本并尝试使用Scrapy解析html这里是我的爬行器： name = "test"
scriptDUPEFILTER_CLASS = 'scrapy_splash.Sp
浏览 2提问于2018-06-25得票数 0
我已经安装了Miniconda并使用以下命令加载了scrapy：我已经将环境变量设置为包含：现在，在这个糟糕的vitualenv中，当我这样做时：$ scrapy startproject scrapytest 如何在这里使用scrapy命令行工具？
浏览 0修改于2016-05-19得票数 1
现在，我想在windows任务调度程序中调度任务，以便它使用命令行提示符scrapy crawl crawlername执行爬虫程序。有什么有用的帮助吗？
浏览 2修改于2014-10-16得票数 3
所以我用scrapy抓取了站点的一部分，然后在selenium中打开URL。当URL打开时，scrapy仍在继续。如何让scrapy等待我的selenium逻辑完成？
提前谢谢。
浏览 0提问于2016-12-16得票数 0
最近学习scrapy框架，在settings中添加scrapy_redis参数
# Ensure all spiders share same duplicates filter throughDUPEFILTER_CLASS = "scrapy_redis.dupefilter.RFPDupeF
浏览 757提问于2020-03-05
但是当我在startproject文件夹中运行"scrapy crawl dmoz“时，我得到了以下错误消息：2012-04-24 18:12:56-0400 [scrapy] INFO: Scrapy 0.14.0.2841 started (bot: dmoz)
2012-04-24 18:12:56-0400 [scrapy"c:\Python27\lib\site-packages\s
浏览 1修改于2012-10-24得票数 3
我刚接触scrapy，已经在这个简单的程序上花了很多时间，但我搞不懂。我使用chrome检查此页面中所有教授的链接的x路径，并使用控制台测试xpath。import scrapy
from scrapy.contrib.spiders import Rule
class scraperSpider(scrapy.Sp
浏览 4提问于2016-03-18得票数 0
1回答
我已经通过easy_install scrapy安装了scrapy0.14，但是现在我发现scrapy0.24.5更有用，我希望通过pip卸载旧的scrapy并安装新的scrapy，如何卸载旧的？
浏览 4修改于2015-05-06得票数 2
我是Scrapy框架的新手。我需要解析wisemapping.com。起初，我阅读了官方的Scrapy教程，并试图访问一个"wisemap“，但得到了一个错误：
[scrapy.downloadermiddlewares.retry] DEBUG: Gave upGE
浏览 0修改于2017-07-01得票数 1
我正在学习如何在scrapy中使用splash。我正在做这个教程：。$ scrapy crawl spider1DOWNLOADER_MIDDLEWARES = {'scrapy_splash.SplashMiddleware: No module named
浏览 19提问于2017-01-11得票数 0
4回答
我的爬行器运行时没有显示任何错误，但图像没有存储在文件夹中，以下是我的抓取文件：import scrapyimport osfrom scrapy.linkextractors import LinkExtractor}# -*- coding: utf
浏览 71修改于2016-08-05得票数 6
回答已采纳
2回答
import Article2016-06-06 15:45:28 [scrapy] INFO: Scrapy 1.0.3 started (bot: TestScrapy)
2016-06-06 15:45:28 [scrapy] INFO: Optional features available: s
浏览 3提问于2016-06-06得票数 0
4回答
这里有没有成功使用Scrapy的人可以帮我完成这个爬虫？from scrapy.contrib.spiders import CrawlSpider, Rulefrom scrapy.selector import HtmlXPathSelector
from scrapy.item import Item
浏览 1提问于2009-11-28得票数 9
回答已采纳
我已经用pip install scrapy_proxies安装了scrapy_proxies。但是，每当我运行爬行器时，我都会得到以下错误日志：2018-09-13 01:15:19 [scrapy.utils.log]INFO: Scrapy 1.5.0 started (bot: allevents)
2018-09-13 01:15:19 [scrapy.utils.log] INFO: Versions:
浏览 3修改于2018-09-12得票数 1
4回答
我试图在python 3.7中导入scrapy，得到了这个错误： import scrapy File "<stdin>",\__init__.py", line 34, in <module> File "C:\Users\User\AppData\Local\Programs\Python\Python37-32\lib\
浏览 55修改于2020-05-05得票数 0
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号