当我试图通过GitHub使用网站将我的Scrapy项目导入到Scrapinghub时，我得到了这个错误： ModuleNotFoundError: No module named 'sfb' 下面是我的项目结构： requirements.txtsfb----------middlewares.py
浏览 15提问于2020-07-07得票数 0
我最困惑的地方是如何正确地向Scrapy Cloud和Scrapinghub提供API凭据，以便将解析后的项目发送到Google Cloud。我目前将我的脚本存储在Github上，并将其自动更新到Scrapy Cloud。这是为了使我的项目更容易更新，也是为了让其他人可以看到我的项目进度。我不相信我既可以手动上传JSON文件到Scrapy Clo
浏览 26提问于2018-09-07得票数 0
我在scrapy中开发了几个爬虫&我想在Heroku云上测试它们。有没有人知道如何在Heroku云上部署Scrapy spider？
浏览 1提问于2012-10-08得票数 11
回答已采纳
1回答
在安装scrapy之后，当我尝试运行它时，会收到以下错误消息：
回溯(最近一次调用)：文件"/usr/local/bin/scrapy"，第7行，从"/usr/local/lib/python3.4/dist-packages/scrapy/init.py"，scrapy.cmdline导入执行文件>34，在scrapy</
浏览 3提问于2017-11-12得票数 0
1回答
例如，在我的项目中，我有以下模式：├── __init__.py├── pipelines.py├── spidersfrom scrapy.crawler import Crawlerimport scrapy
class runSpi
浏览 4提问于2015-11-02得票数 0
回答已采纳
2回答
然而，当我运行我的蜘蛛scrapy crawl keizer -o allobjects.json，
]我已经在这里查看过并阅读了有关相关导入的内容，但是我不知道如何将建议的解决方案映射到我当前的项目结构中，因为它们是完全不同的。如果我<e
浏览 2提问于2021-11-01得票数 0
回答已采纳
我正在尝试编写我的第一个抓取蜘蛛，我一直在上的教程，但我得到一个错误"KeyError：‘蜘蛛找不到：“scrapy scrapy.cfg(proscraper)#( 10/14/14@ 2:13pm )( tim@localhost ):~/Workspace/
浏览 2提问于2014-10-14得票数 6
回答已采纳
我遵循这个链接，它通常是工作的，但是如果我使用conda虚拟环境中的scrapy，就会得到from scrapy import cmdline
cmdline.execute
浏览 0提问于2019-04-08得票数 1
当我试图从我的items.py文件导入quote_spider.py时，它似乎被VSCODE识别了，但是我一直收到一个导入错误。我完全被困住了。"，第7行，在模块中ModuleNotFoundError:没有名为“项”的模块
import syssys.path.append('scrapy_test_projec
浏览 2提问于2021-07-23得票数 1
我不知道为什么，但最近出了个错误： class ScrapySpider(scrapy.Spider):我的完整代码：
import scrapy
浏览 7提问于2019-12-17得票数 1
回答已采纳
Scrapyd是我们可以认证部署项目的服务。然而，我正面临一个问题。我有一个名为MyScrapers的项目，它的蜘蛛类使用以下导入语句：通往my_base_spider的路径是/home/myprojectset/mylibs/common/my_base_spider
在设置环境变量PYTHONPATH=$HO
浏览 14提问于2012-11-10得票数 3
回答已采纳
当我尝试运行scrapy时，我得到了这个错误ImportError:没有模块命名的项目不知道为什么它不加载它...
浏览 0提问于2012-05-13得票数 21
回答已采纳
1回答
我使用以下命令设置项目：所以__init__.py文件已经存在了。这是我的爬行器canada_411Spider.py中的代码(与项目文件夹的名称不同)from scrapy.selectorimport HtmlXPathSelector
当我尝试
浏览 0提问于2013-04-16得票数 1
4回答
我有一个非常基本的爬行器，遵循入门指南中的说明，但由于某些原因，尝试将我的项目导入到我的爬行器中会返回一个错误。Spider和items代码如下所示：from scrapy.selector import HtmlXPathSelector"website.com/start"
def parse(self, response
浏览 3提问于2013-04-14得票数 4
回答已采纳
我想将我的设置分成production.py和local.py。不同的设置加载在不同的环境中，我在ENV变量SCRAPY_SETTINGS_MODULE中将其定义为project.local或project.production。问题是，每当我定义ENV并运行scrapy crawl myspider时，就会得到以下错误：
如果我不定义S
浏览 0提问于2018-02-13得票数 1
1回答
这是我的文件夹布局：
ImportError:没有名为scrapy_project.settings的模块现在我确实导入了Django<
浏览 4提问于2015-01-23得票数 3
回答已采纳
我正试图在我的新笔记本电脑上安装我的Android项目，但我遇到了一些麻烦。我的项目在我的个人电脑上工作很好，这只是新的设置，我无法得到正确的工作。项目文件正在正确构建，但它不会在项目视图中显示。我能打开的文件在一个圆圈中显示一个红色J。所有更新或拉出的尝试都以“最新的所有文件”结尾。
这是指向我的github配置文件<e
浏览 2提问于2016-11-29得票数 0
回答已采纳
我正在尝试创建一个Scrapy自定义项目命令来运行蜘蛛。导入get_project_settings从scrapy.crawler导入Crawler类命令(ScrapyCommand)：requires_project = True def语法(Self)：’：‘crawlall=cnblogs.Command:crawlall’，，} )
回溯(最近一次调用)：文件"/usr&
浏览 2提问于2015-06-15得票数 2
3回答
我在一个非常简单的示例代码(如下所示，来自一个教程网站)上运行Scrapy，以测试它是否正确设置。我复制的代码如下：import scrapy
name = 'redditbot= ['http://www.reddit.com/r/gameofthrones//']
de
浏览 0提问于2018-07-10得票数 0
云服务器
ICP备案
对象存储
云点播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号