如何在heroku上让我的django应用程序在后台自动抓取
在Heroku上让Django应用程序在后台自动抓取数据，可以通过以下步骤实现：
- 创建一个Heroku账号并登录。
- 在Heroku上创建一个新的应用程序。
- 将你的Django应用程序部署到Heroku上，可以使用Heroku提供的CLI工具或者通过GitHub等版本控制系统进行部署。
- 在Heroku的应用程序设置中，找到"Resources"选项卡。
- 在"Add-ons"部分搜索并添加一个定时任务插件，例如Heroku Scheduler。
- 配置定时任务插件，设置定时触发的时间间隔和执行的命令。
- 在你的Django应用程序中，创建一个后台任务（例如使用Celery），用于执行数据抓取的操作。
- 在定时任务的命令中，调用后台任务的执行命令，以触发数据抓取操作。
这样，你的Django应用程序就可以在Heroku上后台自动抓取数据了。
关于Heroku和Django的更多信息，你可以参考以下链接：
- Heroku官方网站：https://www.heroku.com/
- Heroku Scheduler插件：https://elements.heroku.com/addons/scheduler
- Django官方网站：https://www.djangoproject.com/
- Celery官方文档：https://docs.celeryproject.org/en/stable/
相关·内容
我正在尝试弄清楚如何让我的应用程序在后台使用抓取站点的功能，因为它需要很长时间，如果在前台运行会导致错误。所以我遵循了Heroku网站上的教程，该网站有一个统计单词的功能，并在后台运行。它起作用了。我甚至尝试在my_task.py中创建函数，运行它并得到相同的回溯
浏览 5提问于2016-08-09得票数 0
我已经在Heroku上部署了一个Django应用程序。应用程序本身运行良好。我的Django项目使用了名为Scrapy的Python web抓取库。Scrapy附带了一个名为scrapy crawl abc的命令，它可以帮助我抓取我在scrapy应用程序中定义的网站。当我在本
浏览 1提问于2012-01-27得票数 3
回答已采纳
我不能迁移到Heroku上。使用Django和MySQL。我不知道它有什么问题。setting_mysql.py上有一些错误吗？Running python manage.py migrate on ⬢/site-packages/django/db&
浏览 1提问于2021-05-18得票数 0
1回答
我们在heroku上为我们的Ruby on Rails应用程序提供了后台(resque)工作。我们的后台作业大约运行2-6个小时。有没有办法让它们保持运行，或者在失败后自动重启？
浏览 1提问于2012-07-13得票数 1
我有一个由heroku托管的网络抓取应用程序，我用它来抓取大约40个公司网页。其中的27个几乎总是在heroku上给我403个错误，但是如果我在本地运行代码，每个页面都工作得很好。在运行应用程序大约25分钟后，收到403个错误(时间范围变化很大)，所有页面都神奇地开始工作，但如果应用程序重新启动，将再次返回403秒。
我
浏览 17提问于2020-02-16得票数 2
我在django中遇到了这个静态文件的问题。我成功地将django应用程序部署到heroku，这个站点在中工作，但是您可以在没有任何样式或图像的情况下查看。但是，如果运行python本地运行良好，并且我可以看到样式、js代码和图像，请告诉我这里有什么问题是我的manage.py文件：Django</
浏览 2提问于2021-08-05得票数 0
回答已采纳
我是Django和Heroku的新手。我的安装在本地运行良好，但当它推送到Heroku时，我无法在我的站点中看到css、js或图像。这是我的url模式： # Examples:
# url(r'^$', 'blog.views.home'
浏览 3提问于2012-08-05得票数 1
回答已采纳
1回答
在开始使用Heroku上的Python之后，我启动了我的第一个应用程序。一切看起来都很好，但是过一段时间(也许几个小时)，数据库就会重置。我对根本原因的假设是，我的django应用程序使用的是默认的django数据库(我认为是SQLite)，Heroku默认
浏览 2提问于2016-02-17得票数 8
回答已采纳
我的项目涉及一个Django网站，该网站使用从web抓取脚本生成的.csv文件中的数据，该文件需要托管在Heroku上。我的开发操作系统是Windows10。当我的开发服务器运行时，它最初在主应用程序的views.py文件下执行脚本：
exec(open('homepage/scrape.py').
浏览 9提问于2020-06-28得票数 0
1回答
我一直在我的heroku服务器上运行python manage.py makemigrations，但是不管我运行了多少次，我都会得到： 0002_auto_20141120_2007.py:如果我</
浏览 6提问于2014-11-20得票数 6
回答已采纳
1回答
我已经成功地使用Postgres将Django应用程序部署到Heroku。唯一的问题是，我编写的一些python函数可能需要几分钟才能运行(数据用selenium抓取许多页面，用keras生成50个不同的深度学习模型)。如果超过30秒，应用程序就会崩溃。我最终计划使用这个Heroku应用程序作为API，我将通过在netlify<
浏览 3提问于2022-04-14得票数 0
我的Django应用程序正在Heroku上运行。最终，我想在亚马逊S3上存储原始和处理过的图像文件。我的第一个版本的代码通过在S3上存储所有文件来工作，但偶尔会遇到Heroku30秒应用程序错误消息，这意味着请求的往返时间超过30秒。我修改了代码以上传和处理dyno的
浏览 3提问于2014-06-17得票数 0
回答已采纳
2回答
我可以在本地机器上访问我的RDS postresql数据库，没有问题。Heroku，在/saferdb/ ProgrammingError /上得到了一个查询>>> from saferdb.models(using=self.db)
File "/app/.<e
浏览 2提问于2018-01-30得票数 3
回答已采纳
我在Heroku上部署了我在Docker中的项目，其中包含了角4前端、Django后端和Postgresql数据库。此时，我的文件如下所示。我使用docker exec -ti name /bin/bash，然后添加python {path}\manage.py migrate和数据库。
也许我在Heroku上的</e
浏览 0提问于2017-07-13得票数 3
回答已采纳
我有一个向客户发送电子邮件的Django应用程序。我希望这个应用程序在一段时间后在后台运行，就像一个作业/报价过程。用Python/Django做这件事最好的方法是什么？
浏览 0提问于2016-10-07得票数 2
我需要经常使用Heroku监控Twitter流。基本上，我想要做的是启动监控进程，并且永远不会停止。我正在研究芹菜，但据我对它的理解，它看起来像是一个用户发起的或短期的进程将任务添加到队列中，然后由另一个队列处理。这与让后台进程不断监视Twitter流是不同的模型。在Heroku上监控Django应用程
浏览 3提问于2012-01-30得票数 2
回答已采纳
我有一个两年前的老项目，我想把它放到另一个Heroku上(所以如果第一个停止工作，它是可以访问的)。最初我在Linux上构建这个项目，现在我在Windows上。我克隆了Github项目，添加了.env文件(用于API调用)，并试图将其推送到新的Heroku页面。它一开始不起作用，所以我安装了Nodejs和Python。我
浏览 7提问于2022-04-11得票数 -1
更新:错误不是由django-存储引起的，而是由django-heroku造成的。
似乎django-heroku覆盖了导致这种行为的一些变量。见下面的答案。我一直在使用S3作为其他Django应用程序的存储服务，但是对于一个新项目，Django拒绝拿起正确的后端，继续将文件放在本地文件系统上而不是上传。确切地
浏览 1提问于2020-04-09得票数 0
回答已采纳
部署在heroku中的django应用程序成功地显示了上传文件表单。我确信我的models.py与mapdict参数是正确匹配的。我看到了类似的问题，和我试着安装pyinstaller以及隐藏的导入--hidden-import pyexcel_xls.xlsr但不幸的是，它对
浏览 5提问于2021-10-31得票数 0
回答已采纳
我使用Django(1.10.6)编写了一个应用程序，并通过Github的自动部署将其部署到heroku。然而，在部署之后，Heroku上的项目在数据库中有一些bug：relation "sport_facility" does not exist
LINE 1因此，我通过Heroku Git进行部署，它工
浏览 3提问于2017-03-29得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
