腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
从
Postrgresql
抓取
数据
到
Django
、
、
、
、
我刚接触Postgresql (以及一般的
数据
库),并且我有一个填充了大量
数据
的
数据
库。但现在我需要访问这些
数据
并创建模型,在管理员中注册它,等等。有人知道我如何做到这一点吗?这是我检索
到
的
数据
:https://github.com/guenthermi/the-movie-database-import
浏览 18
提问于2020-04-18
得票数 0
回答已采纳
2
回答
在
数据
库中存储爬网站点的最佳解决方案
、
、
、
我想在
数据
库中存储
抓取
的网站(html代码)。网站数量将会达到数百万。我将在该网站搜索特殊字符串。 我现在使用的是
PostrgreSQL
,但我怀疑关系
数据
库是否合适。也许是一些NoSQL的灵魂?
浏览 3
提问于2011-12-27
得票数 0
回答已采纳
6
回答
如何在
Django
ORM中映射PostgreSQL数组字段
、
、
、
我的
PostrgreSQL
数据
库中有一个文本类型的字段。有没有办法将其映射到
Django
模型中?
浏览 0
提问于2010-12-10
得票数 14
回答已采纳
1
回答
气流最佳实践--如何正确地处理工作流
我正在实现一个简单的工作流,其中我有三个不同的
数据
源(API、parquet文件和PostgreSQL
数据
库)。目标是
从
所有不同的源收集
数据
,并将其存储在PostgreSQL仓库中。我预测的任务流程如下:为了使其工作,
浏览 5
提问于2022-10-24
得票数 1
1
回答
从
SQLite切换到postgres,postgres要求输入密码
、
、
、
“让我们为PostgreSQL
数据
库创建一个用户。我运行了pip install postgres (不知道这是否会下载一些东西,但它确实下载了,所以我没有去网站/也不知道如何
从
网站将其安装到这个环境中)。我这样做了,现在我在Justins-MBP:~ root# (这似乎与我正在尝试使用postgres db的
django
项目一点关系都没有)。任何关于如何正确切换
数据
库的帮助都将不胜感激。 此外,在输入所有这些内容并思考我所做的事情之后,我意识到我还没有更改python项目的
数据
库设置。但这本
浏览 26
提问于2020-02-14
得票数 0
回答已采纳
1
回答
在
Django
中向用户显示Scrapy结果
、
、
我对Python非常陌生,我正在尝试将Scrapy与
Django
集成。 实现这一目标的最佳方法是什么?我玩过
Django
动态刮刀,但我认为我最好保持对Scrapy的控制。
浏览 2
提问于2014-01-17
得票数 0
回答已采纳
5
回答
Cassandra还是MySQL/PostgreSQL?
、
、
、
、
我有一个庞大的
数据
库(有点像wordnet),我想知道使用Cassandra是否比使用MySQL更容易|
PostrgreSQL
我一生都在使用MySQL和
PostrgreSQL
,我可以很容易地
从
关系代数的角度来思考现在通常使用什么DBMS来存储社交网络的
数据
,对象之间的关系,wordnet?
浏览 2
提问于2010-03-27
得票数 20
回答已采纳
1
回答
按需清空Hibernate缓存
、
、
、
、
PostrgreSQL
上的
数据
库。在发布the服务之后,它可以完美地运行。有没有办法告诉Hibernate清空缓存或
从
数据
库重新加载
数据
,这样它就会采用最后可用的值? 谢谢!
浏览 2
提问于2010-06-29
得票数 1
回答已采纳
2
回答
Java中最有效的多线程
数据
库插入
、
、
、
、
我们必须将大量
数据
从
HDD (~50 to )读入我们的
数据
库,但是我们的多线程过程非常慢(~2h (~10 to)),因为org.sqlite.core.NativeDB.reset[native]内部有线程锁我们读取
数据
的速度相对较快,并使用insert方法执行准备好的语句。但是,只有当我们收集500.000个
数据
集时,我们才会将所有这些语句提交到
数据
库中。目前,我们使用JDBC作为sqlite
数据
库的接口。 到目前为止,如果使用一个线程总数,所有操作都很好。我们已
浏览 0
提问于2017-05-04
得票数 0
回答已采纳
1
回答
使用
Django
Rest框架将被刮过的HTML
数据
作为API提供
、
、
、
我试图构建一个面向公众的API,通过
抓取
HTML收集
数据
(页面的内容才是最重要的,而不是页面本身)。我选择使用
Django
-Rest-Framework作为我的后端。我的问题是:如何组织这个项目的结构,以便
Django
ORM存储被刮过的内容,然后可以使用
Django
-Rest的API?访问它。我研究过Scrapy,但这似乎不那么关注内容
抓取
,而是更多地关注and爬行。此外,它还部署在自己的项目中,这与
Django
的引导冲突。 我最好的投注是在运行cronjobs吗?这
浏览 1
提问于2018-04-06
得票数 0
1
回答
django
dumpdata ORM + mongoengine
、
我有一个使用postgresql的
django
设置来包含所有的
django
模型
数据
,但我也有一个管理(让我们称之为它们)扩展
数据
的mongoengine。我还有一个循环引用(
从
django
模型
到
mongoengine文档PK的mongo_id点,以及
从
mongoengine
到
django
模型PK的db_id点)。显然,如果我运行dumpdata,我只能得到
django
模型
数据
。我怎
浏览 2
提问于2013-03-09
得票数 1
2
回答
多个nginx实例,以便将
Django
项目分开
、
、
、
、
我正在Debian 6上使用
Django
+
PostrgreSQL
+ Nginx构建一个应用程序。这个应用程序有两个独立的组件,以后会在不同的机器上。我想要分离这些组件,这样Comp B的暴露就不会导致Comp A中的敏感
数据
暴露,为了这样做,我正在考虑在不同的linux用户下运行两个nginx实例然后运行组件B的用户无法看
浏览 0
提问于2012-08-22
得票数 1
1
回答
在通过ODBC连接到PostgreSQL的Access中编辑新记录时发生冲突
、
、
我有一个设置,Microsoft 2010作为前端,
PostrgreSQL
服务器9.5.12作为后端运行在Linux上。Windows已经安装了
PostrgreSQL
ODBC驱动程序版本的10_02_0000 (当前最新版本)。我遇到的问题是,
从
Access添加的新记录立即被锁定,之后不能修改/删除。我绝对是唯一一个访问
数据
库的人,我可以修改/删除旧记录,不会有任何问题。这个问题只发生在我自己创造的唱片上。
浏览 0
提问于2018-04-14
得票数 2
回答已采纳
1
回答
如何使用python将CSV
数据
转储
到
postgresql表中
、
、
我有一个CSV文件,我需要使用python script.Also将其
数据
转储
到
postgresql表中,以便在
postrgresql
中创建一个动态表。 帮助我,如果知道任何现成的工具或传统的方式。
浏览 2
提问于2014-06-06
得票数 0
1
回答
如何在芹菜任务中启动的asyncio协同例程中利用
django
模型?
、
、
、
、
我重构了一些
django
代码来做一些web
抓取
。我为每个要
抓取
数据
的用户启动一个单独的Celery Task。在每个Celery任务中,我使用asyncio和aiohttp为给定的用户进行
抓取
。我可以访问我的所有
django
模型类和方法,但一旦我触发实际的
数据
库查询,我就会收到如下错误: ... [2019-02-16 18:04:38,126] WARNING log /home/chrisadmin在Celery任务中,只要不涉及asyncio,
浏览 23
提问于2019-02-17
得票数 0
2
回答
如何
从
Django
应用程序中
抓取
数据
、
作为练习,我想出了以下
Django
项目的想法:一个web应用程序,有一个按钮
从
Airbnb刮取房间
数据
,还有一个文本区域以排序的方式显示检索
到
的
数据
。最好,为了
抓取
,我想使用Selenium,因为这个页面没有API。因此,按钮需要启动浏览器自动化。 因此,第一个问题是:是否有可能从一个web应用程序中启动selenium?此外,我已经有了收集
数据
的工作脚本,但是我不知道如何将它安装到
Django
项目中:模型、视图、单独的脚本?我最初的想法是在单击按钮时
浏览 0
提问于2018-03-10
得票数 0
回答已采纳
1
回答
返回
django
Rest api Get上的
抓取
蜘蛛响应
、
、
、
我已经在管理/命令中创建了
Django
命令来访问
抓取
爬虫,并且在完成
抓取
操作之后,将
数据
保存在特定的模型中。由于我想将保存的
数据
返回到相同的GET请求,所以我有几个关于它的问题。如何在GET请求中返回
数据
?因为我找不到
从
抓取
器中获取返回
数据
的方法。假设GET请求正在等待,现在我必须验证
数据
库中是否存在相应的
数据
到
params。假设<em
浏览 9
提问于2022-08-15
得票数 1
5
回答
如何
从
其他网站获取
数据
?
、
、
、
我想创建一个网站,
从
其他网站提取信息,并将它们打印到我的网站上,我正在进行研究,所以我想听取一些意见,这个项目的最佳解决方案是什么?
浏览 1
提问于2013-06-14
得票数 4
2
回答
在PostgreSQL和
Django
中创建对象
、
、
我正在尝试使用
从
网站
抓取
的
数据
在我的PostgreSQL中创建行。 我很确定我的方法是错误的。这是我的一个
Django
应用程序中的tasks.py,它应该进行
抓取
,然后将
抓取
的
数据
添加到db中: from models import Movies year = models.IntegerField(max_length=4) rating = models.Floa
浏览 3
提问于2021-05-11
得票数 0
1
回答
我能拦截表单提交
数据
与AJAX一起使用吗?
、
、
、
、
我有一个
Django
应用程序,它显示了选择项中的项目列表。当用户更改所选项目时,我使用AJAX将表单(使用
Django
的表单和formset )插入
到
页面中的"content“部分,以编辑该项的
数据
。我想做的是,当用户单击表单上的"Save“按钮时,Javascript函数会像表单已经提交一样发送POST
数据
,然后再次使用AJAX
从
页面中重新弹出新
数据
。我希望不必
抓取
所有的表单字段,并重建我的
Django
表单将正确
浏览 0
提问于2013-08-28
得票数 2
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Django数据从sqlite迁移数据到MySQL
Django学习笔记3:Python编程从入门到实践Django篇
使用Django迁移MySQL数据到PostgreSQL
Django从模型到后台到模板完整开发图书列表的简易案例
python编程:从入门到实践学习笔记-基于Django框架的Web开发-Django入门(三)
热门
标签
更多标签
云服务器
ICP备案
云直播
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券