腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
3
回答
使用
python
抓取
CSV
数据
、
、
、
我正在做一个基于
数据
集(https://github.com/owid/covid-19-data/blob/master/public/data/owid-covid-data.
csv
)的项目。我只对三列感兴趣,‘大陆’、‘日期’和一个
数据
列。我想添加来自相同大陆和日期的所有
数据
,例如按日期显示每个大陆的
数据
进度。这是我当前的代码(到目前为止,我已经创建了字典和一个递归来用每个日期输入
数据
填充它们
浏览 33
提问于2020-08-16
得票数 0
1
回答
如何在
CSV
中将web
抓取
输出格式化为表格?
、
我从一个网站上提取了一些
数据
,理论上它是一个表格。://sisweb.tesouro.gov.br/apex/wwv_flow.accept', headers=headers, cookies=cookies, data=data) 我想知道如何将
csv
浏览 4
提问于2021-01-19
得票数 0
2
回答
如何
使用
python
从网站的搜索栏中提取
数据
?
、
我想从一个包含许多医生和医院名称的网站中提取
数据
,我想做一些评估,所以我决定
使用
搜索栏,但不幸的是,似乎无法得到我想要的结果! links = soup.select('a') filename = 'AllNames.
csv
浏览 3
提问于2018-06-11
得票数 2
回答已采纳
3
回答
如何用
python
从excel表格中提取不同的表格
、
、
、
在不
使用
索引的情况下,是否有其他方法可以提取表。
浏览 4
提问于2021-09-20
得票数 1
2
回答
从PDF
抓取
数据
到
CSV
?
Python
vs PHP?
、
、
、
我将从(1) HTML,(2)
CSV
/XLS,(3) PDF中
抓取
数据
。我主要是用PHP从
CSV
/HTML中
抓取
数据
,想知道在PHP中有没有什么可靠的库或从PDF
抓取
表格
数据
的方法?我也刚刚开始学习
Python
,并且发现尝试
使用
PDFMiner和Scrapy来做这件事可能是个好主意。这样会更好吗?或者还有其他选择吗? 请让我知道。谢谢!
浏览 1
提问于2011-09-09
得票数 5
回答已采纳
1
回答
使用
Python
将日常大量
数据
导入
csv
的最佳方式
、
、
、
我需要
使用
使用
Selenium的
Python
网络
抓取
数据
,因为我从中获取
数据
的网站会自动创建内容。由于大量的
数据
(行)和特定的网站,我将需要让程序每天运行(可能一个月)。最终,所有
数据
都将存储在
CSV
文件中。 我考虑在insert上将每次迭代的每一行
数据
都复制到PostgreSQL,当我完成
抓取
时,将表复制到
CSV
文件中。我的另一个选择是在每次迭代中逐行打开
CSV
浏览 1
提问于2021-11-24
得票数 0
3
回答
什么是好工具,自动
抓取
网站,检查某些链接,并提取
数据
?
、
我想自动
抓取
大约100万个URL(在一个
CSV
文件上),并检查这些站点是否提供了Facebook登录按钮(即用户可以通过将他们的Facebook帐户连接到站点来创建帐户)。我也想检查网站是否
使用
HTTPS和
使用
cookie。 什么是好工具?
浏览 0
提问于2015-05-18
得票数 3
回答已采纳
1
回答
Scrapy dmoz教程,
csv
文件中没有desc的
数据
。
、
、
我按照Scrapy官方网站上的dmoz教程来
抓取
Python
书籍和资源的标题、链接和描述。在本教程中,我
使用
了完全相同的蜘蛛,内容如下:from tutorial.items import DmozItem "http://www.dmoz.org/Computers/Programming/Languages/<
浏览 3
提问于2015-10-07
得票数 1
回答已采纳
3
回答
使用
Python
中的导出按钮下载/导出站点搜索结果
因此,我试图
使用
Python
从以下网站
抓取
数据
(
使用
示例查询): 通过在控制台中键入函数的名称,我发现
CSV
链接
浏览 2
提问于2020-02-19
得票数 1
1
回答
如何通过
python
向服务器提交表单并从服务器获取
csv
文件?
、
、
、
、
我需要提交一个表格到服务器,并从服务器获得
csv
文件通过互联网与
python
。到目前为止,我总是选择项目和日期,然后单击按钮。然后,当显示文件保存对话框时,我从服务器保留
csv
文件。我想用
python
自动完成这些手工工作。我研究过
python
和web
抓取
,
浏览 0
提问于2014-07-23
得票数 1
2
回答
Neo4j:如果节点已经在
数据
库中,如何避免再次创建它?
、
我有一个关于Cypher请求和
数据
库更新的问题。我有一个
python
脚本,可以在最后进行web
抓取
并生成一个
csv
。我
使用
这个
csv
导入neo4j
数据
库中的
数据
。 刮擦每天做5次。因此,每次进行新的
抓取
时,
csv
都会被更新,新的
数据
会添加到以前的
csv
中,等等。每次刮擦后,我都会导入
数据
。实际上,当我在每次
抓取
之后导入
数据
以更新
浏览 4
提问于2020-12-08
得票数 1
回答已采纳
2
回答
如何逐行读取pdf文件并创建
CSV
、
、
、
我想有一种方法可以删除每一行,并通过迭代或其他方式创建包含列的
CSV
。例如
使用
列填充
CSV
T26 | Texan 26 | 1009 West 26th | 307 | 6x3 | ...
浏览 3
提问于2014-09-17
得票数 0
2
回答
写入大量
数据
时空
CSV
文件
、
、
目前,我正在
使用
Python
3执行
数据
抓取
项目,并试图将已
抓取
的
数据
写入
CSV
文件。我目前的做法是:outputFile.writerow(['header1',但是,该脚本完成后,
CSV
文件将为空。如果我只是跑: import <e
浏览 0
提问于2018-08-03
得票数 1
回答已采纳
2
回答
是否可以从Julia调用
Python
函数并返回其结果?
、
我正在
使用
Python
从web上
抓取
数据
。我想用这些
数据
在Julia中运行计算。 有没有可能在Julia中调用函数并返回其结果,或者我只是导出到
CSV
并以这种方式加载
数据
会更好?
浏览 2
提问于2017-10-09
得票数 3
2
回答
在Windows下每5分钟运行一次
python
脚本
我有一个简单的
python
脚本,从html页面
抓取
一些
数据
,并将结果写出到一个
csv
文件。如何在Windows下自动执行
抓取
,即每五分钟启动一次。 谢谢彼得
浏览 0
提问于2015-01-29
得票数 3
回答已采纳
2
回答
如何在
csv
文件中创建列并在
python
scrapy中插入行
、
请帮助我在
csv
文件中
使用
python
scrapy创建列和在它们下面插入行。我需要将
抓取
的
数据
写入3列。因此,首先要创建三列,然后在每一行中输入
数据
。
浏览 0
提问于2012-01-27
得票数 0
1
回答
轻量级
数据
挖掘+组织和可视化
、
、
、
、
我希望做一些简单的
数据
挖掘,包括每天一次访问单个页面并收集以下信息:今天每家剧院上映的电影每个会话的票的可用性(布尔值为“是/否”) 我想对这些信息进行分类,一年后查看每个电影的覆盖图为此,我不熟悉
数据
抓取
工具或简单的轻量级
数据
库。我对这方面的工作缺乏经验,我希望尽可能少地进行编码。Excel对我来说很好。我曾经有过
使用
Java和C#的经验,但希望避免
使用
火箭筒杀死苍蝇。我目前正在考虑用ParseHub来完成这个任务,但是不确定如何每天合并来
浏览 0
提问于2019-01-22
得票数 0
1
回答
如何
使用
python
抓取
多页网站并将
数据
导出到.
csv
文件中?
、
、
我想
使用
python
抓取
以下网站,并需要将已
抓取
的
数据
导出到
CSV
文件中: 如何在运行脚本后从所有页面
抓取
全部
数据
,以及如何将
数据
导
浏览 2
提问于2016-07-24
得票数 0
0
回答
将
抓取
的
数据
csv
文件从docker容器内部保存到本地主机
、
、
、
我运行一个
python
网络爬行器来收集各种网站上的文章,然后将其保存为
csv
文件。我一直在手动运行它们,但最近一直在尝试在google cloud shell中运行它们。我在依赖项方面遇到了一些问题,所以我决定构建一个docker映像来运行我的
python
刮板程序。CMD
浏览 7
提问于2017-12-07
得票数 0
2
回答
将
python
脚本打包成可执行文件的最好的用户友好方式是什么?
、
、
我是
python
的新手,我正在为一些同事写一个网络
抓取
脚本,它将从给定的网页上
抓取
数据
,并为他们打包成.
csv
。打包这个脚本的最好方法是什么,这样他们就可以点击它,然后输入一些搜索词,然后让它运行并生成一个.
csv
? 谢谢!如果需要澄清,请告诉我,这是我的第一个问题!
浏览 41
提问于2016-08-18
得票数 2
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Python 抓取掘金数据并保存为 CSV
如何使用python的csv模块提取一列数据
使用python 打开并读取 csv 文件
用 Python 将数据写到 CSV 文件
使用Python处理.CSV格式文件的内容
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券