一、先看一下效果
获取的全国疫情数据:
可视化后的效果:
二、环境以及模块
环境
python3.8
pycharm2021
模块
json
requests 爬虫当中 发送网络请求
pandas 表格处理 / 保存数据
pyecharts 可视化
三、爬虫(采集网络当中数据 文本 图片 视频 音频)流程:
1. 明确需求
我们要爬取的内容是什么? 分析数据从哪里来的 https://news.qq.com/zt2020/page/feiyan.htm#/ 用开发者工具 进行抓包(数据包)分析
2. 代码流程
1.发送请求 访问网站 https://view.inews.qq.com/g2/getOnsInfo?name=disease_h5&_=1638361138568
2.获取数据
3.解析数据
xpath css re json bs4(过时了)
json 在python语言当中 字典类型数据
4.保存数据
3.数据分析 数据可视化
四、代码
1.获取数据,保存数据
2.数据可视化
大功告成!
喜欢记得三连哦!
领取专属 10元无门槛券
私享最新 技术干货