首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

为大家谋福li,利用Python把某网站的所有妹子都爬下来!

这个网站名字叫女神网,里面的女神都非常漂亮性感,所以今天用这个网站来做示例。

ok,我们直接上大家最需要的:

系统环境的话,Windows都可以

装个Python和pycharm就好了,如果没有软件的话可以私信小编要,还有基础学习视频等等~软件安装好之后,win+r在弹出的运行窗口输入cmd按回车进入cmd管理界面,输入:

pip install (加上下面这些库,来一个个安装)

requests、re、os、pymongo、Beatifulsoup、time

例如:pip install requests

安装完后就可以开始了!

来看代码:

最重要的是分析网站:

获得图片链接后,只需要保存访问图片链接的response.content,即可实现图片下载保存。通过os库进行文件夹创建,分类保存。再设置格式,保存至MONGODB数据库

大家赶紧去尝试一下吧!

  • 发表于:
  • 原文链接https://kuaibao.qq.com/s/20181226A1EN7U00?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券