首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

花瓣简单的爬虫-01

人生苦短,我用Python!

运行效果

最近沉迷爬虫,感觉超级方便

记录一下

这是简单的爬虫程序,用到urllib和re

后期版本再加:动态加载,cookie登录

下面放代码

思路:①使用request.urlopen()打开花瓣内容的URL,获取到的HTML使用正则表达式搜寻并获取pins的图片关键字。②获取到关键字之后直接补全图片URL并同样获取HTML。③使用正则表达式获取真正的图片SOURCE(使用[:-6]删除后缀(无用信息))。④获取到的SOURCE补全后使用request.urlretrieve()下载图片并保存到指定的文件位置。

【完】

PS:代码入门级别,用作个人记录使用。

2018年3月23日 二月初七

  • 发表于:
  • 原文链接http://kuaibao.qq.com/s/20180323G1C9GO00?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券