首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

妹子图网站反爬措施各不同,奈何Python也有过墙剃!

本次开发环境Python3.6最新版,再也别说我落伍了!全网出名的妹子图网站反爬的措施都不相同,所以我们要采取不同的“过墙剃”去解决!能够开拓你的Python反反爬技巧。

思路:

运行程序后进入文件夹查询

获取人物每页图片

下载完成后改用requests.get方法获取图片内容,这种请求方法方便设置头文件headers,headers里面有个Referer参数,必须设置为此图片的进入地址,审查元素代码可以看出来

431行,实在不是为了秀,只是为了让大家看的更清楚,而且确实可行!

用Chrome无头浏览器需要Chrome60以上版本,chromedriver也可以。

  • 发表于:
  • 原文链接http://kuaibao.qq.com/s/20180304A0M67100?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券