首页
学习
活动
专区
圈层
工具
发布
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    爬取京东评论,且修改网址直接可复用哦(送代码)

    爬取的网址url是 https://item.jd.com/12531181.html ,爬取后的结果会保存在csv文件里面,便于数据分析。 01 如何准备爬虫环境?...那么该如何找到评论的网址呢?首先,打开浏览器,比如chrome,然后右键选择检查,调出来网页源代码,如下图: 然后,点击Network选项卡,并且把左边的网页翻滚到评论数,最后搜索COMMEN。...该网址就是我们爬取的网址。 具体的网址是 https://sclub.jd.com/comment/productPageComments.action?...并且当你点击下一页时,您会发现page=2,而网址中的其他信息没有变化,如图所示: 因此,我们构造循环即可实现对多个网页的爬取,比如100个网页,代码如下: if __name__ == '__main...爬取评论并保存文件 python_comments(comments_jd) 04 开始解析网页 第一步 解析网页,也就是编写begain_scraping(),代码如下: 首先,根据爬取的网址

    7.2K50
    领券