我是网络解析的新手，想做一个程序来获取网页上所有的内部和外部链接，我根本不知道怎么做，我写的所有东西都是这样k = sss.get('https://en.wikipedia.org/wiki')
hhh = HTML(html=k.
浏览 11提问于2020-05-30得票数 0
回答已采纳
2回答
从无限滚动网站抓取内容
、、、
我试图在一个无限滚动的网页上擦拭链接。我只能获取第一个窗格上的链接。如何继续前进，以形成一个完整的清单上的所有链接。到目前为止，我的情况是-import requests
html = "https:/
浏览 5提问于2020-02-15得票数 3
回答已采纳
当我右键单击一个页面，然后单击另存为并将其另存为html时，它会保存页面上的所有内容，包括图像。但是，当我使用python的requests.get时，它会保存html页面，而不保存图像。它们显示为断开的链接，如下所示： Broken images 而不是像这样： Working images 如何让requests.get获取网页上的<
浏览 14提问于2021-03-19得票数 0
3回答
我正在寻找一种用python下载pdf文件的方法，我看到了推荐urllib模块的其他问题的答案。我试图用它下载一个pdf文件，但当我试图打开下载的文件时，会出现一条消息，指出该文件无法打开。这是我用的代码-urllib.urlretrieve("http://papers.gceguide.com/A%20Levels/Mathematics%20(9709)此外，该文件会自动保存到我的python文件所在<
浏览 8提问于2017-05-10得票数 7
我正在尝试抓取一个网页，并使用Python3.6中的Beautiful Soup和requests模块检索网页上嵌入的视频的URL。当我在Chrome中查看网页上的超文本标记语言时，我可以看到视频的.mp4链接。但是当我使用requests和Beautiful Soup获取页面时，我找不到"video
浏览 25提问于2020-08-26得票数 4
我在使用BeautifulSoup从网页中提取特定链接时遇到了困难。具体的网页是def drinkScraper(url, se
浏览 6提问于2017-04-21得票数 0
回答已采纳
我希望解析出一个网站使用bs4的链接。我试着避免使用正则表达式。year={year}&month={month}&day={day}" soup = BeautifulSoup(page.content, 'lxml')html_links = soup.find_all('
浏览 7提问于2021-01-24得票数 0
我用的是nutch和scrapy。它们需要种子URL才能爬行。这意味着，人们应该已经意识到包含正在搜索的文本的网站/网页。有没有一种方法可以抓取给定文本的网站/网页，而不需要知道任何可能包含该文本<
浏览 0提问于2016-01-20得票数 0
我想在打开url几秒钟后获取html-text。import requestshtml = request.get(url).text
浏览 1提问于2017-05-17得票数 2
1回答
我正在使用Python3.3中的Beautifulsoup4和Soupstrainer来获取网页上的所有链接。('a')):我测试了一些网页，它运行得很好，但是今天当我使用我发现
浏览 4提问于2013-07-30得票数 1
回答已采纳
2回答
我试着用Beautifulsoup4 python模块通过web抓取来获取网页的标题，它返回了一个字符串“无法接受！”作为标题，但是当我通过浏览器打开网页时，标题是不同的。我试着循环浏览链接列表和所有网页的标题，但是它返回的字符串是“不能接受的！”所有的链接。这里是python代码import
浏览 18提问于2022-03-01得票数 0
回答已采纳
我使用requests库从一个带有网页界面的数据库中读取零件编号列表的过程数据。我使用以下代码。我在StackOverflow上找到了大部分。= requests.get(process_url).content df_list = pd.read_html(html)
for循环从超链接列表中获取下一个零件代号的<
浏览 0提问于2021-02-19得票数 0
我正在尝试使用requests模块构建一个网络爬虫，基本上我想要它做的是转到一个网页，获取所有的href，然后将它们写入一个文本文件。到目前为止，我的代码如下所示：response = requests.get(url).textfor link in soup.fi
浏览 1提问于2016-01-05得票数 1
3回答
我试图递归地获取位于此左侧区域中Automotive下的所有链接。我目前的实现只能从登录页面获取链接。import requests
from bs4
浏览 12提问于2020-10-10得票数 0
2回答
我尝试只获取包含文本'/Archive.aspx?ADID=‘的链接。然而，我总是得到网页上的所有链接。在我得到我想要的链接后，我如何导航到每个页面？提前感谢！from bs4 import BeautifulSoup, SoupStrainer
url = "https://www.ci.athe
浏览 13提问于2021-07-15得票数 1
回答已采纳
嗨，我正在尝试获得一个网页上的图像使用请求和BeautifulSoup。import requests
data = requests.get(url, headers=headers).content["src"]) 问题是，当我在data中获取网页时，它并不包含图像标签。然而，当我通过web浏览器访问网页时，div标签填充了多个<i
浏览 29提问于2021-04-18得票数 1
回答已采纳
1回答
从昨天起，我一直在努力找出忽略“mailto://”和“mailto：”链接的方法，这些链接都带有漂亮的汤和请求。我的代码： if not link.startswith('mailto://'): continue
e
浏览 9提问于2022-08-18得票数 0
我正在寻找一个工具，从网页上提取电子邮件，但与特殊的是，电子邮件不是直接在页面上，但在页面上有一个带有链接的图标列表，每个链接到一个弹出式窗口，其中包含电子邮件在实践中，你必须点击每个单独的图标来查看相关的电子邮件电子邮件不是模糊的，没有禁令，它们是免费提供的，事实上，它们只是为了咨询，有什么工具可以做到这一点吗？另外，我在python中看到了几个脚本，但是没有这个功能，python中有没有什么函数
浏览 12提问于2021-03-29得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
