我试图从“纽约时报”的菜谱中剔除收视率，但在获取我需要的内容时遇到了问题。当我查看《纽约时报》页面上的源代码时，我看到了以下内容： <div class="ratings-rating">
<span class="ratings-header ratings-content然而，当我通过Beautiful Soup拉入页面源代码时，我只看到了以下内容： <div class="
浏览 30提问于2019-03-05得票数 1
回答已采纳
从下面的链接中，我希望能够抓取数据。然而，当我使用Beautiful Soup时，我在html中找不到它，并且Beautiful soup不起作用。此外，我想也许我可以使用selenium来抓取这些数据，但我也找不到这些内容。你知道我会如何使用selenium或Beautiful Soup来获得2015-2020年间每年1月的“这个家”的Z估计值吗？提前感谢您的帮
浏览 0提问于2020-08-17得票数 1
2回答
我在我的Django网站上展示了一些抓取的数据..数据每小时会更改几次，因此需要更新。我使用Beautiful Soup抓取数据，然后将其发送到视图，并将其传递到上下文字典中，以将其呈现在网站上。问题是，抓取功能需要一些时间才能工作，因此，在该功能完成工作之前，网站不会加载。我怎样才能让它加载得更快？数据网站上没有API。
浏览 16提问于2021-01-28得票数 0
我想要实现的目标网站
已经尝试过的内容。我试着使用Selenium驱动，但得到了不同的错误，这可能需要更多的时间，而且使用</e
浏览 0提问于2018-10-31得票数 0
2回答
有了Beautiful Soup和Request Library，我可以抓取超文本标记语言的内容，但不能抓取JavaScript或AJAX调用的内容。import requests
from bs4 import BeautifulSoup a
浏览 1提问于2017-11-01得票数 3
我正在做网络抓取，我只想从任何网站的文本，所以我使用的Beautiful Soup。最初，我发现get_text()方法也返回了JavaScript代码，因此为了避免遇到应该使用extract()方法的问题，现在我遇到了一个奇怪的问题，在提取script和style标记之后，BeautifulSoup甚至在新的` `html中都无法识别它的主体。，但当我这样做时
soup = BeautifulSo
浏览 20提问于2015-07-05得票数 3
回答已采纳
1回答
我正在开发一个程序，它使用Beautiful Soup来抓取网站，然后使用urllib来检索在网站上找到的图像(使用图像的直接URL)。我正在抓取的网站不是图像的原始主机，但确实链接到原始图像。我遇到的问题是，对于某些网站，检索www.example.com/images/foobar.jpg会将我重定向到主页www.example.com，并生成一个空的(0K
浏览 0提问于2014-03-15得票数 0
2回答
所以我试着抓取网页的内容。最初我尝试使用BeautifulSoup，但是我无法获取内容，因为内容是动态加载的。在四处阅读之后，我试着根据人们的建议使用Selenium，但是在这样做之后，我仍然无法获取内容。刮出来的东西跟美汤一样。 是不是就不能抓取这个网页的内容呢？'/' + string_date[8:]
url = "https:
浏览 35提问于2021-08-11得票数 0
回答已采纳
我正在建立一个在Django的网站，将从一些网站抓取数据，这样人们就可以进入该网站，设置自定义数据过滤器，并查看抓取的数据在友好的格式。问题是requests和beautiful soup模块不足以满足抓取目的，因为我还需要一些自动化操作(加载javascript或单击按钮)。由于Selenium要求下载webdriver并将其放入路径中，是否可以在web应用程序中使用它？比如在某个地方托管webdriver？
我也
浏览 3提问于2018-07-01得票数 1
我正在使用Python从一个网站上抓取内容。首先，我在Python上使用了BeautifulSoup和Mechanize，但我看到网站上有一个通过JavaScript创建内容的按钮，所以我决定使用Selenium。既然我可以通过像driver.find_element_by_xpath这样的方法使用Selenium查找元素并获取它们的内容，那么当我可以使用Selenium做任何事情时</em
浏览 1提问于2013-07-03得票数 53
回答已采纳
2回答
我使用Python with Requests和Beautiful Soup来尝试使用以下代码返回某些Youtube频道的订阅者数量：from bs4 import BeautifulSouprequests.get("https://www.youtube.com/channel/UCFIjVWFZ__KhtTXHDJ7vgng")soup
浏览 0提问于2018-03-14得票数 2
1回答
我曾经尝试过在Python中使用Beautiful Soup从网站抓取数据。当我检查网站本身时，我看到了以下内容：但是当我用美汤的时候，我看到的是：就好像出于安全和保护的目的
浏览 1提问于2015-11-07得票数 2
1回答
我正在尝试用Python结合XBMC来做一些网站抓取。当我查看Beautiful Soup的网站时，它的最新版本是版本4。当我查看XBMC时，它显示为版本3.2.0 ()。现在有没有人知道XBMC中使用的是哪个版本？
浏览 0提问于2013-09-25得票数 0
1回答
我正在使用Selenium和Beautiful Soup在Python中对动态内容进行web抓取。问题是，即使使用以下代码，也无法将定价数据表解析为Python：sel_soup=BeautifulSoup(html, 'html.parser')
然而，我后来发现，如果我在使
浏览 15提问于2018-02-14得票数 2
2回答
漂亮汤还错了href值
、、、
我使用下面的代码为SERP做一些SEO，但是当我尝试读取href属性时，我得到了显示页面中其他有线URL的不正确结果，但没有显示预期的结果。我的密码怎么了？q=beautiful+soup&rlz=1C1GCEB_enIN922IN922&oq=beautiful+soup&aqs=chrome..69i57j69i60l3.2455j0j7&sourceid=chrome&ie=UTF-8"
浏览 5提问于2021-11-16得票数 0
回答已采纳
在尝试从网站获取数据时，我无法使用Beautiful soup获取网站的html内容。我正在使用一个基本的get函数和请求来获取html，但输出为空。url= 'https://www.turbobearings.com/application.php'soup_= soup(html.conte
浏览 32提问于2020-10-20得票数 0
回答已采纳
BeautifulSoup
text = urllib.request.urlopen(url).read()for div in data:我使用的是Py
浏览 0提问于2018-08-07得票数 2
我正在建立一个网络抓取项目使用python与美丽的汤和请求模块，问题是我想要抓取的网站有一个加载页面(完全不同于主页)，然后它将我重定向到主页。我怎么能等到页面加载完成，然后从主页上抓取数据呢？我知道Selenium可以处理这些类型的网站，但网站必须使用web驱动程序启动，这是我不希望在我的项目中使用的原因，这就是为什么我使用Beautiful Soup<
浏览 15提问于2020-10-25得票数 0
我刚用Python开始了几个web抓取项目。我目前使用lxml，Beautiful Soup和requests模块来抓取网页。我需要知道是否有任何方法可以只从网站获得我们需要的数据，而不是加载整个页面。requests模块执行GET请求并接收整个，bs4，lxml只过滤数据。
浏览 28提问于2021-11-13得票数 0
回答已采纳
2回答
因此，使用下面的代码，我想打开一个公寓网站URL并抓取该网页。唯一的问题是，Beautiful Soup不会等到整个网页都呈现出来。在页面加载之前，公寓不会在html中呈现，这需要几秒钟的时间。from urllib.request import urlopen as uReq
my_url = 'https://xxxxx.comsort=latest'
浏览 11提问于2019-11-09得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
