抓取网站的请求和BS4汤内容返回与问号的html
是指通过网络请求获取网站的HTML页面，并使用BeautifulSoup库（简称BS4）对返回的HTML内容进行解析和处理。
- 概念：抓取网站的请求是指通过HTTP或HTTPS协议向指定的URL发送请求，获取网站的HTML页面内容。BS4是Python中一个强大的库，用于解析HTML和XML文档，提供了方便的方法来遍历、搜索和修改解析树。
- 分类：抓取网站的请求可以分为GET请求和POST请求。GET请求用于从服务器获取数据，而POST请求用于向服务器提交数据。BS4是一种解析HTML和XML文档的库，可以根据需要选择使用。
- 优势：抓取网站的请求和使用BS4解析HTML内容的优势包括：
- 获取网站数据：可以通过抓取网站的请求获取网站的HTML页面，从而获取所需的数据。
- 灵活性：可以根据需求选择GET请求或POST请求，并可以添加请求头、请求参数等进行定制化操作。
- 解析HTML：BS4提供了强大的解析功能，可以方便地遍历、搜索和修改HTML文档，提取所需的信息。
- 数据处理：可以使用BS4提供的方法对解析后的HTML内容进行数据处理，如提取特定标签、属性或文本等。
- 自动化操作：可以结合其他工具或框架，实现自动化的网站数据抓取和处理。
- 应用场景：抓取网站的请求和BS4解析HTML内容的应用场景包括但不限于：
- 网络爬虫：通过抓取网站的请求和BS4解析HTML内容，可以实现网络爬虫，获取大量网站数据。
- 数据采集：可以用于采集特定网站的数据，如新闻、商品信息等。
- 数据分析：可以将抓取的网站数据进行解析和处理，用于数据分析和挖掘。
- 网站监测：可以定期抓取网站的请求，监测网站内容的变化或异常情况。
- 自动化测试：可以模拟用户请求，对网站进行自动化测试，验证网站功能和性能。
- 腾讯云相关产品和产品介绍链接地址：
- 腾讯云CDN（内容分发网络）：https://cloud.tencent.com/product/cdn
- 腾讯云API网关：https://cloud.tencent.com/product/apigateway
- 腾讯云云服务器（CVM）：https://cloud.tencent.com/product/cvm
- 腾讯云对象存储（COS）：https://cloud.tencent.com/product/cos
- 腾讯云数据库（TencentDB）：https://cloud.tencent.com/product/cdb
- 腾讯云人工智能（AI）：https://cloud.tencent.com/product/ai
- 腾讯云物联网（IoT）：https://cloud.tencent.com/product/iotexplorer
- 腾讯云移动开发（移动推送、移动分析等）：https://cloud.tencent.com/product/mobile
- 腾讯云区块链（BCS）：https://cloud.tencent.com/product/bcs
- 腾讯云元宇宙（Tencent XR）：https://cloud.tencent.com/product/xr
请注意，以上链接仅为示例，具体的产品选择应根据实际需求和情况进行评估和选择。
相关·内容
我正在努力浏览这个特定网站的内容：
我试着抓取日期部分，如打印屏幕中所示：
我使用了这个基本的漂亮汤代码
from bs4 import BeautifulSoup
soup = BeautifulSoup(response.text,'html.parser')
type(soup)
time = soup.find('ul',class_='slidee')
这是我得到的，而不是元素列表
<ul class="slidee">
<!-- adding dates -->
</ul>
浏览 0提问于2019-08-04得票数 0
回答已采纳
1回答
我是一个用python和漂亮的汤做网页抓取的初学者，我在Tripadvisor站点上抓取评论时遇到了问题，就像代码没有运行一样，它永远停留在没有结果的情况下。然而，我的代码正在其他网站上工作。请提供帮助，在此代码im使用：
import requests
import urllib.request
from bs4 import BeautifulSoup
r = requests.get('https://www.tripadvisor.fr/Hotel_Review-g295424-d302457-Reviews-Burj_Al_Arab-Dubai_Emirate_of_Duba
浏览 6提问于2022-03-24得票数 -3
1回答
我想从网站上抓取犯罪新闻文章，但汤对象不返回所需的div标签，有人能给我原因吗？
import requests
from bs4 import BeautifulSoup
page = requests.get("https://www.nst.com.my/news/crime-courts?page=1")
soup = BeautifulSoup(page.text, 'html.parser')
print(soup)
浏览 1提问于2021-12-29得票数 0
1回答
我正在使用Python中的漂亮汤来做web 抓取。网站上的文字有红色字体颜色的名字，我需要有颜色代码。我正在使用网站上的文本作为我的培训数据的纳(仅为正确的名称)。我怎么才能用漂亮汤得到颜色码呢？现在我的代码看起来是这样的。
from bs4 import BeautifulSoup
import requests
req = requests.get('https://www.islamweb.net/ar/library/index.php?page=bookcontents&idfrom=1&idto=272&bk_no=86&ID=2'
浏览 2提问于2021-08-07得票数 1
回答已采纳
我一直在尝试从Zillow中抓取代码，但是漂亮的汤给出的代码比来自chrome的view-source要少得多。下面是我的代码：
from bs4 import BeautifulSoup
import requests
from bs4 import BeautifulSoup
import requests
url='https://www.zillow.com/homedetails/49-Mountain-St-Hartford-CT-06106/58139903_zpid/'
html=requests.get(url)
bs = BeautifulSoup(ht
浏览 6提问于2021-11-27得票数 0
2回答
我试着用漂亮的汤做一个网络刮刀，但是每次我试着刮网站的时候，我都得不到任何东西。在下面的代码中，我使用请求来获取网站，然后将其放入漂亮的soup对象中。在那之后，我尝试抓取所有的标签。 我试着看过youtube的教程，也看过这个框架的文档，但我就是不明白如何使用它。 from bs4 import BeautifulSoup
import bs4
import urllib
url = requests.get("https://www.rt.com/")
print(url.status_code)
soup = BeautifulSoup(url.content,
浏览 30提问于2019-07-04得票数 1
3回答
我试图创建一个web抓取程序，但是每当我编写：从bs4导入漂亮汤时，我总是会得到错误：no模块名为bs4。我安装了bs4 by：pip安装beautifulsoup4和pip安装bs4，但是没有工作。谢谢!
浏览 4提问于2021-10-03得票数 1
回答已采纳
下午好!我如何使美丽汤只抓取多组之间的":“和：”到目前为止，我已经在我的汤整页，但它没有标签，可悲。
到目前为止，我已经尝试了几件事：
soup.findAll(text="[")
keys = soup.find("span", attrs = {"class": "objectBox objectBox-string"})
导入bs4作为bs导入urllib.request源代码=urllib.request urllib.request=bs.BeautifulSoup(‘'lxml')
浏览 1提问于2019-06-11得票数 0
回答已采纳
我试图从网站中抓取数据，但是find()方法找不到tag.Below是我的代码：
import urllib2
from bs4 import BeautifulSoup
url='http://www.jbhifi.com.au/computers/laptop-notebook/'
req=urllib2.Request(url,headers={'User-Agent':'Mozilla/5.0 (Windows NT 5.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/29.
浏览 7提问于2013-09-22得票数 3
1回答
我刚接触美汤模块，我有一个问题。我的代码很简单。最重要的是，我试图从上抓取的网站，我正在试图抓取价格。(大数字二(2)和更多)
我的代码：
import urllib
from bs4 import BeautifulSoup
quote_page = 'https://www.bloomberg.com/quote/SPX:IND'
page = urllib.request.urlopen(quote_page)
soup = BeautifulSoup(page, 'html.parser')
price_box = soup.find('
浏览 69提问于2018-06-03得票数 1
回答已采纳
我正在尝试构建一个hackernews抓取器，但是当我运行我的代码时
import requests
from bs4 import BeautifulSoup
res = requests.get("https://news.ycombinator.com/")
soup = BeautifulSoup(res.text,'html.parser')
print(soup.find(id="score_23174015"))
我不明白为什么美丽的汤一直不给我任何回报，我还在学习，所以我也是python3的新手
浏览 25提问于2020-05-14得票数 0
回答已采纳
3回答
我想从这个链接中抓取表数据：
我使用以下代码：
import pandas as pd
from bs4 import BeautifulSoup as bs
import requests
url="https://ourworldindata.org/grapher/pollution-deaths-from-fossil-fuels?tab=table"
soup=bs(requests.get(url).content,'html.parser')
soup.select("body[class='StandaloneGrapher
浏览 13提问于2022-07-22得票数 0
回答已采纳
我正在抓取一个中文网站，通常解析中文字符是没有问题的，我使用bs4中的pattern函数来查找特定的urls。然而，对于这个特定的中文网站，汤不能被正确地解析。下面是我用来设置soup的代码： start = f'http://www.shuichan.cc/news_list.asp?action=&c_id=93&s_id=210&page={1}'
r = requests.get(start)
soup = bs(r.content, "html.parser") 下面是一个打印出来的汤的例子： Current soup 注意:
浏览 12提问于2020-12-18得票数 0
回答已采纳
2回答
做了几个小的成功的项目，一直挣扎着从这个网站上得到的请求--有什么建议吗？
更新-希望获得完整的漂亮汤请求，这样我就可以开始从表中抓取信息了。
from bs4 import BeautifulSoup
import requests
r = requests.get("http://www.transfermarkt.co.uk/championship/marktwerte/wettbewerb/GB2")
soup = BeautifulSoup(r.content,"html.parser")
print soup
返回
<html>
&l
浏览 4提问于2015-12-23得票数 2
回答已采纳
我已经看了stackoverflow上关于美丽汤的大部分问题，只从网站上抓取了一半的数据，但到目前为止还没有一个有效。我已经尝试将功能更改为lxml或html5lib等。我也尝试使用selenium，现在我尝试使用selenium向下滚动网站，使用selenium加载网站上的所有内容，并使用漂亮的汤来抓取数据，但当需要超过100个项目时，它只抓取16个项目。我已经在下面附上了我的代码。
我正在尝试抓取的网站的链接：
from selenium import webdriver
from selenium.webdriver.common import timeouts
from seleniu
浏览 0提问于2021-07-04得票数 0
我试图从某些网站中抓取某些HTML数据，但我似乎无法刮掉我想要的部分。例如，我给自己设置了从中获取追随者数量的挑战，但我似乎无法做到这一点。
我试过使用urllib、request、美观汤以及。
下面是我的代码现在的样子：
from bs4 import BeautifulSoup
from urllib import urlopen
import json
import urllib2
html = urlopen('http://freelegalconsultancy.blogspot.co.uk/')
soup = BeautifulSoup(html, "l
浏览 1提问于2016-10-12得票数 0
回答已采纳
我想从这个页面上抓取营养数据：。
我尝试了以下代码。
import requests, bs4
res = requests.get('http://www.mysupermarket.co.uk/tesco-price-comparison/Fruit/Tesco_Gala_Apple_Approx_160g.html')
但是当我使用浏览器检查页面时，响应的文本与我看到的HTML不匹配。
所以我不能用美汤搜索它。
我该如何解决这个问题呢？
浏览 14提问于2018-02-28得票数 0
我不知道怎么写标题，所以很长。请随意编辑。
我正试图从这个网站上抓取数据，但是我不知道如何用漂亮的汤来访问“window.data”中的各个键和值。
例如，我想得到yyuid的价值，生日，等等。
守则如下：
import urllib.request
import urllib.error
from bs4 import BeautifulSoup
import re
username = "itsahardday"
url = "https://likee.video/@" + username # profile url - https://likee.v
浏览 4提问于2022-01-03得票数 0
回答已采纳
我是新来的，已经阅读了许多历史帖子，但无法确切地找到我正在寻找的东西。
我是新的网络抓取，并成功地从少数几个网站的数据。
但是，当我试图使用漂亮的汤提取产品的标题时，我对这个代码有一个问题，但是代码中的某个地方有问题，因为它没有返回数据？如能提供任何帮助，将不胜感激：
from bs4 import BeautifulSoup
import requests
import pandas as pd
webpage = requests.get('https://groceries.asda.com/aisle/beer-wine-spirits/spirits/whisky/1215
浏览 2提问于2022-07-01得票数 0
回答已采纳
我试着用漂亮的汤来解析一个网站，但是当我打印"page_soup“时，我只能得到一部分超文本标记语言，代码的开头部分被省略了，它包含了我需要的信息。没有人回答我的问题。在做了一些研究之后，我尝试使用Selenium来访问完整的HTML，但是我得到了相同的结果。下面是我对硒和美汤的两种尝试。当我尝试打印html时，它从源代码的中间开始，跳过doctype、lang等初始语句。
from selenium import webdriver
from bs4 import BeautifulSoup
browser = webdriver.Chrome( executable_path= &
浏览 0提问于2020-05-09得票数 0
3回答
我试图从特定的网站()中抓取内容，在Python格式中使用“美丽汤框架”。但是我不知道如何获取特定的数据
import requests
from bs4 import BeautifulSoup
import json
URL = "https://paytm.com/movies/coimbatore/"
r = requests.get(URL)
soup = BeautifulSoup(r.content, 'html.parser')
movies_showing_now_div = soup.find_all('
浏览 5提问于2020-02-11得票数 0
回答已采纳
import requests
import pandas
from bs4 import BeautifulSoup
time = []
ticker = []
name = []
URL = 'https://stockbeep.com/52-week-high-stock-screener'
page = requests.get(URL)
soup = BeautifulSoup(page.text, 'html.parser')
odd_rows = soup.find_all('tr', {'class':
浏览 2提问于2021-04-06得票数 0
回答已采纳
我试着用漂亮的汤在网站(https://www.walmart.com/browse/food/bakery-bread/976759_1071964_976779)上抓取网页。这个类是"search-result-gridview-item-wrapper“。为什么我只能看到里面的10件物品，但总数应该是40件。我想把我书房里所有的东西都拿过来。 我想买沃尔玛(https://www.walmart.com/browse/food/bakery-bread/976759_1071964_976779)的所有商品。我不知道如何抓取所有条目，因为我使用class = search-re
浏览 14提问于2019-10-02得票数 1
2回答
我是新来的，我试着抓取一个教程的网页源代码，我得到了漂亮的汤安装，请求安装。一开始，我想从"".I那里抓取源代码。我正在做这件事，.I没有做任何违法的事情，我认为这个网站也是为此目的而建立的。下面是我的代码：
import requests
from bs4 import BeautifulSoup
r=requests.get("http://pythonhow.com/example.html")
c=r.content
c
我得到了国防部的安全错误：
b'<head><title>Not Acceptable!</t
浏览 6提问于2020-05-23得票数 5
回答已采纳
1回答
我试着从一个特定的链接中抓取一些url，我使用了美容汤来抓取这些链接，但我无法抓取这些链接。这里我附上了我用过的代码。实际上，我想从"fxs_aheadline_tiny“类中抓取urls
import requests
from bs4 import BeautifulSoup
url = 'https://www.fxstreet.com/news?q=&hPP=17&idx=FxsIndexPro&p=0&dFR%5BTags%5D%5B0%5D=EURUSD'
r1 = requests.get(url)
coverpage =
浏览 25提问于2020-02-18得票数 1
当我试图解析本地存储的网页副本时，漂亮的汤返回给我胡言乱语。我不明白为什么，因为当我将requests和bs4模块一起用于抓取任务时，我从未遇到过这个问题。
这是我的代码
import requests
from bs4 import BeautifulSoup as BS
import os
url_2 = r'/Users/davidferreira/Documents/coding_2/ak_screen_scraping/bmra/'
os.chdir(url_2)
f = open('re_2.html')
soup = BS(url_2, &#
浏览 18提问于2017-03-14得票数 0
回答已采纳
我想与一个网络托管的地理信息系统地图应用程序进行交互，以刮取其中包含的数据。数据在一个切换按钮后面。
通常，通过BeautifulSoup和requests.get()创建网站文本的汤就足以使文本数据具有可解析性，但是此方法返回某种esri脚本，而不返回任何所需的html或文本数据。
网站快照，并检查了所需内容：
按钮的快照被切换，显示我想要抓取的文本数据：
代码的第一个mis(步骤)：
import requests
from bs4 import BeautifulSoup
site = 'https://dwrapps.utah.gov/fishing/fStart
浏览 5提问于2022-04-04得票数 0
回答已采纳
1回答
我试图用bs4抓取一个网站，里面有一个表，但我得到的内容元素并不像我从inspect得到的那样完整。我在里面找不到标签<tr>和<td>。如何获取该站点的完整内容，尤其是表格的标记？ 下面是我的代码： from bs4 import BeautifulSoup
import requests
link = requests.get("https://pemilu2019.kpu.go.id/#/ppwp/hitung-suara/", verify = False)
src = link.content
soup = BeautifulSoup(sr
浏览 62提问于2019-04-24得票数 1
回答已采纳
1回答
我正在尝试用python3从中抓取数据。该网站包含了基于冠军的FPS多人游戏“圣骑士”的玩家数据。我想要得到一个基于冠军的球员的统计数据，如网站所示。我面临的问题是，当我用Chrome检查页面源代码时，我得到了包含"table“标签的代码，它是干净的，我可以很容易地抓取它：
(我的要点链接)
但是当我创建soup对象时，我得到了一个不同的代码。当我转到页面源码时，它和汤是一样的。页面源代码中没有标记。(您可以查看页面源代码以更好地了解)。
现在，我如何从网站上抓取冠军明智的数据？我正在为python3使用请求和漂亮的汤
import requests as req
import bs
浏览 2提问于2018-06-26得票数 0
2回答
我对Python中的web抓取非常陌生，现在正在使用BeautifulSoup进行解析。一旦我有了超文本标记语言数据，我就试图访问"< div id=“根目录”>.< /div>“下的内容，但如果我在实际网站上单击”检查“，我将无法获得显示的所有超文本标记语言。我如何访问该网页，或者这是网站阻止我访问网页上的信息的方式？
如果这没有意义，我要说的是有“。在div中，而不是让我看到更多子类别(当我单击网页上的inspect时，我会看到)。
这是我美丽的汤码。
from urllib.request import urlopen as uReq
from bs4 i
浏览 2提问于2020-07-13得票数 0
3回答
我正在玩BeautifulSoup从网站上抓取数据。因此，我决定为有史以来最伟大的100部电影在网上搜索网站。
以下是指向网页的链接：
我从网站上导入了HTML，我可以在上面使用漂亮的汤。但是当我想要得到100个电影标题的列表时，我得到了一个空的列表。下面是我写的代码。
import requests
from bs4 import BeautifulSoup
URL = "https://www.empireonline.com/movies/features/best-movies-2/"
response = requests.get(URL)
top100_webp
浏览 20提问于2022-05-09得票数 -2
回答已采纳
2回答
我是Python的新手 我正在尝试从它的网站获取打印机计数器值。这个网站是用Javascript写的，我什么也弄不出来。 站点元素看起来像这样，我需要突出显示的元素的值。 inspect elements 我试过使用selenium，requests，webdriver，漂亮的汤。 尝试了所有的webdriver.find方法等。 我的最新代码看起来像这样，我尝试了一堆其他的东西，但什么都没有得到。 from bs4 import BeautifulSoup
import requests
from selenium import webdriver
#url = requests.ge
浏览 14提问于2019-02-01得票数 1
回答已采纳
我正在尝试抓取这个网站，以便下载网站上列出的所有硬币的名称和链接：
我试着使用漂亮汤模块来定位div class=coins-list，然后使用
from selenium import webdriver
from selenium.webdriver.common.keys import Keys
from bs4 import BeautifulSoup
from requests_html import HTMLSession
session = HTMLSession()
url= "https://www.cryptocompare.com/ico/#/completed
浏览 0提问于2019-09-24得票数 1
2回答
我试图在python上使用BeautifulSoup从'https://www.geappliances.com/ge-appliances/kitchen/ranges/‘这个网站上抓取一些数据，这个网站上有一些产品。 import unittest, time, random
from selenium import webdriver
from webdriver_manager.firefox import GeckoDriverManager
from bs4 import BeautifulSoup
import pandas as pd
links = []
brow
浏览 18提问于2021-09-10得票数 0
嗨，我正在制作一个程序，它在堆栈溢出中为搜索词抓取结果。
我编写了代码以获得某些结果的最大页面。
我需要知道抓取的最大页面，但是通过开发工具查看的html结构和通过漂亮汤获得的html信息是不同的。
网址：
下面是关于div标记的信息，它的类名是s-paginatino，通过开发工具。
from bs4 import BeautifulSoup
import requests
url = "https://stackoverflow.com/jobs?q=vue"
result = requests.get(url)
soup = BeautifulSoup(result
浏览 1提问于2020-08-30得票数 1
在某些页面中，当我使用漂亮汤时，返回nothing...just空白页。
from bs4 import BeautifulSoup
import urllib.request
Site = "http://gall.dcinside.com/board/lists/?id=parkbogum&page=2"
URL = Site
html = urllib.request.urlopen(URL).read()
soup = BeautifulSoup(html, "html.parser")
print(soup)
除本网站外，我可以使用任何其他网
浏览 16提问于2017-09-07得票数 2
回答已采纳
1回答
美丽的汤刮
、、、
我遇到了旧的工作代码无法正常工作的问题。 我的python代码是用漂亮的汤抓取一个网站，并提取事件数据(日期、事件、链接)。 我的代码是拉取位于tbody中的所有事件。每个事件都存储在一个<tr class="Box">中。问题是我的抓取器似乎在这个<tr style ="box-shadow: none;>之后停止了，在它到达这个部分(这是一个包含3个我不想抓取的事件的站点广告的部分)之后，代码停止从<tr class="Box">中拉取事件数据。有没有一种方法可以跳过这种tr风格/忽略未来的案例？ ? i
浏览 12提问于2020-09-30得票数 2
回答已采纳
2回答
我已经开始学习如何使用urllib和漂亮汤从网站上抓取信息。我想从这个页面获取所有文本(在代码中)，并将其放入一个文本文件中。
import urllib
from bs4 import BeautifulSoup as Soup
base_url = "http://www.galactanet.com/oneoff/theegg_mod.html"
url = (base_url)
soup = Soup(urllib.urlopen(url))
print(soup.get_text())
当我运行它时，它会抓取文本，尽管它输出的是所有字母之间的空格，但仍然显示H
浏览 0提问于2012-10-18得票数 1
回答已采纳
1回答
我试图从Robintrack中抓取数据，但是，我无法从增加/减少部分获得数据。我只能抓取主页数据。这是我的汤 import bs4
import requests
from urllib.request import urlopen as uReq
from bs4 import BeautifulSoup as soup
robin_track_url= 'https://robintrack.net/popularity_changes?changeType=increases'
#r = requests.get('https://robintrack.net
浏览 18提问于2020-07-25得票数 0
回答已采纳
我目前正在尝试建立一个网络抓取程序，以拉从一个房地产网站使用美丽汤的数据。我还没有走得很远，但代码如下： import requests
from bs4 import BeautifulSoup
r=requests.get("http://pyclass.com/real-estate/rock-springs-wy/LCWYROCKSPRINGS/")
c=r.content
soup=BeautifulSoup(c,"html.parser")
print(soup) 当我尝试打印数据以查看程序是否正常工作时，我收到一条错误消息，说“无法接受！
浏览 18提问于2020-12-17得票数 1
1回答
我正在尝试从第一个图像中获取img标记，这样我就可以获取图像链接。当我用漂亮的汤抓取站点时，没有img标签(如图2所示)。
我不明白为什么每个网站都有一个img标签，但美丽的汤却没有。
浏览 1提问于2020-03-02得票数 1
我正试着从美国职棒大联盟球员网站(https://www.mlb.com/player/charlie-morton-450203?stats=gamelogs-r-pitching-mlb&year=2019)上抓取/读取游戏统计表。我似乎找不到/捕获不到类名。当我在chrome中“检查HTML”时，我可以看到类名，但是美汤似乎没有发现它。 是否有一些解决方法/技巧可以让它正确地进入？ from bs4 import BeautifulSoup
import requests
page = requests.get('https://www.mlb.com/player/
浏览 21提问于2019-06-25得票数 0
回答已采纳
我试着使用python3.5上的漂亮汤(我正在做eclipse)从一个网站上抓取一些数据，以及来自网站“”的请求，该网站为足球运动员提供了一些统计数据。
我的代码：
from bs4 import BeautifulSoup
import requests
r=requests.get('http://www.transfermarkt.com/arsenalfc/startseite/verein/11/saison_id/2015')
soup = BeautifulSoup(r.content, 'html.parser')
print (soup.pre
浏览 4提问于2016-02-17得票数 0
回答已采纳
1回答
我最近要求帮助使用漂亮的汤从一个网站获取外汇价格。数据被隐藏在跨度中。我很幸运地得到了两个人的帮助，他们都很棒，并帮助我度过难关。我已经找到了一个不同的网站，我想要从，这一次没有跨度的文本是在tr和td从表。
就是网站..。正如你所看到的，价格的高低可以追溯到30天前，我相信在这张桌子上
我想抓取整个表，这样我就可以根据需要使用数据来进行不同的计算。
当我试图获取数据时，它仍然只是作为一个空列表返回。我试过很多不同的地方去取它。
有人不仅能帮我得到我想要的东西，还能解释我做错了什么，这样我就可以学着为自己使用漂亮的汤了，这样我就不用一直寻求帮助了。
上一次我从span抓取它时，它将它保存在一
浏览 1提问于2022-12-04得票数 -1
回答已采纳
1回答
我一直在尝试从hockey.com网站上抓取团队数据，我只能读到
使用：
from bs4 import BeautifulSoup as bs
from bs4 import Comment
import requests
site = 'https://evolving-hockey.com/stats/team_standard/?_inputs_&std_tm_str=%225v5%22&std_tm_table=%22On-Ice%22&std_tm_team=%22All%22&std_tm_range=%22Seasons%22&
浏览 0提问于2020-12-12得票数 0
下面是我的python代码：
import urllib2
from bs4 import BeautifulSoup
page = urllib2.urlopen("http://www.amazon.com/")
soup = BeautifulSoup(page)
print soup
它适用于google.com和许多其他网站，但不适用于amazon.com。
我可以在浏览器中打开amazon.com，但得到的“汤”仍然是空的。
此外，我发现它也不能从appannie.com抓取。但是，代码返回的不是none，而是一个错误：
HTTPError: HTTP Error
浏览 0提问于2014-05-09得票数 0
3回答
我现在是一个学生，我现在学习的是美丽的汤，所以我的讲师就像我一样从商店里收集数据，但是我不能擦拭产品的细节。目前，我正在尝试从中抓取数据。我只想弄清楚产品的名称和价格。有人能告诉我为什么我不能用漂亮汤刮数据吗？
这是我的代码：
from requests import get
from bs4 import BeautifulSoup
url = "https://shopee.com.my/shop/13377506/search?page=0&sortBy=sales"
response= get (url)
soup=BeautifulSoup(response
浏览 2提问于2020-05-28得票数 3
回答已采纳
我试图从网站获得请求文本，并使用美丽汤过滤掉数据。但是当我编写这段代码时，它给了我一个错误，我无法运行它，请帮助。
我试图将文本声明为全局变量，但不知道如何在其他函数中使用另一个函数变量。
import requests
from bs4 import BeautifulSoup
global website
global text
website = raw_input('Enter Website: ')
def getconnect():
req = requests.get(website)
text = req.text
def bs4(tex
浏览 1提问于2019-04-02得票数 0
回答已采纳
1回答
我正在使用BeautifulSoup在木星，我想知道我如何能够刮这个网站的事件名称，地点和价格。我在检查工具里找到了他们的位置。
现在，我找到了事件的名称，但我觉得我的过程是漫长和不必要的。
我的计划是把所有从这个页面抓取的事件数据放到一个数据框架中。
import pandas as pd
import requests
import bs4
from bs4 import BeautifulSoup
kpbs_link = "https://www.kpbs.org/events/search/?unifyevents=true&vertical_events=true
浏览 2提问于2020-03-08得票数 0
编写脚本以检查产品是否已加载到网站上。
import requests
import time
from bs4 import BeautifulSoup
r = requests.get('https://www.off---white.com/en/GB/section/new-arrivals.js')
soup = BeautifulSoup(r.text, 'html.parser')
text = '3.0'
while text not in soup:
print('not found')
r
浏览 1提问于2018-06-09得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
对象存储
云直播活动推荐
腾讯云开发者
