使用soup，find_all返回一个[]值
使用soup.find_all()方法会返回一个包含所有匹配结果的列表([]值)。该方法用于在BeautifulSoup对象中查找所有符合指定条件的元素。
答案内容： BeautifulSoup是一个Python库，用于从HTML或XML文档中提取数据。它能够通过解析整个文档创建一个对象，并根据标签、属性、文本内容等条件进行元素的查找与提取。
在使用BeautifulSoup时，可以使用find_all()方法来查找符合指定条件的所有元素。该方法接受标签名、属性、文本内容等参数作为筛选条件，并返回一个包含所有匹配结果的列表。如果没有符合条件的元素，返回一个空列表([]值)。
下面是find_all()方法的使用示例：
from bs4 import BeautifulSoup
html_doc = """
<html>
<head>
<title>Sample Page</title>
</head>
<body>
<h1>Heading</h1>
<div class="content">Content 1</div>
<div class="content">Content 2</div>
<div class="content">Content 3</div>
<a href="https://cloud.tencent.com">Tencent Cloud</a>
</body>
</html>
"""
soup = BeautifulSoup(html_doc, 'html.parser')
result = soup.find_all('div', class_='content')
print(result)上述代码中，我们创建了一个包含一些div元素的HTML文档。然后使用find_all()方法查找所有class属性为"content"的div元素，将结果存储在result变量中。最后打印result的值，即输出了所有匹配结果。
推荐的腾讯云产品：腾讯云函数（Cloud Function）
- 产品介绍链接地址：https://cloud.tencent.com/product/scf
相关·内容
我在HTML文档中有以下标记：
<span class="availMsg warning product-backorder">Estimated in early March.</span>
我试图从这个span类元素中提取3月初估计的文本，但似乎无法使其工作。这是我正在尝试的代码的一部分，因为它包含空格。
from bs4 import BeautifulSoup
url = "myWebsite.com"
html=get(url)
soup = BeautifulSoup(html, 'html.parser
浏览 1提问于2021-12-23得票数 0
1回答
我正在尝试从Metacritc中提取这些链接中的“游戏名称”这就是我在这段代码中得到的结果：
from requests import get
from bs4 import BeautifulSoup
from urllib.request import Request, urlopen
url = "http://www.metacritic.com/browse/games/score/metascore/year/pc/filtered?sort=desc&year_selected=2018"
req = Request(url, headers={'
浏览 2提问于2018-06-16得票数 0
错误在哪里？我想在没有标签的情况下解析我的文本。
from bs4 import BeautifulSoup
import re
import urllib.request
f = urllib.request.urlopen("http://www.championat.com/football/news-2442480-orlov-zenit-obespokoen---pole-na-novom-stadione-mozhet-byt-nekachestvennym.html")
soup = BeautifulSoup(f, 'html.parse
浏览 1提问于2016-04-22得票数 0
回答已采纳
1回答
我正在编写一个小python程序，以进入web抓取：
from bs4 import BeautifulSoup
import requests
hero = raw_input("Enter Hero Name: ")
url = "http://www.dotahut.com/heroes/" + hero.lower().replace(' ', '_')
#to double check url in case of error
print (url)
r = requests.get(url)
soup = Be
浏览 2提问于2015-02-11得票数 0
回答已采纳
1回答
我试着用漂亮的汤、请求和json来创建一个Twitter爬行器。但是，当我尝试运行代码时，它引发了错误对象不可订阅。我检查了错误所在的行，但找不到引发错误的原因。有人能帮帮忙吗？我修不好它。
File "tweetscraper.py", line 131, in <module>
start()
File "tweetscraper.py", line 125, in start
tweets = get_tweets_data(username, soup)
File "tweetscraper.py",
浏览 18提问于2021-02-28得票数 0
我试图创建一个脚本，从一个特定的网站下载字幕。请阅读代码中的评论。下面是代码：
import requests
from bs4 import BeautifulSoup
count = 0
usearch = input("Movie Name? : ")
search_url = "https://www.yifysubtitles.com/search?q="+usearch
base_url = "https://www.yifysubtitles.com"
print(search_url)
resp = requests.get(s
浏览 0提问于2018-03-20得票数 2
回答已采纳
我想用Python解析一个HTML文件，我使用的模块是BeautifulSoup。
据说函数find_all和findAll是一样的。这两个我都试过了，但我相信它们是不同的：
import urllib, urllib2, cookielib
from BeautifulSoup import *
site = "http://share.dmhy.org/topics/list?keyword=TARI+TARI+team_id%3A407"
rqstr = urllib2.Request(site)
rq = urllib2.urlopen(rqstr)
fchData
浏览 5提问于2012-09-09得票数 39
回答已采纳
我想从一个网页上抓取数据。我的代码如下所示：
grad = s.get('https://www.njuskalo.hr/prodaja-kuca/zagreb',headers=header, proxies=proxyDict)
city_soup = BeautifulSoup(grad.text, "lxml")
kvarts = city_soup.find_all(id="locationId_level_1")
print kvarts[0]
print "++++++++++++++++++++++="
for
浏览 0提问于2017-12-22得票数 3
我对网络抓取非常陌生。我读到了关于BeautifulSoup的文章，并试图使用它。但我无法提取具有给定类名“company-desc-and-排序容器”的文本。我甚至不能从html页面中提取标题。这是我尝试过的代码：
from BeautifulSoup import BeautifulSoup
import requests
url= 'http://fortune.com/best-companies/'
r = requests.get(url)
soup = BeautifulSoup(r.text)
#print soup.prettify()[0:10
浏览 5提问于2016-12-20得票数 1
回答已采纳
我试图从公告牌前100名获得歌曲的标题。图片是他们的html脚本。
我写了这段代码：
from bs4 import BeautifulSoup
import urllib.request
url= 'http://www.billboard.com/charts/year-end/2015/hot-100-songs'
page = urllib.request.urlopen(url)
soup = BeautifulSoup(page.read(), "html.parser")
songtitle = soup.find("div",
浏览 10提问于2015-12-25得票数 3
回答已采纳
1回答
我刚开始用python和BeautifulSoup做实验。
我想获得与特定城市相关的文章的链接。
下面是当前的代码
import requests
from bs4 import BeautifulSoup
city = "london"
result = requests.get('https://www.origo.hu/kereses/index.html?q=' + city)
def main_loop():
soup = BeautifulSoup(result.content, features="lxml")
浏览 2提问于2020-09-23得票数 0
回答已采纳
import requests
import re
from bs4 import BeautifulSoup
url = "http://www.sherdog.com/fighter/1"
r = requests.get(url)
soup = BeautifulSoup(r.content)
links = soup.find_all("a")
g_data = soup.find_all("div", {"class": "module fight_history"})
for item in
浏览 0提问于2017-01-16得票数 0
我会回答我自己的问题：写完这个问题后，我找到了答案。答案是在文档中，但我错过了，所以在这里写在堆栈溢出，以供参考。
问题：，如果BeautifulSoup的find_all()找不到特定的class，为什么不返回None？
html = """
<div><p class="apple">apple</p></div>
"""
from bs4 import BeautifulSoup
soup = BeautifulSoup(html, 'html.parser&
浏览 2提问于2020-05-01得票数 0
回答已采纳
1回答
我正在做一些NFL统计网络抓取，老实说，这个活动并不重要。我花了大量的时间进行调试，因为我无法相信它在做什么，要么是我疯了，要么是包或python本身有某种bug。下面是我正在使用的代码：
import pandas as pd
from bs4 import BeautifulSoup as bs
import requests
import string
import numpy as np
#get player list
players = pd.DataFrame({"name":[],"url":[],"positions":[],
浏览 1提问于2019-09-29得票数 0
回答已采纳
我可以通过一个unix shell脚本解析一个html标记的完整参数，如下所示：
# !/usr/bin/python3
# import the module
from bs4 import BeautifulSoup
# define your object
soup = BeautifulSoup(open("test.html"))
# get the tag
print(soup(itemprop="name"))
其中itemprop="name"唯一地标识所需的标记。
输出结果类似于
[<span itemprop=&#
浏览 0提问于2014-08-12得票数 5
回答已采纳
这是我的帖子的后续。
我不使用Twitter，因为它在很久以前并没有通过标签来查看tweet。完整的代码和输出在下面的例子后面。
我想从每条推文中收集特定的数据。name和handle正在检索我正在寻找的内容，但我在缩小其余元素范围时遇到了困难。
例如：
link = soup('a', {'class': 'tweet-timestamp js-permalink js-nav js-tooltip'})
url = link[0]
检索以下内容：
<a class="tweet-timestamp js-permalink
浏览 4提问于2016-01-26得票数 3
回答已采纳
1回答
我用python和BeautifulSoup结合编写了一个脚本，用于解析某些xml元素中的一些名称，但出于某种原因，该脚本会在print语句之前抛出属性错误。我怎么才能让它起作用？提前谢谢。
到目前为止我尝试过的是：
from bs4 import BeautifulSoup
content="""
<ns:Car>
<ns:Model>sedan</ns:Model>
<ns:Model>coupe</ns:Model>
<ns:Model>hatchback</ns:Mod
浏览 0提问于2018-05-14得票数 0
回答已采纳
当我试图从网站中抓取一个值并将其放入一个有效负载请求中时，我会得到以下错误：
AttributeError: 'ResultSet' object has no attribute 'get'
这是我的密码：
resumeURL='url'
response=self.session.get(resumeURL,headers=headers)
soup=BeautifulSoup(response.content, "html.parser")
product=soup.find_all('input',{&#
浏览 0提问于2018-03-01得票数 0
回答已采纳
1回答
我完全是HTML的新手。在写这篇文章之前，我必须查找“标签”和“类”。我知道urllib2现在是这种事情的默认值，但是我不能让我的头正确地使用它(否则你会得到一个403访问被拒绝的错误)，所以我改用了requests。
import requests
from bs4 import BeautifulSoup
url = 'http://www.grandexchangecentral.com/item.php?rid=4365'
r = requests.get(url, headers={'Referer': 'www.grandexchangec
浏览 0提问于2012-11-03得票数 1
回答已采纳
在审查从html表构建csv的解决方案时，我偶然发现了这段代码
ol = map(cell_text，row.find_all row.find_all)
黑体字到底是怎么回事？find_all调用html元素和标记。粗体文本是如何做到这一点的？
下面的背景
#!/usr/bin/python
from bs4 import BeautifulSoup
import sys
import re
import csv
def cell_text(cell):
return " ".join(cell.stripped_strings)
soup = Beautiful
浏览 7提问于2016-12-03得票数 1
回答已采纳
2回答
Python3:我是刚开始刮擦和训练的，我正在尝试从这个页面中获得所有的功能：
from bs4 import BeautifulSoup
import requests
url = "https://www.w3schools.com/python/python_ref_functions.asp"
response = requests.get(url)
data = response.text
soup = BeautifulSoup(data, 'lxml')
print(soup.td.text)
# Output: abs()
无论我尝试什么，
浏览 0提问于2019-01-06得票数 1
回答已采纳
我正在使用python和BeautifulSoup来制造一个不和谐的机器人，我有我的代码：
URL = "https://www.mywebsite.com"
with requests.Session() as s:
r = s.post(URL)
soup = BeautifulSoup(r.content, 'html5lib')
firstresult = soup.find_all('p',attrs={"class" : "myclass"}, limit=6)
浏览 1提问于2022-02-25得票数 1
我不明白为什么我会犯这样的错误：
我有一个相当简单的功能：
def scrape_a(url):
r = requests.get(url)
soup = BeautifulSoup(r.content)
news = soup.find_all("div", attrs={"class": "news"})
for links in news:
link = news.find_all("href")
return link
这是我正在努力刮的网页的结构：
<div class="
浏览 1提问于2015-09-09得票数 1
回答已采纳
我正在尝试使用Beautiful soup和requests包从堆栈溢出中抓取数据。我已经能够提取大部分细节，但是当我尝试提取用户的信誉得分时，我只能提取reputation score和Gold的数据，而不能提取Silver和Bronze计数的数据。 下面是我用来提取的代码： from bs4 import BeautifulSoup
import requests
source = requests.get('https://stackoverflow.com/questions/53968946/how-can-i-limit-function-slot-play-just-
浏览 21提问于2018-12-30得票数 1
回答已采纳
我正试图从有着漂亮汤的广告牌中分析出某一天最热门的100次热播。我试着按类名选择区段，但它不起作用。我试着按类使用find_all，它可以工作。为什么find_all只在这种情况下起作用？
from bs4 import BeautifulSoup
import requests
billboard_website = "https://www.billboard.com/charts/hot-100/2019-05-09"
response = requests.get(f"{billboard_website}")
soup = BeautifulSoup
浏览 3提问于2021-01-03得票数 0
回答已采纳
我正在尝试通过一本实用的数据分析书中的练习，目标是从网站上刮下黄金的价格。原来的代码不工作，我已经追溯到什么，我认为是从的时间网站的重新工作。
为了让练习仍然有效，我一直在对脚本进行一些修改：
from bs4 import BeautifulSoup
import requests
import re
from time import sleep
from datetime import datetime
def getGoldPrice():
url = "http://www.gold.org"
req = requests.get(url)
s
浏览 29提问于2017-01-27得票数 2
回答已采纳
我很难从这个网站得到所有数据.我无法生成所有数据的代码部分是"pn“，我希望这段代码能够从站点生成这些数字。
58312-GA4 58312-RG4 58312-RR$
我尝试了很多东西，从切换标记和类到返回和第四次使用find、findAll和find_all，不管我尝试了什么，我只得到了一个结果。任何帮助都是很好的--谢谢这里的代码：
theurl="http://www.colehersee.com/home/grid/cat/14/?"
thepage = urllib.request.urlopen(theurl)
soup = BeautifulSoup(t
浏览 4提问于2016-02-20得票数 0
回答已采纳
我想在标签中进行搜索：
<div id="cmeProductSlatePaginiationTop" class="cmePaginiation">
<ul>
<li class="disabled">
<li class="active">
<li class="away-1">
<li>
</ul>
</div>
基本上，我想要计算在这个div中出现<
浏览 1提问于2013-05-28得票数 17
回答已采纳
我有以下XML文件：
<user-login-permission>true</user-login-permission>
<total-matched-record-number>15000</total-matched-record-number>
<total-returned-record-number>15000</total-returned-record-number>
<active-user-records>
<a
浏览 1提问于2013-08-01得票数 7
回答已采纳
我目前正在制作一个网络爬行器来抓取，而im在尝试抓取表格标题时遇到了麻烦。当我这样做的时候
head = soup.find('table',{"class" : "display responsive dataTable no-footer"}).find_all("tr")
table_header = head.find_all('th')
它返回
Traceback (most recent call last):
File ".\ncov2019live.py", line 13, in
浏览 1提问于2020-05-20得票数 0
所以基本上我想提取里面的文本
<div class = "examplediv">
example text
</div>
我用过
url='https://sample.com'
headers={"User-Agent": 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/79.0.3945.130 Safari/537.36'}
page = requests.get(url
浏览 0提问于2020-03-08得票数 0
2回答
这就是我正在查看的页面：https://www.nytimes.com/topic/destination/russia 我已经导入了BeautifulSoup和请求。我想创建一个文本文件的所有标题从这个页面。我可以得到其中的一个，使用 from bs4 import BeautifulSoup
import requests
source = requests.get('https://www.nytimes.com/topic/destination/russia').text
soup = BeautifulSoup(source, 'lxml')
he
浏览 17提问于2020-04-13得票数 1
所以我想从这个网站上刮一些法规：
我能够将输出写入txt文件，但是输出了三种不同的格式，如下所示：
我不擅长格式化输出。我的write声明可能出了什么问题，或者我做错了什么？
我的代码：
from bs4 import BeautifulSoup
import urllib2
f = open('C:\Python27\projects\outflieFS.txt','w')
def First_part(url):
thepage = urllib2.urlopen(url)
soupdata = BeautifulSoup(thepage,
浏览 6提问于2016-03-21得票数 0
回答已采纳
我正在尝试解析一个具有相同名称的不同类的网站。我想要学习第一个类的元素(如网页所示)。但是，find_all或find不会保留解析的顺序。下面是我的find_all实现
请帮助：
import urllib.request
from bs4 import BeautifulSoup
searchQueryFK = "https://www.flipkart.com/search?q="+str("panasonic%2043e200dx")
r = urllib.request.urlopen(searchQueryFK).read()
soup = Bea
浏览 1提问于2018-03-13得票数 3
此代码生成属性错误，因为它与网页中的主题不匹配，原因是主题名称中的特殊字符。如果主题更改，将为以下代码提供任何解决方案
import requests
from bs4 import BeautifulSoup
import csv
seat = ""
total = ""
remarks = ""
percentage = ""
subjects = ["MANAGEMENT","PROGRAMMING WITH PYTHON","MOBILE APPLICATION DEVELOPME
浏览 1提问于2021-09-29得票数 0
我在刮flipkart网站。我需要在代码中进行哪些更改，以使错误消失并打印元素名称？
import requests
from bs4 import BeautifulSoup as soup
r=requests.get("https://www.flipkart.com/search?q=iphone&otracker=search&otracker1=search&marketplace=FLIPKART&as-show=on&as=off")
c=r.content
a=soup(c,"html.parser")
浏览 0提问于2019-03-24得票数 0
1回答
我是BeautifulSoup和Python的新手。这是我的HTML： <html>
<head></head>
<body>
<a href="https://google.com">Google</a>
<a href="https://yahoo.com">Yahoo</a>
</body>
</html> 现在我的代码是： from bs4 import BeautifulSoup
# Getting page souped ins
浏览 12提问于2020-11-06得票数 0
回答已采纳
如何通过BeautifulSoup获取以下sessionkey：
<a href=" https://website.com/login/logout.php?sesskey=Q3bAQgiGA2" class="dropdown-item menu-action" role="menuitem" data-title="logout" aria-labelledby="actionmenuaction-6">
输出应为: Q3bAQgiGA2
我尝试了一下：sesskey = soup.find(&#
浏览 4提问于2021-03-08得票数 0
1回答
我知道，要找到具有一个属性的所有类，如下所示。
soup.find_all('a', class_='className')
但是，这并不能获得类的所有标记，如下面所示。
soup.find_all('a', class_='class Name')
如何找到具有多属性类(如" class _='class Name'“)的漂亮汤对象的所有标记？
浏览 2提问于2018-03-16得票数 0
回答已采纳
3回答
下面是我的代码，以获得产品名称"RENU新鲜镜头解决方案120 ML“从url..this躺在p标签.我只需要这个名字。
import requests
import lxml
from bs4 import BeautifulSoup
url = "http://www.lenskart.com/renu-fresh-lens-solution-100-ml.html"
source = requests.get(url)
data = source.content
soup = BeautifulSoup(data, "lxml")
pn =
浏览 4提问于2016-12-26得票数 0
回答已采纳
1回答
具有相同类的多个元素
、、、
在我正在抓取的网站上，有2个具有相同类('ul', class_='list')的元素。 当我运行时： syn = soup.find('ul', class_='list')
print(syn.text) 我只获得了类('ul', class_='list')的第一个元素的文本 如何才能获得具有相同类名的第二个元素的文本？ (我试着到处搜索，但似乎找不到答案。)
浏览 23提问于2020-10-01得票数 0
回答已采纳
2回答
通常，我只会用类名来称呼div，但它并不是唯一的。div标记唯一的惟一之处是在div后面的单词“-sc-”。这是一个简短的源代码示例。
<div data-sc-replace data-sc-slot="1234" class = "inlineblock" data-sc-params="{'magnet': 'magnet:?......'extension': 'epub', 'stream': '' }"></div>
如果“
浏览 2提问于2017-04-29得票数 0
回答已采纳
我正在尝试学习BeautifulSoup，而且我以前没有它的经验，我正在根据这个问题-> 的答案来测试实现。
但是，我的输出与他们列出的输出不匹配，因为\n没有转换成新行。有什么问题，我该如何解决？
输入：
from bs4 import BeautifulSoup
html_doc = """<html>
<body>
<a class="black">
<b>
text1
</b>
<c>
text2
</c>
浏览 1提问于2018-11-02得票数 0
回答已采纳
我正在尝试从以下页面中抓取带有上下文信息的链接：。我可以通过Python使用BS4很好地获得这些链接，但是将年份、季节、标题和剧集与这些链接关联起来是最理想的。所需的输出将如下所示：
我已经从下面的代码开始，但不知道如何循环代码来捕获每个季/标题的部分内容：
import requests
from bs4 import BeautifulSoup
session = requests.Session()
link = 'https://www.reddit.com/r/anime/wiki/discussion_archive/2018'
request_20
浏览 1提问于2018-04-16得票数 0
使用BeautifulSoup，我试图打印特定标记中的文本，问题是我要打印的文本在<tr>标记中的标签中，而网页有30个<tr>标记。我需要打印的文本位于<tr>标记第19次出现的第二个<tr>标记中。看起来是这样的：
<tr>...</tr>
<tr>...</tr>
<tr>
<td class="QL">Text1</td>
<td class="QL">Text2</td>
&
浏览 0提问于2018-05-01得票数 2
回答已采纳
我刚开始吃蟒蛇和漂亮汤，如果这是个愚蠢的问题，我很抱歉。我试图创建一个，它以输入国家的名字命名，并从下面的网站()中找到它的货币供应。每当我试图查找所有a标记时，它都会给出以下错误：
"AttributeError: ResultSet object has no attribute 'find_all'.
You're probably treating a list of elements like a single element. Did you call find_all() when you meant to call find()? "
浏览 2提问于2021-07-12得票数 0
我正在刮一个网站，并想创建一个价目表。 prices = soup.find_all("li", class_="price") 但是，这将返回： <li class="price">€13.99</li>,
<li class="price">€12.99</li>,
..... 怎样才能提取出价格呢？我试过了 prices = soup.find_all("li", class_="price", text=True) 但它并没有起作用。
浏览 8提问于2019-07-03得票数 0
我正在使用BeautifulSoup抓取一个值，但是输出给了我两个值，因为它在页面上是两次，我如何选择其中之一？这是我的密码：
url = 'URL'
r = requests.get(url,headers=headers)
soup = BeautifulSoup(r.content, "html.parser")
data = soup.find_all("input", {'name': 'CsrfToken', 'type':'hidden'})
for data in
浏览 0提问于2018-03-02得票数 0
回答已采纳
2回答
page = urlopen("http://members.calbar.ca.gov/fal/Member/Detail//50225")
soup = BeautifulSoup(page.read()).find("div", {"id": "moduleMemberDetail"})
if soup.find("td",text=re.compile(r"e-mail:")) :
email = soup.find("td",text=re.compile(r&#
浏览 2提问于2013-09-24得票数 0
from bs4 import BeautifulSoup
import requests
import os
url = "http://nos.nl/artikel/2093082-steeds-meer-nekklachten-bij-kinderen-door-gebruik-tablets.html"
r = requests.get(url)
soup = BeautifulSoup(r.content.decode('utf-8', 'ignore'))
data = soup.find_all("article
浏览 1提问于2016-03-17得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM活动推荐
腾讯云开发者
