soup.findAll()为div类属性Beautifulsoup返回null
soup.findAll()是BeautifulSoup库中的一个方法，用于根据指定的标签名和属性值来查找HTML文档中的元素。该方法返回一个列表，包含所有符合条件的元素。
在给定的问答内容中，soup.findAll()返回null可能有以下几种情况：
- 没有找到符合条件的元素：如果在HTML文档中没有找到任何具有指定标签名和属性值的元素，soup.findAll()会返回一个空的列表。
- 参数传递错误：可能是因为参数传递错误导致没有找到符合条件的元素。在使用soup.findAll()方法时，需要确保正确传递了标签名和属性值。
为了更好地理解和解决这个问题，可以按照以下步骤进行操作：
- 确认HTML文档结构：首先，需要确认HTML文档的结构，确保要查找的元素存在于文档中。
- 检查参数传递：确认在调用soup.findAll()方法时，正确传递了标签名和属性值。可以通过打印输出相关参数来进行检查。
- 使用其他方法替代：如果soup.findAll()方法无法找到符合条件的元素，可以尝试使用其他BeautifulSoup提供的方法，如find()、find_all()等。
总结：
soup.findAll()是BeautifulSoup库中的一个方法，用于根据指定的标签名和属性值来查找HTML文档中的元素。当返回null时，可能是没有找到符合条件的元素或者参数传递错误。可以通过确认HTML文档结构、检查参数传递和尝试其他方法来解决该问题。
腾讯云相关产品和产品介绍链接地址：
- 腾讯云官网：https://cloud.tencent.com/
- 云服务器（CVM）：https://cloud.tencent.com/product/cvm
- 云数据库 MySQL 版：https://cloud.tencent.com/product/cdb_mysql
- 人工智能（AI）：https://cloud.tencent.com/product/ai
- 物联网（IoT）：https://cloud.tencent.com/product/iotexplorer
- 移动开发（移动推送）：https://cloud.tencent.com/product/umeng
- 云存储（COS）：https://cloud.tencent.com/product/cos
- 区块链（BCS）：https://cloud.tencent.com/product/bcs
- 元宇宙（Tencent Real-Time Rendering）：https://cloud.tencent.com/product/trr
相关·内容
19回答
如何按类查找元素
、、、
我在使用Beautifulsoup解析带有"class“属性的HTML元素时遇到了问题。代码如下所示
soup = BeautifulSoup(sdata)
mydivs = soup.findAll('div')
for div in mydivs:
if (div["class"] == "stylelistrow"):
print div
在脚本结束后，我在同一行得到了一个错误。
File "./beautifulcoding.py", line 130, in getlanguage
浏览 6提问于2011-02-18得票数 532
回答已采纳
我在div标签中有一堆div标签：
<div class="foo">
<div class="bar">I want this</div>
<div class="unwanted">Not this</div>
</div>
<div class="bar">Don't want this either
</div>
所以我用python和漂亮的汤把东西分开。只有当"bar“类被包装在"f
浏览 0提问于2014-03-06得票数 15
回答已采纳
在BeautifulSoup中，如果我想找到其类为span3的所有div，我只需这样做：
result = soup.findAll("div",{"class":"span3"})
但是，在我的例子中，我想查找类以span3开头的所有div，因此，BeautifulSoup应该找到：
<div id="span3 span49">
<div id="span3 span39">
以此类推。
我如何实现我想要的？我熟悉正则表达式；但是我不知道如何将它们实现为美丽的汤，也没有通过阅读Beaut
浏览 2提问于2016-02-18得票数 25
回答已采纳
我正在使用BeautifulSoup从这个url 获取手机的所有链接。
我的代码如下：
import urllib2
from BeautifulSoup import BeautifulSoup
url = "http://www.gsmarena.com/samsung-phones-f-9-0-p2.php"
text = urllib2.urlopen(url).read();
soup = BeautifulSoup(text);
data = soup.findAll('div',attrs={'class':'maker
浏览 3提问于2011-12-23得票数 13
回答已采纳
尝试使用BeautifulSoup从网页中提取文本。希望将soup.findall()的输出作为输入传递，以便使用re模块进一步清理数据
纯文本输入正常工作，但如果传递soup.findall()的输出，它将引发以下错误。
回溯(最近一次调用)：文件“scpe2.py”，第18行，在url = re.search( '，univ) File "/usr/lib/python2.7/re.py“中，第142行，在搜索返回_compile(模式，标志).search( string ) TypeError:预期字符串或缓冲区
soup.findall()的变量打印正在工作。
浏览 6提问于2013-11-24得票数 0
回答已采纳
1回答
用于检索href列表的优美汤
、、、、
谢谢大家的关注！我试图在搜索结果中检索产品的href。例如，本页：
然而，当我缩小到产品图像类时，检索的href是图像链接.有人能解决这个问题吗？提前感谢！
url = 'http://www.homedepot.com/b/Husky/N-5yc1vZrd/Ntk-All/Ntt-chest%2Band%2Bcabinet?Ntx=mode+matchall&NCNI-5'
content = urllib2.urlopen(url).read()
content = preprocess_yelp_page(content)
soup = BeautifulSou
浏览 2提问于2014-12-31得票数 0
回答已采纳
1回答
我想从包含以下HTML的网站中抓取一个页面：
<div class="section">
<div ng-bind="1" class="item even">First item</div>
<div ng-bind="2" class="item odd">Second item</div>
<div ng-bind="3" class="item-alt even">Third item</div&g
浏览 0提问于2022-09-22得票数 0
回答已采纳
我使用Python和BeautifulSoup进行web抓取。
假设我有下面的html代码要刮：
<body>
<div class="product">Product 1</div>
<div class="product">Product 2</div>
<div class="product special">Product 3</div>
<div class="product special">
浏览 1提问于2014-03-29得票数 40
2回答
我想找到所有的div标记，它们的class名称中都有特定的模式，但是我的代码没有按需要工作。
这是代码片段
soup = BeautifulSoup(html_doc, 'html.parser')
all_findings = soup.findAll('div',attrs={'class':re.compile(r'common text .*')})
其中html_doc是具有以下html的字符串
<div class="common text sighting_4619012">
&l
浏览 6提问于2015-08-13得票数 1
回答已采纳
2回答
我在试着刮
当我这么做时：
site = 'https://www.edsurge.com/product-reviews/curriculum-products/math'
soup = bs.BeautifulSoup(urlopen(site),"html5lib")
print soup
我可以找到我要找的<div class="browse-main p1">
但是，当我尝试使用以下方法查找它时：
for div in soup.findall('div',class_='browse-main p1
浏览 1提问于2018-05-11得票数 1
回答已采纳
使用soup，find_all返回空列表 代码： import bs4
import requests
from bs4 import BeautifulSoup
r = requests.get("https://finance.yahoo.com/quote/FB?p=FB")
soup = bs4.BeautifulSoup(r.text,"xml")
# returns:
soup.findAll("div", {"class":"D(ib) Mend(20px)"})
# []
浏览 37提问于2020-11-03得票数 0
3回答
我已经用这个命令读取了一个url：
import urllib2
from bs4 import BeautifulSoup
req = urllib2.Request(url, headers=hdr)
req2 = urllib2.urlopen(req)
content = req2.read()
soup = BeautifulSoup(content, "lxml")
我想刮一个网站的结构如下：
<div class='\"companyNameWrapper\"'>
\r\n
<div class='\&
浏览 0提问于2017-06-14得票数 0
2回答
抓取urls列表
、、、
我正在使用Python3.5，并试图抓取urls列表(来自同一网站)，代码如下：
import urllib.request
from bs4 import BeautifulSoup
url_list = ['URL1',
'URL2','URL3]
def soup():
for url in url_list:
sauce = urllib.request.urlopen(url)
for things in sauce:
soup_maker = Be
浏览 9提问于2017-02-17得票数 1
回答已采纳
我正在使用漂亮的汤从网站上抓取一些数据，但我不能在打印数据时删除数据中的html标记。引用的代码是：
import csv
import urllib2
import sys
from bs4 import BeautifulSoup
page = urllib2.urlopen('http://www.att.com/shop/wireless/devices/smartphones.html').read()
soup = BeautifulSoup(page)
soup.prettify()
for anchor1 in soup.findAll('div&
浏览 1提问于2012-12-19得票数 1
回答已采纳
1回答
爬行机制的问题
、、、
下面是我的twitter爬虫机制的一小部分代码片段：
from BeautifulSoup import BeautifulSoup
import re
import urllib2
url = 'http://mobile.twitter.com/NYTimesKrugman'
def gettweets(soup):
tags = soup.findAll('div', {'class' : "list-tweet"})#to obtain tweet of a follower
for tag in ta
浏览 2提问于2011-08-05得票数 0
回答已采纳
我需要在函数中使用bs4的帮助。如果我想通过函数传递到findAll (或find)的路径，它就不能工作。请看下面的样品。
from bs4 import BeautifulSoup
data = '<h1 class="headline">Willkommen!</h1>'
def check_text(path, value):
soup = BeautifulSoup(''.join(data), "lxml")
x1 = "h1", {"class&#
浏览 0提问于2017-07-11得票数 0
回答已采纳
我在继续写我的twitter爬虫，并且遇到了更多的问题。看看下面的代码：
from BeautifulSoup import BeautifulSoup
import re
import urllib2
url = 'http://mobile.twitter.com/NYTimesKrugman'
def gettweets(soup):
tags = soup.findAll('div', {'class' : "list-tweet"})#to obtain tweet of a follower
for
浏览 3提问于2011-08-05得票数 0
回答已采纳
2回答
通常，我只会用类名来称呼div，但它并不是唯一的。div标记唯一的惟一之处是在div后面的单词“-sc-”。这是一个简短的源代码示例。
<div data-sc-replace data-sc-slot="1234" class = "inlineblock" data-sc-params="{'magnet': 'magnet:?......'extension': 'epub', 'stream': '' }"></div>
如果“
浏览 2提问于2017-04-29得票数 0
回答已采纳
我试着用下面的代码在一个网页中找到一个包含类"data“的表。
import urllib2
from BeautifulSoup import BeautifulSoup
soup = BeautifulSoup(urllib2.urlopen('http://www.cbssports.com/nba/draft/mock-draft').read())
rows = soup.findAll("table.data")
print rows
但是，即使我确定在该页面上存在一个具有类"data“的表，我也没有得到任何行。用Beautifu
浏览 0提问于2012-06-25得票数 3
回答已采纳
3回答
我在收集链接的代码中有这个部分：
def Get_Links():
r = requests.get(main).text
soup = BeautifulSoup(r, 'html.parser')
links = []
for item in soup.findAll("a", {'class': 'ap-area-link'}):
links.append(item.get("href"))
return links
如果网页源是：
<a class="ap-area-link"
浏览 4提问于2019-12-26得票数 0
回答已采纳
我正在解析一些表w/ BeautifulSoup，并找到了一种简单的方法来选择表的td和th标记。尽管我可能尝试，但我不知道为什么这段特定的代码工作(特别是:最后一行)。
response = urlopen(url)
table = SoupStrainer('table',{'border': 0, 'cellpadding': 5})
soup = BeautifulSoup(html, parseOnlyThese = table)
soup.findAll(lamba tag: tag.name == "td")
定义匿
浏览 2提问于2017-02-06得票数 2
回答已采纳
我的HTML有几个表，第一个表是：
<table>
<tr>
<td>
<div id="string">
</div>
</td>
</tr>
</table>
其余的是形式：
<table class="confluenceTable" data-csvtable="1">
<tbody>
<
浏览 2提问于2016-07-24得票数 1
回答已采纳
当我使用BeautifulSoup在列出产品名称和价格时，类似的代码在其他网站上起作用。但是在这个网站上运行时，soup.findAll属性是存在的，但是没有刮到文本，AttributeError就发生了。是否有人可以帮助查看代码和网站检查？
我检查并运行了很多次，同样的问题仍然存在。
代码在这里：
url = 'https://shopee.co.id/Handphone-Aksesoris-cat.40'
re = requests.get(url,headers=headers)
print(str(re.status_code))
soup = BeautifulSou
浏览 0提问于2019-09-01得票数 1
回答已采纳
下面有下面的代码，我正试图得到'Oswestry，英格兰‘作为结果。
label = soup.findall('span',{'class':"ProfileHeaderCard-locationText"})
print(label)
但是，它并没有给我任何价值。
下面是HMTL代码的样子
<span class="ProfileHeaderCard-locationText u-dir" dir="ltr">
<a data-place-id="5b756a1991
浏览 2提问于2020-04-10得票数 1
下面是我的代码。
import urllib
from BeautifulSoup import *
html=urllib.urlopen('http://yellowpages.sulekha.com/coffee-shops-bars-restaurants_delhi')
soup=BeautifulSoup(html)
tags=soup.findAll("li",{ "class" : "list-item" })
print tags
我希望找到所有具有class 'list-item‘的'li’标
浏览 6提问于2016-08-07得票数 1
回答已采纳
有人能解释一下findAll在BeautifulSoup中是如何工作的吗？
我怀疑的是这一行：A = soup.findAll('strong',{'class':'name fn'})。看起来好像找到了一些符合某些标准的字符。
但是网页的原始代码是.<STRONG class="name fn">iPod nano 16GB</STRONG>.
('strong',{'class':'name fn'})是怎么捡起来的？谢谢。
原始Python码
from
浏览 1提问于2013-11-08得票数 1
回答已采纳
1回答
我尝试从网站获取html数据，但是data_table返回null并试图跟踪代码，当我试图获取头部数据时，它将返回html上下文。
import requests
from bs4 import BeautifulSoup
import html.parser
from html.parser import HTMLParser
import time
from random import randint
import sys
from IPython.display import clear_output
import
浏览 3提问于2016-06-28得票数 1
回答已采纳
2回答
我想在python3中使用BeautifulSoup从带有'cinema‘和'timings’类的div中提取数据。如何使用soup.findAll完成此操作？
<div data-order="0" class="cinema">
<div class="__name">SRS Shoppers Pride Mall<span class="__venue"> - Bijnor</span>
</div>
<d
浏览 2提问于2016-02-07得票数 1
我正在尝试获取a标记内的字符串信息，但a标记位于h1标记内。
<h1 class="branded-page-header-title">
<span class="qualified-channel-title ellipsized"><span class="qualified-channel-title-wrapper"><span dir="ltr" class="qualified-channel-title-text" ><a dir=&
浏览 0提问于2014-09-04得票数 1
2回答
如何将html代码按字母顺序排序？
from bs4 import BeautifulSoup
html = '''[<div>Red </div>, <div>Green </div>, <div>Orange </div>, <div>Blue </div>]'''
soup = BeautifulSoup(html, 'html.parser')
paints = soup.findAll("div")
pr
浏览 1提问于2022-10-07得票数 0
我在这里尝试抓取div之间的文本：
我试着像这篇文章提到的那样使用.next_sibling：
但它并没有起作用。
我当前的代码：
for pageNumber in range(1565, 1566):
address = "https://dojrzewamy.pl/cat/3/nowe/%d/seks" % pageNumber
page = requests.get(address)
soup = BeautifulSoup(page.content, 'html.parser')
containers = so
浏览 7提问于2020-01-03得票数 0
使用findAll会出现"TypeError: list索引必须是整数，而不是str“的错误，而使用.find没有。使用findall，错误"TypeError：'NoneType‘对象不可调用”。
有什么正确的方法来锁定页面上有“框架”类的所有链接，而不仅仅是第一个实例？
import requests
from bs4 import BeautifulSoup
url = ("http://www.gym-directory.com/listing-category/gyms-fitness-centres/")
r = requests.get(
浏览 1提问于2015-09-28得票数 2
回答已采纳
我尝试使用BeautifulSoup来获取HTML标记的列表，然后检查它们是否有<div>属性，然后返回该属性值。请参考我的代码：
soup = BeautifulSoup(html) #assume html contains <div> tags with a name attribute
nameTags = soup.findAll('name')
for n in nameTags:
if n.has_key('name'):
#get the value of the name attribute
我的
浏览 1提问于2012-05-29得票数 1
这行得通..。
print soup.findAll('td',{ "class" : "green center" })
但我只需要文本，这是行不通的…
print soup.findAll('td',{ "class" : "green center" }).text
下面是我是如何使用它的。
#!python27
import fileinput
import sys
import BeautifulSoup
from BeautifulSoup import Beautifu
浏览 1提问于2012-11-19得票数 1
回答已采纳
我正在尝试从收集数据的站点。现在，我想得到这个页面上所有的电影标题，然后转移到其余的数据(工作室，等等)。以及每个链接中的其他数据。到目前为止，这就是我所拥有的：
import requests
from bs4 import BeautifulSoup
from urllib2 import urlopen
def trade_spider(max_pages):
page = 0
while page <= max_pages:
url = 'http://www.boxofficemojo.com/yearly/chart/?page=&#
浏览 5提问于2015-06-24得票数 0
回答已采纳
2回答
到目前为止我的代码是：
year = range(1958,2013)
randomYear = random.choice(year)
randomYear = str(randomYear)
page = range(1,5)
randomPage = random.choice(page)
randomPage = str(randomPage)
print(randomPage, randomYear)
url = 'http://www.billboard.com/artists/top-100/'+randomYear+'?page='+random
浏览 0提问于2013-12-18得票数 8
回答已采纳
2回答
from bs4 import BeautifulSoup
import requests
url = 'https://www.flipkart.com'
data = {
'q': 'laptops'
}
html_code = requests.post(url, data=data).text
soup = BeautifulSoup(html_code, 'lxml')
titles = soup.findAll('div', class_='_3wU53n')
浏览 25提问于2020-08-10得票数 0
回答已采纳
<td class="user-info">
<div class="id" title="Player ID">1211</div>
<div class="name" title="PName">Ronaldo</div>
</td>
我想在"Player ID“中刮掉1211，但做不到。
adressyr = urllib2.urlopen("WEBSITE")
soup = BeautifulSoup(adres
浏览 4提问于2015-09-06得票数 0
回答已采纳
这里是HTML和Python的新手。我希望与Python刮一个网站，以找到拍卖数据。我想找到所有的列表与文本"lb，lbs。，磅“等。下面是我感兴趣的HTML代码清单示例：
<a class="product" href="/Item/91150404">
<div class="title">
30.00 LB Lego Mini Figures Lego People Grab Bag
浏览 2提问于2020-04-20得票数 0
2回答
我曾寻找过类似的问题，但没有找到我需要的。
我在web中搜索两个属性--本例中为red和span中的green
from urllib.request import urlopen
from bs4 import BeautifulSoup
html=urlopen('http://www.pythonscraping.com/pages/warandpeace.html')
soup=BeautifulSoup(html,'html.parser')
nameList=soup.findAll("span",{"class":&
浏览 0提问于2018-11-23得票数 0
回答已采纳
2回答
我正在尝试获取以下链接，使用美丽的汤
<div class="alignright single">
<a href="http://www.dailyhadithonline.com/2013/07/21/hadith-on-clothing-women-should-lower-their-garments-to-cover-their-feet/" rel="next">Hadith on Clothing: Women should lower their garments to cover their feet&
浏览 3提问于2013-12-09得票数 1
回答已采纳
我对使用Python进行网络抓取非常陌生，从HTML中提取嵌套文本(确切地说，是div中的p)真的很难。这是我到目前为止所得到的：
from bs4 import BeautifulSoup
import urllib
url = urllib.urlopen('http://meinparlament.diepresse.com/')
content = url.read()
soup = BeautifulSoup(content, 'lxml')
这可以很好地工作：
links=soup.findAll('a',{'title&#
浏览 3提问于2016-04-20得票数 9
回答已采纳
1回答
我可以把这一页刮到头条，没问题。URL是另一个故事。它们是被附加在基本URL末尾的片段-我理解.要以base_url.scraped_fragment格式提取存储的相关URL，需要什么？
from urllib2 import urlopen
import requests
from bs4 import BeautifulSoup
import csv
import MySQLdb
import re
html = urlopen("http://advances.sciencemag.org/")
soup = BeautifulSoup(html.read().dec
浏览 1提问于2016-04-22得票数 1
回答已采纳
我正在尝试用美丽的汤在一个网站上获取一些特定的图片：
from bs4 import BeautifulSoup
import urllib.request
import random
url=urllib.request.urlopen("https://www.arandomlink.com")
content = url.read() #We read it
soup = BeautifulSoup(content) #We create a BeautifulSoup object
#WE OBTAIN THE URL OF THE
浏览 1提问于2017-07-04得票数 0
1回答
我正在发送一个GET请求到一个使用requests.request在python的网站。当我在标题中设置用户代理时，我只会在响应中得到脚本标记。当我不设置用户代理时，我会得到除了脚本之外的所有标记。有什么问题吗？有什么想法吗？
只有脚本标记的代码：
headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/83.0.4103.116 Safari/537.36'}
URL = 'ht
浏览 10提问于2022-07-18得票数 0
嗨，我正在写抓取代码，但当我试图从网站获取所有段落时，它给我以下错误Unicode Encode错误: Charmap无法编码字符'\xa9‘
下面是我的代码：
#Loading Libraries
import urllib
from urllib.parse import urlparse
from urllib.parse import urljoin
import urllib.request
from bs4 import BeautifulSoup
#define URL for scraping
newsurl = "http://www.techspot.
浏览 0提问于2017-01-20得票数 0
1回答
我想解析一个网站。然而，我有一个无法真正解释的行为:我通过beautifulSoup网站喝汤。它是一个bs4元素。但是，当我想要查找所有提到的应答器时，它显示元素的类型为None。请找到下面的代码：
from bs4 import BeautifulSoup
import urllib2 as web
url = "http://www.stevegtennis.com/men-atp-rankings/2015-7-6/1/all/"
soup = BeautifulSoup(web.urlopen(url).read(),'lxml')
print typ
浏览 0提问于2015-07-16得票数 0
我试图刮一个房地产网站，但我遇到了一个div与相同的类名(class=“号码”)，但有3个不同的价值(“卧室”，“浴室”和“车库”)。下面是我想要搜集的数据：
<div class="infoHolder">
<div class="title">3 Bed Townhouse in Ferndale</div>
<div class="priceDescription">R 1 280 000</div>
<d
浏览 5提问于2022-01-12得票数 1
2回答
我想从指定的父标记中获取任意级别嵌套兄弟姐妹下的所有img标记，但是我的实现没有打印出任何el。
<div class='grand'>
<div>
<img src='1.png'>
</div>
<div>
<div>
<img src='2.png'>
</div>
</div>
<img src='3.png
浏览 3提问于2020-05-02得票数 1
回答已采纳
from bs4 import BeautifulSoup
import requests
yt_link = "https://www.youtube.com/watch?v=bKDdT_nyP54"
response = requests.get(yt_link)
soup = BeautifulSoup(response.content, 'html.parser')
title = soup.findAll('div', {'class': 'style-scope ytd-app'})
print(t
浏览 4提问于2021-05-26得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
