查找位于另一个标记BeautifulSoup之前的标记
在使用BeautifulSoup进行HTML解析时，可以通过一些方法来查找位于另一个标记BeautifulSoup之前的标记。以下是一种常用的方法：
- 使用BeautifulSoup的find_all方法结合CSS选择器来查找目标标记。可以通过指定目标标记之后的兄弟标记来实现查找位于另一个标记之前的标记。
示例代码如下：
from bs4 import BeautifulSoup
# 假设html是待解析的HTML文档
html = """
<html>
<head>
<title>网页标题</title>
</head>
<body>
<div class="content">内容1</div>
<div class="content">内容2</div>
<div class="target">目标标记</div>
<div class="content">内容3</div>
</body>
</html>
"""
soup = BeautifulSoup(html, 'html.parser')
# 使用CSS选择器查找位于目标标记之前的标记
target_tag = soup.select('.target')[0]
previous_tags = target_tag.find_all_previous(class_='content')
for tag in previous_tags:
print(tag.text)输出结果为：
内容2
内容1在上述示例中，我们首先使用CSS选择器.target找到目标标记<div class="target">目标标记</div>，然后使用find_all_previous方法查找位于目标标记之前的所有<div>标记，并通过遍历打印出它们的文本内容。
这种方法适用于查找位于另一个标记之前的任意类型的标记。根据具体的HTML结构和需求，可以使用不同的CSS选择器和属性来定位目标标记和前置标记。
腾讯云相关产品和产品介绍链接地址：
- 腾讯云官网：https://cloud.tencent.com/
- 云服务器（CVM）：https://cloud.tencent.com/product/cvm
- 云数据库 MySQL 版：https://cloud.tencent.com/product/cdb_mysql
- 云原生应用引擎（TKE）：https://cloud.tencent.com/product/tke
- 云存储（COS）：https://cloud.tencent.com/product/cos
- 腾讯云区块链服务（BCS）：https://cloud.tencent.com/product/bcs
- 腾讯云物联网平台（IoT Hub）：https://cloud.tencent.com/product/iothub
- 腾讯云人工智能（AI）：https://cloud.tencent.com/product/ai
- 腾讯云移动开发（移动推送、移动分析）：https://cloud.tencent.com/product/mobile
- 腾讯云音视频处理（云点播、云直播）：https://cloud.tencent.com/product/vod
相关·内容
1回答
我想用BeautifulSoup识别大型文本文档中的一个拆分点。因此，我已经制定了一个正则表达式来查找出现特定字符串的标记。问题是，如果在我正在搜索的字符串中有进一步的格式化/子节点，它就无法工作。
t1 = BeautifulSoup("<p class=\"p p8\"><strong>Question-And-Answer</strong></p>")
t2 = BeautifulSoup("<p class=\"p p8\"><strong>Question
浏览 0提问于2019-02-07得票数 3
回答已采纳
1回答
美汤经典迷惑
、、
使用Python和Beautifulsoup。CSS标记有点新手，所以我知道我正在犯一些初学者的错误，一个具体的例子将有助于我理解很长一段路。
我正在尝试抓取页面中的链接，但仅限于某些链接。
links = soup.find_all("a", class_="details-title")
浏览 8提问于2017-02-15得票数 0
回答已采纳
1回答
我正努力做一个网络抓取机器人，每小时都要检索我的成绩。我已经对它登录到网站的部分进行了编码，但我不知道如何使用bs4提取分数，而最终却得到了大部分页面。
# Importing all modules
from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.common.keys import Keys
import time
from bs4 import BeautifulSoup
# Onening myHIES through webdrive
浏览 17提问于2022-08-26得票数 -1
回答已采纳
2回答
到目前为止，我的代码如下：
from bs4 import BeautifulSoup
soup = BeautifulSoup(website_url,'lxml')
my_table = soup.find('table',{'class':'wikitable sortable'})
from urllib.request import urlopen as uReq
from bs4 import BeautifulSoup as soup
my_url = 'https://en.wikipedia
浏览 3提问于2020-01-27得票数 2
回答已采纳
下面是我的当前代码：
from bs4 import BeautifulSoup
import requests
header = {'User-agent' : 'Mozilla/5.0 (Windows; U; Windows NT 5.1; de; rv:1.9.1.5) Gecko/20091102 Firefox/3.5.5'}
url = requests.get("https://d1baseball.com/scores/?date=20170407&c=PKzxg", headers = header).text
浏览 0提问于2017-06-13得票数 0
回答已采纳
1回答
我有一个从网站网站上抓取所有页面的web数据帧：
import pandas as pd
import requests
from bs4 import BeautifulSoup
for page_no in range(1, 467):
url = 'http://www.animeka.com/animes/~_{}.html'.format(page_no)
titles, studios, genres, durations = [], [], [], []
for page_no in range(1, 467):
url =
浏览 0提问于2018-02-28得票数 1
1回答
我有以下html：
from bs4 import BeautifulSoup as soup
html_doc = """<div class="__cast-member" content="Vishal Krishna Reddy" itemprop="name"><div class="__cast-image wow fadeIn"><meta content="https://in.bmscdn.com/iedb/artist/images/website/
浏览 0提问于2018-05-21得票数 1
回答已采纳
根据Ryan Mitchell所著的“用Python进行网络抓取”一书，他使用了re.compile。谁能解释一下re.compile()在这种情况下的用途，以及re.compile()
代码是用python 3编写的。
from urllib.request import urlopen
from bs4 import BeautifulSoup
import re
pages = set()
def getLinks(pageUrl):
global pages
html = urlopen("http://en.wikipedia.org"+pageUrl
浏览 27提问于2017-02-26得票数 2
回答已采纳
3回答
标题很冗长，但描述了我想要的东西。我正在用BeautifulSoup解析一个XML。我的XML格式如下：
<properties>
<place>
<house_id>12345</house_id>
<appliances>Fridge, Oven</appliances>
<price>350000</price>
</place>
<place>
<house_id>67
浏览 10提问于2021-10-20得票数 0
我试图从另一个站点上抓取一些内容，但我不确定为什么BeautifulSoup会产生这样的输出。它只在匹配中找到一个空格，但真正的HTML包含大量标记。如果这是我的愚蠢之处，我道歉。我是python的新手。
下面是我的代码：
import sys
import os
import mechanize
import re
from BeautifulSoup import BeautifulSoup
def scrape_trails(BASE_URL, data):
#Get the trail names
soup = BeautifulSoup(data)
site
浏览 0提问于2011-01-09得票数 1
回答已采纳
对于python中的html解析非常方便，但是我遇到了一些问题，需要使用干净的代码来直接使用string或text获得值。
from bs4 import BeautifulSoup
tr ="""
<table>
<tr><td>text1</td></tr>
<tr><td>text2<div>abc</div></td></tr>
</table>
"""
table = B
浏览 7提问于2016-07-28得票数 1
回答已采纳
3回答
我想从HTML页面中提取特定的URL。
from urllib2 import urlopen
import re
from bs4 import BeautifulSoup
url = http://bassrx.tumblr.com/tagged/tt # nsfw link
page = urlopen(url)
html = page.read() # get the html from the url
# this works without BeautifulSoup, but it is slow:
image_links = re.findall("sr
浏览 4提问于2014-06-16得票数 0
我对None元素有问题，我添加了if来测试这一点，但它仍然不起作用：
soup = BeautifulSoup(htmlpage, "lxml")
element = soup.find(None, "div", class_='12345').find('a')
if element is not None:
print "Your element is: " + element.text
else:
print "No element"
错误：
page =
浏览 2提问于2017-05-31得票数 0
回答已采纳
2回答
这段代码：
from bs4 import BeautifulSoup
from urllib2 import urlopen
f = urlopen("http://www.groupon.co.uk/").read()
bs = BeautifulSoup(f)
for tag in bs.find_all('ul', {'id': 'jCitiesSelectBox'}):
print tag.li['onclick']
只打印第一个标签，不打印jCitiesSelectBox中的所有标签，我不
浏览 2提问于2012-05-20得票数 0
我对网络抓取非常陌生。我读到了关于BeautifulSoup的文章，并试图使用它。但我无法提取具有给定类名“company-desc-and-排序容器”的文本。我甚至不能从html页面中提取标题。这是我尝试过的代码：
from BeautifulSoup import BeautifulSoup
import requests
url= 'http://fortune.com/best-companies/'
r = requests.get(url)
soup = BeautifulSoup(r.text)
#print soup.prettify()[0:10
浏览 5提问于2016-12-20得票数 1
回答已采纳
我正在尝试从/r/Askreddit获取线程标题。下面的代码返回None，而不是线程标题。
from BeautifulSoup import BeautifulSoup
import urllib2, json
site='http://www.reddit.com/r/AskReddit/'
soup=BeautifulSoup(urllib2.urlopen(site))
questions=soup.findAll('p',{"class":"title"})
for i in questions:
浏览 0提问于2011-10-09得票数 0
我使用的是Django 2，Python3.7和BeautifulSoup 4。我有下面的代码，它应该在一个元素中找到一个元素……
req = urllib2.Request(fullurl, headers=settings.HDR)
html = urllib2.urlopen(req, timeout=settings.SOCKET_TIMEOUT_IN_SECONDS).read()
bs = BeautifulSoup(html, features="lxml")
pattern = re.compile(r'^submitted ')
posted_
浏览 20提问于2020-03-03得票数 0
回答已采纳
2回答
我有一个大约20000文章的标题清单，我想刮他们的引文计数从谷歌学者。我是BeautifulSoup图书馆的新手。我有这样的代码：
import requests
from bs4 import BeautifulSoup
query = ['Role for migratory wild birds in the global spread of avian
influenza H5N8','Uncoupling conformational states from activity in an
allosteric enzyme','Tec
浏览 0提问于2019-05-20得票数 0
回答已采纳
我有一个HTML文档，我想解析出一个具有特定id的表，该表始终位于具有特定id的div标记中。下面是我尝试过的：
soup = BeautifulSoup(html)
target_div = soup('div', {'id' : 'left'})
target_table = target_div.findNextSibling('table')
显然这是行不通的。我的第二个语句似乎返回了一个ResultSet，而不是在文档中移动(我认为这是有意义的，但我不确定如何获得我需要的东西！)。进行这种解析的正确方法是什么？
浏览 0提问于2012-11-16得票数 0
回答已采纳
在使用BeautifulSoup4时，我可以运行这段代码来获得一个“大喊”，没有问题。当我使用for循环时，我得到了错误AttributeError: 'NavigableString' object has no attribute 'children'
class Shout:
def __init__(self, user, msg, date):
self.user = user
self.msg = msg
self.date = date
def getShouts():
#s is
浏览 4提问于2015-05-30得票数 1
回答已采纳
from BeautifulSoup import BeautifulSoup
soup = BeautifulSoup('http://arithmetic.zetamac.com/game?key=96823302')
problem = soup.findAll('problem')
print(problem)
网页上的problem是文本，但这不是print.What是这里的问题吗？
浏览 6提问于2016-10-24得票数 0
我正在寻找一种方法来使用findAll来获得两个标签，按照它们在页面上出现的顺序。
目前我有：
import requests
import BeautifulSoup
def get_soup(url):
request = requests.get(url)
page = request.text
soup = BeautifulSoup(page)
get_tags = soup.findAll('hr' and 'strong')
for each in get_tags:
print each
浏览 2提问于2013-12-18得票数 62
回答已采纳
<td class="tag">
<a href="/tag/android" rel="tag">
<img src="http://127.0.0.1/idf2.png" >
android
</a>
</td>
代码：
soup = BeautifulSoup(html)
print html.td.a.string # output None
BeautifulSoup4中的哪种方法可以检索到&l
浏览 0提问于2013-06-07得票数 0
回答已采纳
2回答
我试图通过使用来自BeautifulSoup的代码从SEC网站(如 )中提取与的每一个链接。问题是，我不想提取每8-K，但只有那些匹配项"2.02“列”描述“。因此，我编辑了"Download.py“文件并识别了以下内容：
while continuation_tag:
r = requests_get(browse_url, params=requests_params)
if continuation_tag == 'first pass':
logger.debug("EDGAR se
浏览 7提问于2021-03-13得票数 1
回答已采纳
如果我应用每个下拉列表的静态值，我就能够获取数据，但是现在我尝试获取动态值，循环遍历下拉列表的每个值，并将结果存储到mysqldb。
问题: I无法循环每个下拉元素并将结果存储到数据库，如果我为每三个下拉列表传递静态值，那么我就可以这样做。
静态值工作代码
import time
from selenium import webdriver
import requests
from bs4 import BeautifulSoup
import MySQLdb
url = "http://xlnindia.gov.in/frm_G_Cold_S_Query.aspx&#
浏览 0提问于2017-05-31得票数 0
回答已采纳
我目前在理解以下错误时遇到了问题：
AttributeError: 'NoneType' object has no attribute 'find_all'
它指的是以下代码的第21行：
import pandas as pd
import requests
from bs4 import BeautifulSoup
url = 'https://www.dwd.de/DE/wetter/wetterundklima_vorort/hessen/offenbach/_node.html'
page = requests.get(url)
浏览 1提问于2022-11-03得票数 -1
回答已采纳
3回答
我一直在尝试使用下面网站页面上的美丽汤来收集facebook的评论。
import BeautifulSoup
import urllib2
import re
url = 'http://techcrunch.com/2012/05/15/facebook-lightbox/'
fd = urllib2.urlopen(url)
soup = BeautifulSoup.BeautifulSoup(fd)
fb_comment = soup("div", {"class":"postText"}).find(text=T
浏览 2提问于2013-01-19得票数 3
下面的代码应该在pythonscraping.com下载徽标图像，但返回错误：“
AttributeError：“NoneType”对象没有属性“查找”
".似乎错误在于BeautifulSoup bs对象返回为非类型。
到目前为止，使用相同代码调用的所有BeautifulSoup对象都可以工作。请问这里的错误在哪里？谢谢。
from urllib.request import urlretrieve
from urllib.request import urlopen
from bs4 import BeautifulSoup
html = urlopen('http:
浏览 2提问于2022-04-22得票数 0
回答已采纳
1回答
我使用解析谷歌搜索，但得到的列表是空的。我想用谷歌的“你是什么意思吗？”来做拼写检查。
import requests
from bs4 import BeautifulSoup
import urllib.parse
text = "i an you ate goode maan"
data = urllib.parse.quote_plus(text)
url = 'https://translate.google.com/?source=osdd#view=home&op=translate&sl=auto&tl=en&t
浏览 28提问于2019-11-30得票数 3
1回答
我是BeautifulSoup和Python的新手。这是我的HTML： <html>
<head></head>
<body>
<a href="https://google.com">Google</a>
<a href="https://yahoo.com">Yahoo</a>
</body>
</html> 现在我的代码是： from bs4 import BeautifulSoup
# Getting page souped ins
浏览 12提问于2020-11-06得票数 0
回答已采纳
我正在使用BeautifulSoup来解析一个包含艺术家和专辑信息的网页内容。我已经将信息解析为：
`<span dir="ltr"><a href="unique?id=1234">Jay-Z</a> & <a href="unique?id" = 321">Kanye West</a> - Watch the Throne</span>`
专辑名称(在本例中为“观看王座”)始终位于结束</span>标记之前。
我需要从整个<spa
浏览 0提问于2011-11-20得票数 2
回答已采纳
2回答
该页面是：
你可以看到它的源代码。
在它的源代码中存在以下代码
<a href="http://item.taobao.com/item.htm?id=13015989524" target="_blank">
但是当我使用BeautifulSoup读取源代码并执行以下代码时
soup.findAll('a', href="http://item.taobao.com/item.htm?id=13015989524")
它返回[] empty。它返回'[]‘是什么？
浏览 2提问于2012-03-11得票数 0
回答已采纳
3回答
下面是一个简单的BeautifulSoup代码，它有两个内部JavaScript(不要责怪JavaScript，它只是为了测试目的)。
from bs4 import BeautifulSoup
html = """
<html><head><title>The Dormouse's story</title>
<script>
var x = 5;
var y = 6;
document.getElementById("demo").innerHTML = x + y;
//docu
浏览 0提问于2014-05-07得票数 2
1回答
使用Python2.7和BeautifulSoup 4，我从一个表中抓取歌曲名。
现在，脚本在表的行中找到链接；我如何指定我想要第一列？
理想情况下，我可以改变号码，以改变哪些被选中。
现在，代码如下所示：
from bs4 import BeautifulSoup
import requests
r = requests.get("http://evamsharma.finosus.com/beatles/index.html")
data = r.text
soup = BeautifulSoup(data)
for table in soup.find_all
浏览 7提问于2014-04-09得票数 1
回答已采纳
我有以下HTML代码： <a class="nav-link" href="https://cbd420.ch/fr/tous-les-produits/">
<span class="cbp-tab-title">
Shop <i class="fa fa-angle-down cbp-submenu-aindicator"></i></span>
</a> 我想得到锚标签，它有Shop作为文
浏览 28提问于2020-04-30得票数 0
回答已采纳
3回答
from bs4 import BeautifulSoup
source_code = """<a href="#" name="One"></a>
<a href="#" name="Two"></a>"""
soup = BeautifulSoup(source_code)
print soup.a['name'] #prints 'One'
使用Beaut
浏览 4提问于2013-10-24得票数 2
回答已采纳
我正在使用Python中的BeautifulSoup处理一个“递归”项目。我读过一份正式文件和许多问题，但我仍然不明白。
from bs4 import BeautifulSoup
s = "<div>C<p><strong>A</strong>B</p></div>"
soup = BeautifulSoup(s, 'html.parser')
print(soup.find("p", recursive=False))给出None
是不是因为我们找不到<
浏览 2提问于2021-11-08得票数 1
回答已采纳
我在txt文件中有一些数据，我试图在这个文件中找到一些特定的单词。
import re
from bs4 import BeautifulSoup
with open ("myfile.txt") as f:
soup = BeautifulSoup(f)
print (soup.find_all("DLC"))
文件中至少有5 DLC，但是输出是一个空列表。我把soup = BeautifulSoup(f)改成了soup = BeautifulSoup(f),"html.parser"，但没有起作用。为什么它返回一个空列表
浏览 3提问于2016-05-04得票数 0
回答已采纳
2回答
我正在使用beautifulsoup.Some构建一个网络爬行器，网站有javascript内容，不使用urllib3加载，因此我使用them.But的selenium，selenium需要太长的时间和太多的响应，我需要构建一个更高效的网络爬行器，因为我需要为多个网站使用相同的通用爬行器。因此，我在想，如果有什么方法可以找出网站是否只有js内容，那么我将使用selenium，否则我将使用更快的urllib
from selenium import webdriver
from bs4 import BeautifulSoup
import time
browser = webdriver.C
浏览 2提问于2019-06-24得票数 0
我在test.py中有以下BeautifulSoup代码。
#!/usr/bin/env python
# vim: set noexpandtab tabstop=2 shiftwidth=2 softtabstop=-1:
from bs4 import BeautifulSoup
import sys
soup = BeautifulSoup(sys.stdin.read(), 'html.parser', from_encoding='utf-8')
import re
from pprint import pprint
pprint(soup.f
浏览 1提问于2016-01-03得票数 1
1回答
我从另一个开发人员那里继承了一个函数，该函数应该检查电子邮件消息的body参数是HTML正文还是明文。如果它是HTML，它会将正文的普通版本和html版本附加到消息中，如果主体不是html，则只附加一个普通正文。
def insertBody(self, body):
if bool(BeautifulSoup(body, "html.parser").find()):
b = MIMEMultipart('alternative')
b.attach( MIMEText(html2text.html2text(body)
浏览 6提问于2017-05-17得票数 0
回答已采纳
简要说明:我有一个遍历页面元素，然后返回数据的脚本。但我希望它返回的数据不是在元素中，而是按顺序。
import argparse, os, socket, urllib2, re
from bs4 import BeautifulSoup
pge = urllib2.urlopen("").read()
src = BeautifulSoup(pge)
body = src.findAll('body')
el = body[0].findChildren()
for s in el:
cname = s.get('class')
浏览 0提问于2014-01-21得票数 1
我正在尝试解析此页面的，并仅获取
标题，描述
对于每个部分，就是这样，没有标签。我解析页面并尝试搜索所有<title>和<p>标记，但没有产生正确的结果。
我使用的是Python2.7和BeautifulSoup 3-2-0
下面是我的代码示例：
import urllib2, sys
address = sys.argv[1]
html = urlib2.urlopen(http://www.lib.uts.edu.au/about-uts-library/corporate-information/library-glossary).read()
from Beau
浏览 1提问于2011-09-29得票数 0
我尝试使用BeautifulSoup来获取HTML标记的列表，然后检查它们是否有<div>属性，然后返回该属性值。请参考我的代码：
soup = BeautifulSoup(html) #assume html contains <div> tags with a name attribute
nameTags = soup.findAll('name')
for n in nameTags:
if n.has_key('name'):
#get the value of the name attribute
我的
浏览 1提问于2012-05-29得票数 1
3回答
我正在使用此代码连接到supremenewyork，并查明某一项是缺货还是缺货。搜索似乎不起作用
import requests
from bs4 import BeautifulSoup
url = 'https://www.supremenewyork.com/shop/jackets/xqfitokcd/sqt46dyvb'
res = requests.get(url)
html_page = res.content
soup = BeautifulSoup(html_page, 'html.parser')
text = soup.find_all(
浏览 2提问于2020-04-25得票数 1
回答已采纳
我正在使用BeautifulSoup4抓取一个站点。以下是我所拥有的内容的精简版本：
from bs4 import BeautifulSoup
def getTeamRoster(teamURL):
soup = BeautifulSoup(open(teamURL))
def main():
getTeamRoster("http://modules.ussquash.com/ssm/pages/leagues/Team_Information.asp?id=11325")
我拉出了页面，它在我的浏览器(Chrome)中正常加载。由于某些原因，我得到
浏览 2提问于2015-06-02得票数 2
我需要从标记<TYPE>EX和</TEXT>以及<TYPE>XML和</TEXT>之间的文本中删除所有部分。我正在考虑使用regex如下：
re.sub(r"(?is)<TYPE>EX[^>]*>(.*?)</TEXT>",'',text)
和
re.sub(r"(?is)<TYPE>XML[^>]*>(.*?)</TEXT>",'',text)
但是，我继续在StackOverflow上阅读，如果regex能够
浏览 1提问于2014-11-20得票数 0
回答已采纳
3回答
我尝试用来解析一些html元素中的文本，就像这里描述的那样，但不幸的是失败了。我尝试过两种不同的方法，但每次遇到相同的AttributeError。
如何在这种情况下使用字符串参数来获取文本？
我试过：
import re
from bs4 import BeautifulSoup
htmlelement = """
<caption>
<span class="toggle open"></span>
ASIC registration
</caption>
"""
浏览 0提问于2019-01-22得票数 1
回答已采纳
2回答
有人能告诉我如何使用BeautifulSoup拉取标签的值吗？我阅读了文档，但很难浏览它。例如，如果我有：
<span title="Funstuff" class="thisClass">Fun Text</span>
我怎么才能使用BeautifulSoup/Python拉出"Funstuff“呢？
编辑:我正在使用版本3.2.1
浏览 1提问于2012-07-24得票数 6
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
