bs4的BeautifulSoup内置查找方式有:
find() find_all() find_parent() find_parents() find_next_sibling() find_next_siblings() find_previous_sibling() find_previous_siblings() find_previous() find_all_previous() find_next() find_all_next()
一、find
find()函数如下:
find(name,attrs,recursive,text,**wargs)
这些参数相当于过滤器一样可以进行筛选处理。
不同的参数过滤可以应用到以下情况:
查找标签,基于name参数查找文本,基于text参数基于正则表达式的查找查找标签的属性,基于attrs参数基于函数的查找
通过标签查找(默认)
soup.find("ul")
通过文本查找
soup.find(text="plants")
通过正则表达式查找
"dp-py" start="1">
emailid_regexp=re.compile("\w+@\w+\.\w+") first_email_id=soup.find(text=emailid_regexp)
通过标签属性进行查找
soup.find(id="primaryconsumers")
基于定制属性的查找
customSoup.find(data-custom="custom") #会出错Python中变量不能呢含有-这个字符,而我们传递的data-custom有-这个字符
解决方法为在attrs属性用字典进行传递参数。
"dp-py" start="1"> using_attrs=customsoup.find(attrs={'data-custom':'custom'})
基于CSS类的查找
"dp-py" start="1"> css_class=soup.find(attrs={'class':'primaryconsumerlist'})
二、find_all
即将上述find换成find_all
三、find_parent和find_parents
通过find_parents()或find_parent()。它们之间的不同就类似于find()和find_all()的区别。find_parents()返回全部的相匹配的父标签,而find_paret()返回最近的一个父标签。适用于find()的方法同样也使用于这两个方法。
四、find_next_siblings()和find_next_sibling()
查找对象下面的同胞
五、find_all_nexfind_all_previous()
对每一个标签来说,下一个元素可能会是定位字符串,标签对象或者其他BeautifulSoup对象。我们定义下一个元素为与当前元素最靠近的元素。这个不同于同胞定义。我们有方法可以找到我们想要标签的下一个其他元素对象。find_all_next()找到与当前元素靠近的所有对象。而find_next()找到离当前元素最接近的对象。
领取专属 10元无门槛券
私享最新 技术干货