Python Selenium仅当锚标签包含特定属性值时如何获取锚标签href值 - 腾讯云开发者社区 - 腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

讲解selenium 获取href find_element_by_xpath

Selenium是一个常用的自动化测试工具，可用于模拟用户操作浏览器。在Web开发和爬虫中，经常需要从网页中获取链接地址（href），而Selenium提供了各种方式来实现这个目标。在本篇文章中，我将主要讲解使用Selenium的find_element_by_xpath方法来获取网页中的href属性值。

01

如何使用Selenium WebDriver查找错误的链接？

当您在网站上遇到404 /页面未找到/无效超链接时，会想到什么想法？啊！当您遇到损坏的超链接时，您会感到烦恼，这是为什么您应继续专注于消除Web产品（或网站）中损坏的链接的唯一原因。您可以使用Selenium WebDriver来利用自动化进行錯誤的链接测试，而无需进行人工检查。

01

您找到你想要的搜索结果了吗？

是的

没有找到

使用selenium定位获取标签对象并提取数据

selenium提取数据文章目录 selenium提取数据知识点： 1. driver对象的常用属性和方法知识点：了解 driver对象的常用属性和方法 2. driver对象定位标签元素获取标签对象的方法知识点：掌握 driver对象定位标签元素获取标签对象的方法 3. 标签对象提取文本内容和属性值 📷 推荐阅读：使用xpath爬取数据 jupyter notebook使用 BeautifulSoup爬取豆瓣电影Top250 一篇文章带你掌握requests模块 Python网络爬虫基础

02

「Python爬虫系列讲解」八、Selenium 技术

前文回顾：「Python爬虫系列讲解」一、网络数据爬取概述「Python爬虫系列讲解」二、Python知识初学「Python爬虫系列讲解」三、正则表达式爬虫之牛刀小试「Python爬虫系列讲解」四、BeautifulSoup 技术「Python爬虫系列讲解」五、用 BeautifulSoup 爬取电影信息「Python爬虫系列讲解」六、Python 数据库知识「Python爬虫系列讲解」七、基于数据库存储的 BeautifulSoup 招聘爬取

02

[Python从零到壹] 九.网络爬虫之Selenium基础技术万字详解（定位元素、常用方法、鼠标操作）

Selenium是一款用于测试Web应用程序的经典工具，它直接运行在浏览器中，仿佛真正的用户在操作浏览器一样，主要用于网站自动化测试、网站模拟登陆、自动操作键盘和鼠标、测试浏览器兼容性、测试网站功能等，同时也可以用来制作简易的网络爬虫。

01

彻底学会Selenium元素定位

最近收到不少初学UI自动化测试的小伙伴私信，对于元素的定位还是有些头疼，总是定位不到元素，以及不知道用哪种定位方式更好。

03

Python爬虫技术系列-04Selenium库案例

选择对应版本驱动chromedriver.exe，下载到本地，放在工程路径下即可。

02

selenium使用

请注意，本文编写于 1727 天前，最后修改于 996 天前，其中某些信息可能已经过时。

01

[Python从零到壹] 十.网络爬虫之Selenium爬取在线百科知识万字详解（NLP语料构造必备）

随着互联网和大数据的飞速发展，我们需要从海量信息中挖掘出有价值的信息，而在收集这些海量信息过程中，通常都会涉及到底层数据的抓取构建工作，比如多源知识库融合、知识图谱构建、计算引擎建立等。其中具有代表性的知识图谱应用包括谷歌公司的Knowledge Graph、Facebook推出的实体搜索服务（Graph Search）、百度公司的百度知心、搜狗公司的搜狗知立方等。这些应用的技术可能会有所区别，但相同的是它们在构建过程中都利用了Wikipedia、百度百科、互动百科等在线百科知识。所以本章将教大家分别爬取这三大在线百科。

02

自动化-Selenium 3-元素定位（Python版）

2.XPath很强悍，但定位性能不是很好，所以还是尽量少用。如果确实少数元素不好定位，那还是选择XPath或cssSelector。

01

Selenium 系列篇（二）：元素定位

无论是做自动化测试，还是爬虫，页面元素定位永远都是第一步，在没有定位到网页元素之前，任何自动化操作都没法进行。

03

《手把手教你》系列基础篇之3-python+ selenium自动化测试-驱动浏览器和元素定位大法

上一篇中，只是简单地一带而过的说了一些驱动浏览器，这一篇继续说说驱动浏览器，然后再说一说元素定位的方法。

04

🔥《手把手教你》系列基础篇之3-python+ selenium自动化测试-驱动浏览器和元素定位大法（详细）

上一篇中，只是简单地一带而过的说了一些驱动浏览器，这一篇继续说说驱动浏览器，然后再说一说元素定位的方法。

04

《手把手带你学爬虫──初级篇》第5课 Selenium WebDriver的用法

Selenium 是一个自动化测试工具，WebDriver是它提供的一套操作浏览器的API，由于WebDriver针对多种编程语言都实现了这些API，因此它可以支持多种编程语言。

03

Python爬虫之数据提取-selenium定位获取标签对象并提取数据

selenium提取数据知识点：了解 driver对象的常用属性和方法掌握 driver对象定位标签元素获取标签对象的方法掌握标签对象提取文本和属性值的方法 ---- 1. driver对象的常用属性和方法在使用selenium过程中，实例化driver对象后，driver对象有一些常用的属性和方法 driver.page_source 当前标签页浏览器渲染之后的网页源代码 driver.current_url 当前标签页的url driver.close() 关闭当前标签页，如果只有一个

01

Python 自动化指南（繁琐工作自动化）第二版：十二、网络爬取

由于计算机上的许多工作都涉及到上网，如果你的程序能上网就太好了。网络抓取是使用程序从网络上下载和处理内容的术语。例如，谷歌运行许多网络抓取程序，为其搜索引擎索引网页。在这一章中，你将学习几个模块，这些模块使得用 Python 抓取网页变得很容易。

07

selenium总结

selenium提取数据总结附思维导图 📷 1. driver对象的常用属性和方法在使用selenium过程中，实例化driver对象后，driver对象有一些常用的属性和方法 driver.page_source 当前标签页浏览器渲染之后的网页源代码 driver.current_url 当前标签页的url driver.close() 关闭当前标签页，如果只有一个标签页则关闭整个浏览器 driver.quit() 关闭浏览器 driver.forward() 页面前进 driver.back()

02

自动化测试——selenium（环境部署和元素定位篇）

一、什么是selenium？ > 一个web自动化测试工具；二、主流的自动化工具： > QTP:收费支持（支持web、桌面软件自动化） > selenium:免费，开源只支持web项目 > Robot frameword: 基于Python扩展关键字驱动自动化工具注意：要是用selenium自动化工具，要先下载安装selenium 一、web自动化环境部署 1.1 selenium安装 1、安装在cmd 直接输入：pip install selenium 2、卸载：在cmd输入：pip uninstall selenium 3、查看： pip show selenium 或者 pip list pip 是python中包管理工具（可安装，可卸载，查看python工具），使用pip的时候必须联网有的输入 pip install selenium 会提示出现 ‘pip’ 不是内部或外部命令，也不是可运行的程序或批处理文件。产生这个原因python环境内部没有 pip 路径，则需要我们收到导入解决方法： 1、找到我们python工具中的pip所在文件夹，复制其路径

01

爬虫学习(三)

When something is important enough, you do it even if the odds are not in your favor.

03

《手把手教你》系列技巧篇（十五）-java+ selenium自动化测试-元素定位大法之By xpath中卷（详细教程）

按宏哥计划，本文继续介绍WebDriver关于元素定位大法，这篇介绍定位倒数二个方法：By xpath。xpath 的定位方法，非常强大。使用这种方法几乎可以定位到页面上的任意元素。

04

「Python爬虫系列讲解」九、用 Selenium 爬取在线百科知识

前文回顾：「Python爬虫系列讲解」一、网络数据爬取概述「Python爬虫系列讲解」二、Python知识初学「Python爬虫系列讲解」三、正则表达式爬虫之牛刀小试「Python爬虫系列讲解」四、BeautifulSoup 技术「Python爬虫系列讲解」五、用 BeautifulSoup 爬取电影信息「Python爬虫系列讲解」六、Python 数据库知识「Python爬虫系列讲解」七、基于数据库存储的 BeautifulSoup 招聘爬取「Python爬虫系列讲解」八、Selenium 技术

02

如何在Selenium WebDriver中查找元素？（一）

有多种方法可以唯一地标识网页中的一个Web元素，例如ID，名称，类名，链接文本，部分链接文本，标记名和XPATH。

01

软件测试/人工智能|selenium元素定位方式大全

当我们在使用selenium进行自动化测试工作时，元素定位是非常重要的一环，因为我们是借助脚本模拟我们通过鼠标和键盘对元素进行点击、输入内容和滑动操作的，所以准确的元素定位是我们执行测试脚本的重要一环。本文就来给大家介绍一下selenium的元素定位方式。

01

快速学Python，走个捷径~

大家好，我是小菜。一个希望能够成为吹着牛X谈架构的男人！如果你也想成为我想成为的人，不然点个关注做个伴，让小菜不再孤单！

04

Java自动化测试 (元素定位 23)

使用脚本断点调试定位是否正确是一个方法，当时在我的实际工作中，元素定位代码的封装较深，所以修改查询元素的内容较麻烦，所以直接使用Xpath Helper可以方便的进行开发前的测试。不管是爬虫爬去页面内容还是自动化测试都很实用。

03

测试开发面试题 [ Python编程+selenium基础使用 ]

selenium的面试题 1、UI自动化的工作原理脚本连接Webdriver驱动，Webdriver驱动直接驱动浏览器来模拟一些人的操作，如点击按钮，输入字符串等操作 2、selenium提供了两个类webdriver和webelement 1、webdriver webdriver对象看做成一个控制整个浏览器的遥控器，用它可以操作整个浏览器包括当前打开的整个页面。实现的功能有： 1、当前页面上的选择符合查找条件的对象 2、打开网址，回退，前进，刷新网页 3、获取、改变浏览器窗口大小，关闭浏览器，截

01

全网最全关于selenium webdriver 8大元素定位详解

元素的定位应该是自动化测试的核心，想要操作一个元素，首先应该识别这个元素。Webdriver提供了一系列的元素定位方法。

01

Python网络爬虫笔记（四）：使用selenium获取动态加载的内容

（一）说明上一篇只能下载一页的数据，第2、3、4....100页的数据没法获取，在上一篇的基础上修改了下，使用selenium去获取所有页的href属性值。使用selenium去模拟浏览器有点麻烦，例如有300页就要点300次（按博客园这种一页20条，也就是6000条数据。要是几百万条，这个就得点好长时间了）研究下有没有办法调用JS修改页面默认显示的数据条数（例如：博客园默认1页显示20条，改成默认显示1万条数据）。（二）完整代码 delayed.py的代码还是和之前一样。最好限速，不限速很

06

html表格基础及案例示图代码。[通俗易懂]

列表标签有序列表：标签

type=””>属性值有A,a,I,i,1 start=”“> 属性值为数字有序列表的列表项

无序列表：标签

type=””>属性值有disc circle square 无序列表的列表项

自定义列表：标签

列表的标题

；列表的列表项表格标签表格的属性

单元格与单元格之间的距离

单元格与字体之间的距离

对齐，值：left right center

边框颜色表格的表头标签。具有表格的行 bgcolor 背景颜色 backgroung 背景 height 高度 align 行的水平对齐方式值有 right left center valign 行的垂直对齐方式值有 top bottom middle

的所有属性默认加粗居中

单元格 bgcolor 背景颜色 backgroung 背景图片 width 宽度 height 高度 align 单元格的水平对齐方式 ralign 单元格的垂直对齐方式 rowspan 合并行（垂直合并） colspan 合并列（水平对齐方式）表格表格是用来展示数据的 width 和 height 一般只写一个另一个会等比例改变表格标签表格的属性

单元格与单元格之间的距离

单元格与字体之间的距离

对齐，值：left right center

边框颜色表格的表头标签。具有表格的行 bgcolor 背景颜色 backgroung 背景 height 高度 align 行的水平对齐方式值有 right left center valign 行的垂直对齐方式值有 top bottom middle

的所有属性默认加粗居中

单元格 bgcolor 背景颜色 backgroung 背景图片 width 宽度 height 高度 align 单元格的水平对齐方式 ralign 单元格的垂直对齐方式 rowspan 合并行（垂直合并） colspan 合并列（水平对齐方式）列表标签有序列表：标签

type=””>属性值有A,a,I,i,1 start=”“> 属性值为数字有序列表的列表项

无序列表：标签

type=””>属性值有disc circle square 无序列表的列表项

自定义列表：标签

列表的标题

；列表的列表项图像：图像标签图片的路径图片的高度 <img heigh

illenium什么水平_尼采读本

《论语》有云：工欲善其事，必先利其器。在开始具体的自动化测试之前，我们需要做好更多的准备，包括以下几个方面：

VS Code + Python + Selenium 自动化测试基础-01

点击上方蓝字“一个正经的测试“关注我，每天早上08:30准时推送，每月不定期赠送技术书籍。

6个强大且流行的Python爬虫库，强烈推荐！

Python中有非常多用于网络数据采集的库，功能非常强大，有的用于抓取网页，有的用于解析网页，这里介绍6个最常用的库。

Selenium系列（三） - 详细解读针对元素常见的简单操作

https://www.cnblogs.com/poloyy/category/1680176.html

Selenium自动化工具集 - 完整指南和使用教程

Selenium 是一个用于自动化浏览器操作的工具集。它通过模拟用户在浏览器中的行为，如点击、输入、表单提交等，来实现自动化测试和网页数据抓取等功能。Selenium 针对不同的浏览器提供了不同的 WebDriver 接口，如 ChromeDriver、GeckoDriver（Firefox）、WebDriver（Safari）等。

HTML a标签打开新标签页避免出现安全漏洞，请使用“noopener”

这里我们有一个指向恶意网站的 href 属性，并以 _blank 属性为 target，使其在新标签页中打开。

Python Selenium的使用（爬虫）

Selenium的使用 14 /10 周一阴 1 动态渲染页面爬取对于访问Web时直接响应的数据（就是response内容可见），我们使用urllib、requests或Scrapy框架爬取。

Selenium

Selenium是一个Web的自动化测试工具，最初是为网站自动化测试而开发的，类型像我们玩游戏用的按键精灵，可以按指定的命令自动操作，不同是Selenium 可以直接运行在浏览器上，它支持所有主流的浏览器（包括PhantomJS这些无界面的浏览器，但是现在谷歌的无头比较火，下面展示谷歌的无头）

Python爬虫(二十一)_Selenium与PhantomJS

本章将介绍使用Selenium和PhantomJS两种工具用来加载动态数据，更多内容请参考：Python学习指南 Selenium Selenium是一个Web的自动化测试工具，最初是为网站自动化测试而开发的，最初是为网站自动化测试而开发的，类型像我们玩游戏用的按键精灵，可以按指定的命令自动化操作，不同是Selenium可以直接运行在浏览器上，它支持所有主流的浏览器(包括PhantomJS这些无界面的浏览器)。 Selenium可以根据我们的指令，让浏览器自动加载页面，获取需要的页面，甚至页面截屏，或

用python操作浏览器的三种方式

第一种：selenium导入浏览器驱动，用get方法打开浏览器，例如： import time from selenium import webdriver def mac(): driver = webdriver.Firefox() driver.implicitly_wait(5) driver.get("http://huazhu.gag.com/mis/main.do") 第二种：通过导入python的标准库webbrowser打开浏览器，例如： >>> import webbrowser >>> webbrowser.open("C:\\Program Files\\Internet Explorer\\iexplore.exe") True >>> webbrowser.open("C:\\Program Files\\Internet Explorer\\iexplore.exe") True 第三种：使用Splinter模块模块一、Splinter的安装 Splinter的使用必修依靠Cython、lxml、selenium这三个软件。所以，安装前请提前安装 Cython、lxml、selenium。以下给出链接地址： 1）http://download.csdn.net/detail/feisan/4301293 2）http://code.google.com/p/pythonxy/wiki/AdditionalPlugins#Installation_no 3）http://pypi.python.org/pypi/selenium/2.25.0#downloads 4）http://splinter.cobrateam.info/ 二、Splinter的使用这里，我给出自动登录126邮箱的案例。难点是要找到页面的账户、密码、登录的页面元素，这里需要查看126邮箱登录页面的源码，才能找到相关控件的id. 例如:输入密码，密码的文本控件id是pwdInput.可以使用browser.find_by_id()方法定位到密码的文本框，接着使用fill()方法，填写密码。至于模拟点击按钮，也是要先找到按钮控件的id,然后使用click()方法。 #coding=utf-8 import time from splinter import Browser def splinter(url): browser = Browser() #login 126 email websize browser.visit(url) #wait web element loading time.sleep(5) #fill in account and password browser.find_by_id('idInput').fill('xxxxxx') browser.find_by_id('pwdInput').fill('xxxxx') #click the button of login browser.find_by_id('loginBtn').click() time.sleep(8) #close the window of brower browser.quit() if __name__ == '__main__': websize3 ='http://www.126.com' splinter(websize3) WebDriver简介 selenium从2.0开始集成了webdriver的API，提供了更简单，更简洁的编程接口。selenium webdriver的目标是提供一个设计良好的面向对象的API，提供了更好的支持进行web-app测试。从这篇博客开始，将学习使用如何使用python调用webdriver框架对浏览器进行一系列的操作打开浏览器在selenium+python自动化测试（一）–环境搭建中，运行了一个测试脚本，脚本内容如下： from selenium import webdriver import time driver = webdriver.Chrome() driver.get("http://www.baidu.com") print(driver.title) driver.find_element_by_id("kw").send_keys("s

Python爬虫之数据提取-selenium的介绍

selenium的介绍知识点：了解 selenium的工作原理了解 selenium以及chromedriver的安装掌握标签对象click点击以及send_keys输入 ---- 1. selenium运行效果展示 Selenium是一个Web的自动化测试工具，最初是为网站自动化测试而开发的，Selenium 可以直接调用浏览器，它支持所有主流的浏览器（包括PhantomJS这些无界面的浏览器），可以接收指令，让浏览器自动加载页面，获取需要的数据，甚至页面截屏等。我们可以使用selenium很

Python爬虫

也叫robots.txt，是存放在网站根目录下的文本文件，用来告诉搜索引擎该网站哪些内容是不应该被抓取的，哪些是可以抓取的。

利用selenium爬取数据总结

selenium的介绍知识点：了解 selenium的工作原理了解 selenium以及chromedriver的安装掌握标签对象click点击以及send_keys输入 ---- 1. selenium运行效果展示 Selenium是一个Web的自动化测试工具，最初是为网站自动化测试而开发的，Selenium 可以直接调用浏览器，它支持所有主流的浏览器（包括PhantomJS这些无界面的浏览器），可以接收指令，让浏览器自动加载页面，获取需要的数据，甚至页面截屏等。我们可以使用selenium

scrapy的一些容易忽视的点（模拟登陆

这种情况一般存在于对标签进行遍历时，将item对象放置在了for循环的外部。解决方式：将item放置在for循环里面。

Selenium常见元素定位方法和操作的学习介绍

版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

Selenium与PhantomJS

Selenium是一个Web的自动化测试工具，最初是为网站自动化测试而开发的，类型像我们玩游戏用的按键精灵，可以按指定的命令自动操作，不同是Selenium 可以直接运行在浏览器上，它支持所有主流的浏览器（包括PhantomJS这些无界面的浏览器）。

自动化测试工具Selenium的基本使用方法

由于requests模块是一个不完全模拟浏览器行为的模块，只能爬取到网页的HTML文档信息，无法解析和执行CSS、JavaScript代码，因此需要我们做人为判断；

Selenium2+python自动化29-js处理多窗口

前言在打开页面上链接的时候，经常会弹出另外一个窗口（多窗口情况前面这篇有讲解：Selenium2+python自动化13-多窗口、句柄（handle）），这样在多个窗口之间来回切换比较复杂，那么有没有办法让新打开的链接在一个窗口打开呢？要解决这个问题，得从html源码上找到原因，然后修改元素属性才能解决。很显然js在这方面是万能的，于是本篇得依靠万能的js大哥了。一、多窗口情况 1.在打baidu的网站链接时，会重新打开一个窗口 (注意：我的百度页面是已登录状态，没登录时候是不会重新打开窗

扫码

添加站长进交流群

领取专属 10元无门槛券

手把手带您无忧上云

扫码加入开发者社群

相关资讯

热门标签

活动推荐

运营活动

活动名称