腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
2
回答
如何
使用
python
selenium
继续
从
循环
中断
的
位置
抓取
数据
、
、
、
#Importing librariesimport osfrom
selenium
浏览 51
提问于2020-02-06
得票数 0
回答已采纳
1
回答
如何
背靠背运行多个
Selenium
测试
、
我正在尝试
使用
Selenium
和
Python
执行动态web
抓取
。我正在尝试
抓取
的
网站有一个输入,大约600个
位置
可以选择。每个
位置
都有不同
的
设施。 我想要
抓取
设施
的
名称以及每个
位置
的
地址。我有一个excel文件中
的
位置
列表。我
使用
Pandas导入这些
位置
,然后尝试执行for
循环</em
浏览 16
提问于2019-07-10
得票数 1
1
回答
使用
Python
抓取
Selenium
JS地图
、
、
我对
Selenium
是个新手,实际上我
从
昨天就开始尝试了,我发现了一些关于
Selenium
和
python
的
有趣
的
东西。 我找到了一些关于
如何
抓取
JS页面并与之交互
的
信息。但我
的
疑问是,
如何
使用
selenium
从
可点击
的
地图中获取
数据
。我试着找出页面中是否有隐藏
的
链接,但是没有。我计算出,当我将
浏览 1
提问于2015-12-20
得票数 0
1
回答
如何
在
python
语言中
使用
selenium
和chromedriver
抓取
此页面?
我正在尝试
使用
selenium
和chromedriver
从
网站“”中
抓取
数据
。当我运行代码时,chromedriver成功地输入了url,但无法加载页面,显示了一个空白页面。我尝试将目标网站切换到google.com,但
抓取
成功。我
的
结论是目标网站服务器检测到
selenium
并拒绝发送回
数据
。那么
如何
在
Python
语言中
使用
selenium
和chromedrive
浏览 0
提问于2020-05-29
得票数 0
1
回答
抓取
oddsportal信息
、
、
、
、
我
使用
的
是
Python
3.5,实际上我关注
的
是
使用
BeautifulSoup/lxml/
Selenium
/PhantomJS进行3.5
抓取
我只是想用
Python
代码
抓取
我需要
的
所有
数据
。我可以很容易地用BeautifulSoup
从
静态HTML中
抓取
信息。我最近也发现了
如何
从动态url中获取信息,
使用</em
浏览 2
提问于2016-01-14
得票数 1
1
回答
当
Selenium
由于错误无法加载链接时,
如何
跳转到新网站?
、
、
、
、
我有一个大约13.000个网站
的
列表。从这些链接中,我打算一个接一个地通过
Python
、Beautiful和
Selenium
来
抓取
信息。for house in all_nd: if str(requests.head(house)) == '<Res
浏览 1
提问于2021-04-29
得票数 0
回答已采纳
2
回答
我
的
Python
脚本等待文件出现在目录中,在此存在
的
验证级别上迭代过多。
、
、
、
我已经创建了一个
Python
脚本,它需要一个文件才能出现在目录中。例如,该文件是
从
浏览器下载
的
(例如,
使用
Selenium
)。我想象
的
工作流如下: 设想一个操作,该操作可以在希望
的
目录中创建文件(例如,在Windows/Linux
的
默认下载目录中
使用
Selenium
下载)最多10次,尝试执行此操作,每次等待10秒,在这10秒之后,检查该文件是否存在于目录玩具中:如果是,请
中断
循环<
浏览 4
提问于2020-08-22
得票数 1
回答已采纳
1
回答
如何
在docker容器中
使用
selenium
设置
python
应用程序
、
、
我目前正在做一个项目,用
python
构建一个web scraper,然后将其停靠,这样应用程序就可以在任何机器上运行。我已经构建了
python
应用程序,
使用
selenium
加载我正在处理
的
网页。我不确定
如何
上传项目在docker与一个网络驱动程序(如geckodriver),以便它可以运行。我是否需要
使用
应用程序创建一个容器,并将其链接到另一个
selenium
容器?谢谢你
的
帮助!我
的
代码
从
我编译<e
浏览 14
提问于2019-05-06
得票数 9
回答已采纳
2
回答
尽管在技术上不可行,但While语句仍在
循环
、
、
、
、
我正在编写一个
Selenium
Python
脚本,它应该
从
所有页面中
抓取
所有超链接,并
使用
单击
的
“下一步”按钮在它们之间切换。这成功地
抓取
了所有的链接,但当它到达“下一步”按钮元素不再存在
的
最后一个页面时,它会
继续
在最后一个页面上
循环
,并一直将
抓取
的
数据
一遍又一遍地写入CSV文件中。这就是我想要获取信息
的
网站:https://
浏览 42
提问于2021-02-23
得票数 0
回答已采纳
1
回答
如何
退出RoboFramework4.0中嵌套
的
for
循环
、
当${port} == 3时,我想退出所有嵌套
的
for
循环
,但是无论我
使用
什么关键字,例如'Exit for
循环
‘或'Exit for
循环
如果${port} == 3’,它仍然将
继续
整个嵌套
的
for
循环
同时,机器人框架骑行告诉我,“
中断
”是一个保留
的
关键字,不能
使用
。我
的
密码在下面。:( 所以我想知道
如何
退出机器人框架骑行中嵌套
的</e
浏览 8
提问于2022-03-08
得票数 0
回答已采纳
1
回答
在
selenium
中
如何
更快地从动态网站读取
数据
、
、
、
没有API,我正在阅读
selenium
中
的
所有内容。我每次都有无限
循环
和寻找元素。) match.betting_opened = len(e.find_elements_by_class_name('no_betting_odds')) == 0 问题是它比我需要
的
速度慢了一百倍有没有其他
的
库,或者
如何
用
Selenium
来加速? 我正在
抓取
https://www.betcris.pl/
浏览 13
提问于2021-10-20
得票数 0
1
回答
使用
Selenium
和Scrapy通过onclick
抓取
显示
的
数据
、
、
我
使用
Scrapy用
python
编写了一个脚本,以便
使用
身份验证
从
网站上
抓取
数据
。我正在
抓取
的
页面真的很痛苦,因为主要是由javascript和AJAX请求组成
的
。我已经成功地
从
第一页
抓取
了所需
的
所有
数据
,然后
使用
以下代码更改了单击此输入按钮
的
页面: yield FormRequest.from_resp
浏览 38
提问于2019-02-21
得票数 0
4
回答
使用
Scrapy进行
Python
数据
抓取
、
、
、
我想从一个网站上有TextFields,按钮等
抓取
数据
。我
的
要求是填写文本字段并提交表单以获得结果,然后
从
结果页面中
抓取
数据
点。(编辑) 我
的
要求是
从
ComboBoxes中选择值并单击search按钮,然后
从
结果页面中
抓取
数据
点。附注:我正在
使用
selenium
Firefox驱动程序
从<
浏览 1
提问于2013-05-28
得票数 8
回答已采纳
3
回答
UnicodeEncodeError:'ascii‘编解码器无法对
位置
448中
的
字符u'\u2013’进行编码:序数不在范围内(128)
、
、
我目前正在
使用
selenium
python
来
抓取
linkedin
数据
。我可以解析各种网页和
抓取
数据
,但由于Unicode错误,该过程在最初几页后
中断
。下面是我
的
代码:from time import sleep driver.get
浏览 15
提问于2016-08-24
得票数 1
2
回答
Python
-
如何
在URL中不分页地刮分页
、
如何
使用
URL访问下一页,内容如下:我知道
如何
使用
刮取库(BS4、
Selenium
),但我不知道
如何
抓取
这样
的
站点。我一直在玩谷歌Chrome开发工具,但没有成功。我知道pubmed有API,但是API不返回我需要
的
信息(天气文章是否可以免费下载)。像
Python
这样
的
抓取
站点通常
的
工作流程是什么?
浏览 0
提问于2019-07-05
得票数 0
回答已采纳
3
回答
如何
让
Selenium
等到页面加载完成后再
继续
?
、
我正在从网页
抓取
一些
数据
,需要等待,直到所有的
数据
都加载到页面上。我希望
Selenium
等到所有
数据
加载完毕后再
继续
。我看过其他
的
帖子,说要
使用
类似于这种方法天生就不适合我,因为我需要等到100个元素被加载,而且列出每个元素
的
位置
是不可行
的</
浏览 0
提问于2019-12-19
得票数 0
3
回答
Python
web
抓取
与请求-登录后
、
、
、
我下面有一个
python
请求/漂亮
的
soup代码,它使我能够成功地登录到一个url。然而,在登录后,要获取所需
的
数据
,通常必须手动执行以下操作: 3)查看
数据
:这是我用来登录以进入上述步骤1
的
代码:from bs4 import BeautifulSoup logurl = "https:/
浏览 1
提问于2018-06-18
得票数 1
1
回答
如何
使用
Selenium
自动点击iframe中
的
多个链接?
、
、
、
我正在尝试
从
以下网站上收集秘鲁国会提出
的
几项法案
的
数据
: 基本上,我想单击搜索结果中
的
每个链接,
抓取
账单
的
相关信息,返回搜索结果,然后单击下一个账单
的
下一个链接,重复此过程。我已经能够
使用
Selenium
启动一个显示搜索结果
的
web浏览器,
使用
嵌入在iframe中
的
xpath点击第一个链接,然后用漂亮
的
汤
抓取
内容,然后导航回搜索
浏览 9
提问于2019-08-06
得票数 0
1
回答
如何
使用
python
+
selenium
从
div中提取内容?
、
、
我正在
使用
python
+
selenium
从一个网站上
抓取
一些
数据
,我遇到了以下问题。我有一些如下类型
的
<div class = "element"> Data3 </div>:<div class = "element"> Data1 </div> <div class = "element"> Data2 </div> d
浏览 30
提问于2021-07-19
得票数 0
1
回答
Python
Selenium
:在刮取时遍历相同
的
元素
、
、
、
、
上下文:from
selenium
import webdriver url = 'https://www.youtube.com
浏览 12
提问于2022-05-02
得票数 1
回答已采纳
点击加载更多
相关
资讯
《权力的游戏》最终季上线!谁是你最喜爱的演员?这里有一份Python教程
使用Python进行网页抓取的介绍
爬虫入门——详解Python是如何进行网页抓取!
Python系列教程(6)-利用 selenium 自动化网页操作
python爬虫自动化入门:如何用selenium自动操作网页
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
云直播
活动推荐
运营活动
广告
关闭
领券