腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
如何
提高
webscraping
脚本
(
Python
和
Selenium
)
的
性能
(
运行时
)
、
、
、
所以我写了一个
脚本
,在一个网站上抓取了一个表- NFL
的
32支球队
的
花名册,超过4年。然而,该网站只展示了一支球队,一年一次。所以我
的
脚本
打开页面,选择一年,抓取数据,然后转到下一年,依此类推,直到收集完所有四年
的
数据。然后,它对其他32个团队重复这个过程。现在,我刚接触网络抓取,所以我不确定从计算上讲,我所做
的
是最好
的
方法。目前,为一个团队收集一年
的
数据,大约需要40-50秒,因此总共需要每个团队大约4分钟。有没有一种方法可以收集数
浏览 16
提问于2020-06-24
得票数 0
回答已采纳
2
回答
用
Python
和
selenium
抓取URL
、
、
、
我正在尝试让
python
selenium
脚本
工作,它应该执行以下操作: 我希望我们能使这个工作,然后请帮助我一步一步地使它运行。)文件"/usr/loc
浏览 0
提问于2019-09-08
得票数 2
回答已采纳
2
回答
Angular简单
性能
测试
、
、
我
的
问题很简单,但是google没有给我我想要
的
结果。我有一个角度
的
应用程序,这只是在我们
的
网络中可用。我想测试在某个更改集之前
和
之后
的
性能
。我想要
的
是在某个页面上加载我
的
应用程序(可能在此之前登录,但我可以禁用登录以进行测试),等待它,直到它被绘制,并测量这需要多长时间。这样做一个1000+次数,并给我回来
的
平均时间,也许还有一些其他细节。 重要
的
是,浏览器缓存是空
的
,否则测试结
浏览 27
提问于2020-03-03
得票数 0
回答已采纳
2
回答
对使用AJAX
的
Web应用程序进行负载测试
、
、
、
、
我通常使用微软
的
负载模拟器
和
WebTests。如果网页有一些复杂性,我会使用WebTest插件来正确调整它。现在,我有一个网页,做吨
的
ajax请求每个网址我访问,ajax请求是基于复杂
的
计算在浏览器中完成。我考虑过使用
selenium
,但如果我要使用它,我将需要太多
的
硬件资源来运行数百个用户。 我想到了使用无头浏览器
的
想法,比如PhantomJs,SimpleBrowser,HtmlUnit等等。SimpleBrowser
和
HtmlUnit都不支持执行
浏览 3
提问于2015-12-02
得票数 0
1
回答
Pyinstaller使
python
代码
性能
下降
、
、
我安装了,希望通过将所有
python
脚本
转换为二进制代码来
提高
python
代码
的
性能
。为了测试这一点,我编写了一个名为test_compiler.py
的
简单
脚本
:执行此
脚本
通常会在0.49
和
0.55之间打印一个浮点数。然后,在我有这个
脚本
的
文件夹中,我这样做了:产生了一些文件和文件夹。我
浏览 3
提问于2022-07-30
得票数 1
回答已采纳
2
回答
未使用robotframework安装边缘驱动程序
、
、
我们使用
的
是
Python
机器人框架自动化。我们使用
selenium
3.14,机器人框架
selenium
库4.5.0
和
python
3.7,可以在
脚本
运行时
自动下载
和
安装边缘驱动程序吗?
浏览 2
提问于2021-12-01
得票数 0
4
回答
Selenium
,监视器网络,captureNetworkTraffic命令不可用
、
我通过FireBug中
的
网络选项卡或者在其他浏览器中监视代理请求来手动测试它.在搜索时,我看到了对captureNetworkTraffic
的
几个引用,但是我
的
Selenium
实例中没有一个有这个命令。 我正在使用Firefox 1.9.1
和
独立服务器2.25.0。而且,它
的
正式记录在哪里?
浏览 0
提问于2012-10-29
得票数 2
回答已采纳
1
回答
如何
完全删除
python
中包含类
的
HTML标记?
、
、
、
我有一个网络刮刀,从CNN,福克斯,
和
英国广播公司在BeautifulSoup
的
文章。然后,在进行了一些预处理之后,我将原始文章返回给API。但是,我不知道
如何
完全删除包含
Python
中令人讨厌
的
类
的
HTML标记。我尝试了lxml清理器,但是我可以删除标记,但不仅仅是包含某个类
的
标记。如果在本例中我试图删除“帮助”,我想要一个
脚本
,该
脚本
将转换如下所示
的
HTML: <p class="help&quo
浏览 1
提问于2022-03-08
得票数 0
回答已采纳
1
回答
Selenium
无法连接到GhostDriver (但有时)
、
、
、
我在
Python
/
Selenium
和
PhantomJS中设置了一个简单
的
webscraping
脚本
。我总共有200个网址要刮。
脚本
一开始运行良好,然后在大约20-30个URL之后运行(当它失败时,它看起来可能是随机
的
,并且与任何特定
的
URL无关),我在
python
中得到了以下错误:
selenium
.common.exceptions.WebDriverException: Messa
浏览 12
提问于2014-07-04
得票数 9
回答已采纳
1
回答
Jenkins管道
性能
,构建图形提取
、
、
、
、
我正在做一个Jenkins管道项目,以执行Jmeter
和
Robot
脚本
,一起赢得节点
的
两个阶段。一切都很好,我想知道是否有任何方法可以提取
性能
插件生成
的
图形并将它们附加到电子邮件中。这是其中一个图像样本 如果有一种方法提取
和
附加他们作为图像(而不是图像链接)与詹金斯管道电子邮件-ext命令,请让我知道。 致以最好
的
问候,穆迪塔
浏览 1
提问于2019-02-14
得票数 0
2
回答
Selenium
Webdriver连接池
、
、
我
的
应用程序是自动化
的
,它有一些70+
脚本
,并且运行在
Selenium
上,这也是对其他应用程序开放
的
。此外,我相信这将
提高
脚本
执行
的
性能
。 谢谢。
浏览 6
提问于2013-08-05
得票数 4
1
回答
Selenium
BOT错误:无法在webdriver.chrome调用中调用'module‘对象
、
、
import
selenium
from
selenium
.webdriver.common.keys import Keys driver.get("https://www.google.com") assert "google&qu
浏览 21
提问于2019-11-15
得票数 1
回答已采纳
1
回答
Pygame;进行C扩展
、
、
、
我对
python
比较陌生,已经用
python
做了一些有用
的
工具
和
一些10个精灵
的
小游戏;基于
性能
,我认为我
的
下一个合乎逻辑
的
步骤是进行C扩展以
提高
pygame
的
性能
。我
的
第一个初始问题是在pygame中,我可以在C中创建一个主循环(或者我是否必须与SDL接口?)。
和
精灵,我是否可以编写严格处理精灵
的
C代码,并且只将
python
用
浏览 0
提问于2011-07-06
得票数 4
2
回答
Python
库
性能
、
、
、
我遇到
的
问题是,我有一个
Python
脚本
,每次执行它时都会对数千个图像进行编码,而且它没有占用大部分内存
和
CPU。你有什么建议来
提高
我剧本
的
效果吗?循环中
的
代码片段: im = Image.open(Strin
浏览 2
提问于2011-03-26
得票数 2
回答已采纳
1
回答
Selenium
firefox仅在运行windows任务调度程序时才能加载
、
、
、
我在
Python
中有一个web抓取
脚本
,使用
Selenium
和
(tor) Firefox。当我在IDE中或从cmd手动启动
脚本
时,这是完全正常
的
。但是,这个
脚本
需要在我不在办公室时运行,所以我通过一个批处理
脚本
(以及其他一些刮擦
脚本
)运行它,该
脚本
由windows任务调度程序启动。同样,当我手动运行这个批处理文件时,
脚本
将完美地运行。另一方面,当计划
的
任务
运行时
,
浏览 11
提问于2017-11-13
得票数 2
5
回答
您能想到哪些可能会使
selenium
测试
脚本
性能
慢
的
原因呢?
当
selenium
测试
脚本
执行异常缓慢时,可能导致
脚本
执行缓慢
的
原因是什么? 测试人员应该使用哪些步骤来分析
和
调试问题?
浏览 0
提问于2012-05-28
得票数 3
1
回答
在mac上执行
selenium
无头
脚本
时,
如何
运行Chrome?
、
、
、
、
我有一个
python
selenium
脚本
,它在无头模式下使用chromedriver来测试网站上
的
链接。我正在MacOS高中里运行这个
脚本
。如果在运行
脚本
之前打开了Chrome,我可以继续正常使用浏览器。无头模式似乎将我与测试隔离开来。但是,如果Chrome首先关闭,则当
selenium
脚本
运行时
,我无法启动浏览器。看看第一个场景中
的
活动监视器,在我看来,chromedriver为Chrome创建了一个新
的
浏览 0
提问于2018-12-05
得票数 0
回答已采纳
1
回答
如何
提高
每个页面第一次点击时
的
ASP.NET MVC5应用程序
性能
?
、
、
、
如何
提高
Asp.net MVC5应用程序
的
性能
。特别是我
的
登录页面
和
布局页面在第一次
运行时
花了一分钟多
的
时间加载。提前谢谢。
浏览 12
提问于2016-08-17
得票数 0
2
回答
IO操作-为什么不是cd?
、
、
、
现在,假设这是真的,让我们考虑一下
脚本
和
命令,这些
脚本
和
命令涉及到处理大量目录中
的
文件(例如,编译gentoo内核)。如果
脚本
或程序足够聪明,可以将cd放入保存大量文件
的
目录中,那么会有什么
性能
提高
吗? 是否有任何
提高
性能
<e
浏览 6
提问于2013-03-10
得票数 0
回答已采纳
1
回答
将bash/
python
脚本
与
Selenium
集成
、
、
、
、
我正在测试一个在生产环境中使用bash
和
python
脚本
来模拟用户
的
网站。我很熟悉
Selenium
(Java风味)来测试前端,但是如果没有这些
脚本
在后台运行,就没有什么可测试
的
了。
Selenium
是否有一个插件来运行linux命令/bash
脚本
,或者是一个单独
的
工具,将整个过程自动化?这是我需要自动化
的
一个基本过程: 登录到前端→,检查当前
的
用户活动(应该是0),→运行
浏览 1
提问于2015-04-15
得票数 1
回答已采纳
点击加载更多
热门
标签
更多标签
云服务器
ICP备案
云直播
腾讯会议
实时音视频
活动推荐
运营活动
广告
关闭
领券