Selenium似乎没有加载网站的JavaScript部分
Selenium是一个自动化测试工具，用于模拟用户在网页上的操作。它可以模拟用户在浏览器中点击、输入文本、提交表单等行为，并且可以对页面元素进行定位和操作。
在默认情况下，Selenium在加载网站时会等待整个页面加载完成，包括JavaScript部分。然而，有时候网站的JavaScript可能会在页面加载完成后再动态地加载内容或执行一些操作。如果Selenium在页面加载完成后立即进行操作，可能会导致无法获取到动态加载的内容或执行的操作。
为了解决这个问题，Selenium提供了一些等待机制，可以让它等待页面上的某些元素或条件出现后再进行操作。这些等待机制包括隐式等待和显式等待。
隐式等待是在创建WebDriver实例后设置的一个全局等待时间，它会在查找元素时等待一段时间，如果在等待时间内找到了元素，则立即进行后续操作；如果超过等待时间仍未找到元素，则抛出异常。
显式等待是在特定的操作之前设置的等待时间，它会在特定的条件满足之前等待一段时间，如果在等待时间内条件满足，则立即进行后续操作；如果超过等待时间仍未满足条件，则抛出异常。显式等待可以根据需要设置不同的条件，比如等待某个元素可见、可点击、包含特定文本等。
总结起来，Selenium可以通过等待机制来处理网站的JavaScript部分的加载。通过合理设置等待时间和条件，可以确保Selenium在操作页面时能够获取到完整的内容，包括动态加载的部分。
腾讯云相关产品和产品介绍链接地址：
- 腾讯云自动化测试服务（https://cloud.tencent.com/product/cts）
- 腾讯云云服务器（https://cloud.tencent.com/product/cvm）
- 腾讯云云原生应用引擎（https://cloud.tencent.com/product/tke）
- 腾讯云数据库（https://cloud.tencent.com/product/cdb）
- 腾讯云内容分发网络（https://cloud.tencent.com/product/cdn）
- 腾讯云人工智能（https://cloud.tencent.com/product/ai）
- 腾讯云物联网（https://cloud.tencent.com/product/iot）
- 腾讯云移动开发（https://cloud.tencent.com/product/mobdev）
- 腾讯云对象存储（https://cloud.tencent.com/product/cos）
- 腾讯云区块链（https://cloud.tencent.com/product/baas）
- 腾讯云虚拟专用网络（https://cloud.tencent.com/product/vpc）
相关·内容
我刚刚在我们的网站上添加了ExceptionHub (一个javascript错误跟踪服务)，但是我所有的selenium测试现在都失败了。当我查看selenium输出时，它显示waitForPageToLoad命令超时。如果我在本地运行测试，我看到页面加载正常，所以我不太确定selenium为什么一直在等待。还有没有人设法让ExceptionHub与selenium一起工作？
浏览 1提问于2010-08-04得票数 0
我正在尝试抓取以下网页： (我已从网站获得许可)
问题是“每月分解”表似乎是由Javascript加载的，而BeautifulSoup无法工作。当使用Selenium打开网页时，它说要查看表格“您必须启用Javascript。”，这应该在使用Selenium时启用。下面是我的代码：
from selenium import webdriver
options = webdriver.ChromeOptions()
options.add_argument("--enable-javascript")
browser = webdriver.Chrome(options=opt
浏览 0提问于2020-12-06得票数 0
我需要在第三方网站上使用selenium创建一些自动操作(我假设这意味着我不能使用High图表api)。
当第三方网站被加载时，html主体中没有工具提示元素。当光标悬停在图表上时，它似乎是动态添加的。
我想通过java selenium显示工具提示。如果有这样做的javascript方式，请让我知道，我将尝试将它自己转移到selenium代码中。
到目前为止，我已经尝试通过带有javascript的浏览器控制台触发一个'mouseover‘事件，或者在High图表容器中的不同元素中添加一个“悬停”类，但是我没有运气，工具提示没有添加到html主体中，因此我无法选择它。
我相信上面的问
浏览 1提问于2021-11-26得票数 0
回答已采纳
我有一个特殊的网站，它有两个脚本，如下所示：
<html>
<script type="text/javascript">
Populates input field A with value = B
</script>
<script type="text/javascript">
Overwrites input field A with value = C
</script>
</html>
我正在使用J
浏览 7提问于2019-09-17得票数 0
当我无法访问服务器端时，有没有什么工具可以让我测量我正在用Webdriver测试的网站的javascript代码覆盖率？
例如，我没有访问stackoverflow.com的服务器权限。如果我编写Selenium WebDriver来点击这个站点上的javascript控制元素，有没有一种方法可以测量我的浏览器上加载的这个站点的javascript的代码覆盖率？
一个流行的工具似乎是JsCover和JsCoverage，但它们似乎只有在您有服务器访问权限的情况下才有效。
谢谢你的帮助。
浏览 1提问于2013-11-25得票数 3
1回答
我想抓取一个网站的“原始”JavaScript代码。例如，如果我要抓取this网站。我会得到一个包含以下内容的字符串： ? 这只是给定链接中现有JS的一小部分，但我希望获得字符串或字符串数组中的整个JS。 我尝试了不同的方法来获取这些数据:使用requests和selenium。简单地加载网站的HTML似乎不起作用，因为脚本标记似乎没有加载。 使用selenium时，我希望这能行得通： from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.s
浏览 19提问于2020-01-20得票数 1
1回答
我想登录一个网站的，并从那里阅读一些html。
但网站有一个控制图像，用户必须写在该图像中的数字。
我知道requests有允许我们登录网站的Session类，但当我使用requests时，我无法获取控制图像。
我认为当网站打开时，图片是由JavaScript加载的。
有没有什么方法可以使用请求，或者我应该使用selenium？如果我要使用selenium，有没有办法在登录时使用selenium，然后使用requests？
浏览 13提问于2019-11-14得票数 0
1回答
我有一个selenium代码，它返回一个网站列表的标题。这个标题是用Javascript生成的(在网站加载后，它从“加载...”到正确的标题大约只需半秒。)因此，程序加载一个网站，等待标题更改，然后返回更改后的标题。 代码如下： from pyvirtualdisplay import Display
from time import sleep
import sys
reload(sys)
sys.setdefaultencoding('utf-8')
from selenium import webdriver
from selenium.common.exception
浏览 8提问于2019-04-01得票数 0
首先，我使用python和selenium在firefox中加载一个网站。然后，我填写一个简单的javascript类型表单。这个站点做得很糟糕，但通常如果我告诉selenium使用(Keys.RETURN)，那么它会下拉一个选项列表。问题是我不知道如何点击其中的一个，因为它们没有加载网页。我尝试使用(Keys.ARROW_DOWN)遍历它们，但它仍然不能真正工作。
如何使用python通过selenium与javascript进行交互？
谢谢。
另外，我对javascript几乎一无所知，所以如果有什么方法可以做到这一点，我仍然对如何使用javascript一无所知。
浏览 0提问于2013-02-02得票数 0
我想用selenium验证一下，某个方法(带参数)是在JavaScript对象上调用的--这是一种用JMockit模拟的期望值，但是在Javascript和selenium中。
不幸的是，object是一个严重受阻的不透明网站性能跟踪器，我无法访问它的内部，所以mocking似乎是我唯一的选择。还是我漏掉了什么明显的东西？
更新:经过思考，我认为解决方案可能是：-等待HTML完全加载-删除包含性能跟踪器的某些脚本标记-创建行为类似跟踪器但记录调用以供以后使用的javascript模拟对象
浏览 0提问于2012-06-21得票数 6
回答已采纳
1回答
如何从selenium中的网页中只加载html？
我只需要html的请求页面，没有css和javascript。
浏览 0提问于2015-01-04得票数 6
回答已采纳
2回答
我目前正在测试一个网站，我遇到的一个问题是使用非Javascript弹出窗口。
我已经尝试使用Selenium Alert接口。
我所做的例子
Alert a = WebDriver.switchTo().alert()
alert.accept()
alert.dismiss()
这似乎适用于Javascript弹出警报，但不适用于非javascript弹出警报。有没有办法用Selenium处理不是基于Javascript的弹出窗口？
浏览 0提问于2017-03-04得票数 1
我一直试图制作一个Python脚本来登录到某个网站，浏览菜单，填写表单并将它生成的文件保存到文件夹中。
我一直在使用Selenium来使网站完全加载，这样我就可以找到登录的元素，但我并不成功，可能是因为该网站在完全加载之前做了大量的JavaScript内容，但我无法让它完全加载并显示我想要的数据。
我尝试了Robobrowser、Selenium、Request和BeautifulSoup来完成它。
import requests
from bs4 import BeautifulSoup
from selenium import webdriver
url = "https://d
浏览 0提问于2019-04-16得票数 2
回答已采纳
我正在使用Selenium Webdriver api来驱动firefox。问题是位于Google api网站的jquery文件没有加载。这导致了一个错误。
我应该怎么做才能使这些文件位于
https://ajax.googleapis.com/ajax/libs/jquery/1.6.4/jquery.min.js
应该加载吗？
网站加载head标签中的javascript。它在控制台中显示未定义jQuery的错误。
然而，我现在注意到，如果你刷新它几次，文件就会加载。现在我该怎么做来修复它呢？
用于加载页面的代码
@browser = $browser = Selenium::WebDri
浏览 0提问于2013-06-03得票数 0
回答已采纳
我正在抓取一些网站，这些网站似乎对它有很好的保护。我能让它工作的唯一方法是使用Selenium加载页面，然后从页面中抓取内容。
目前，这在我的本地计算机上工作(当我访问我的页面时，firefox窗口会打开和关闭，它的HTML会在我的脚本中进一步处理)。然而，我需要我的刮刀可以在网络上访问。刮刀被嵌入到Heroku上的Flask应用程序中。有没有办法让Selenium浏览器在Heroku服务器上工作？或者，有没有可以使用它的主机提供商？
浏览 1提问于2013-04-09得票数 16
回答已采纳
当我运行脚本时，自动web浏览器确实会加载，我希望它加载的网站也会加载，但它会立即关闭，而不会做任何其他操作。我查看了文档，并使用了等待方法，以防我试图加载的网站进行了大量AJAX加载，但它似乎仍然不起作用。谁能解释一下发生了什么事，以及我是如何得到这个错误的？
以下是JavaScript代码：
const {Builder, By, until} = require('selenium-webdriver');
(async function helloSelenium() {
let driver = await new Builder().forBrowser(
浏览 10提问于2022-04-27得票数 0
我正在浏览Selenium WebDriver的文档，例如，它可以驱动Chrome。我在想，“驾驶”PhantomJS不是更有效率吗？
有没有一种方法可以在PhantomJS中使用Selenium？
我的预期用途是web抓取:我抓取的网站加载了AJAX和许多可爱的JavaScript，我认为这个设置可以很好地替代我目前正在使用的Scrapy Python框架。
浏览 4提问于2012-06-27得票数 35
回答已采纳
我使用selenium WebDriver从一个加载了JavaScript的网站收集URL到图像。下面的代码似乎只返回大约240条链接中的160条。为什么会-因为JavaScript呈现？
有没有办法来调整我的代码来绕过这个问题？
driver = webdriver.Chrome(ChromeDriverManager().install(), options = chrome_options)
driver.get('https://www.politicsanddesign.com/')
img_url = driver.find_elements_by_xpath(&#
浏览 4提问于2022-11-03得票数 1
回答已采纳
Selenium有没有什么库或替代方法可以从动态(javascript渲染的)网站上抓取数据？
我遇到的问题是，当我在selenium中使用webdriver时，许多网站可以很容易地检测到。我已经做了一些事情，比如在我的webdrver中更改了我的cdc_变量，但我仍然被检测到了。我一直在研究使用硒不被检测到的方法，但似乎不可能做到。
因此，我正在寻找一种不使用Selenium来抓取动态网站的方法。任何建议都是有帮助的。
谢谢!
浏览 2提问于2020-05-24得票数 0
1回答
我试着在https://www.oddschecker.com/us/football的每一场比赛中都赢球。在使用Chrome Tools XHR选项卡时，我没有看到访问任何API的明显方式。我是不是漏掉了什么？这些数据是从哪里来的？ 我知道我可以通过使用Splash或Selenium (我正在使用Scrapy和python)加载Javascript来抓取数据，但是Splash让我很头疼，我似乎找不到任何帮助。我希望有人能告诉我一种访问API的方法，这样我就可以跳过使用这些方法加载动态网站。 如有任何建议，我们将不胜感激！
浏览 25提问于2020-07-28得票数 0
回答已采纳
2回答
我已经加载了一个网页，现在打开Chrome开发者控制台。现在，我想阅读网站在web浏览器控制台中加载的资源文件(如样式/图像/语言属性)。如果可以读取使用Javascript代码从控制台发出的网络调用，也就足够了。
(实际执行情况如下：
我将使用Selenium和Java代码启动Chrome浏览器，一旦启动，我将执行Javascript代码，以便为特定网站通过网络加载国际化文件，这样我就可以根据所使用的国际化语言调整我的Java selenium代码库。
URL：试图获取这个文件的url，它可以在网络选项卡中看到，但我需要使用使用Javascript代码执行的Javascript来获取这个ur
浏览 7提问于2016-02-26得票数 1
我正在尝试使用selenium自动化一些基于浏览器的数据输入。目标URL是HTTPS，但它是一个实际的公共网站，而不是自签名证书。我正在运行以下代码：
from selenium import selenium
import unittest, time, re
class python_2_remote_control(unittest.TestCase):
def setUp(self):
self.verificationErrors = []
self.selenium = selenium("localhost", 4444,
浏览 0提问于2012-01-22得票数 2
回答已采纳
我目前正在用Selenium创建一些测试用例，我遇到了一个问题。
在我的测试用例中，我试图浏览的网站有一个小表单和一个按钮可供搜索。填写表单并单击按钮没有问题。一旦点击这个问题，问题就来了。
单击按钮后，此函数将被调用：
function muestraEspera(){
document.getElementById("divCargando").style.display = "";
}
基本上，这使得一个包含“加载”图像的DIV可见，因此访问者只会看到图像，并且在完成之前无法实际看到网站加载内容(内容被ajax加载)。
加载内容后，将执行此函数：
func
浏览 6提问于2012-02-15得票数 4
回答已采纳
1回答
我在这个网站上看到了很多关于使用jquery加载和在html片段中加载脚本的主题。不幸的是，我不能让这些方法(getscript)中的任何一个起作用。下面是加载html和假定的javascript的代码。
<script type="text/javascript">
$.ajaxSetup ({
cache: false
});
$(document).ready(function(){
$("#x").click(function() {
event.preventDefault();
浏览 3提问于2012-12-10得票数 0
我正在使用一个网站，我需要使用Selenium运行一些js代码。为了让事情变得更简单，我需要运行在网站脚本中声明的函数。
例如，网站使用一个名为document_handler.js的脚本文件，代码如下：
(function ($) {
var getConversationId = function(){
return $('input[name="conversationId"]').val()
};
})(jQuery);
在Selenium中，如果我运行：
js_eval = driver.execute_scr
浏览 1提问于2016-07-11得票数 1
回答已采纳
我的场景是:我正在使用Selenium WebDriver运行一个web自动化，以获取数据并在网站中进行导航。有时，包含不相关代码的javascript文件需要超过1分钟才能加载，这会使我的所有代码运行缓慢，因为当Selenium WebDriver加载一个页面时，它会等待所有文件被加载。
因为我没有权限更改或修改页面源代码，所以我没有找到解决方案。我注意到，附近的解决方法可能很有用，那就是在我的ChromeDriver中应用一个扩展来完成它(比如AdBlocker)。
此外，到目前为止，我在AdBlock扩展方面所做的工作：
ChromeOptions option = new Chrome
浏览 0提问于2018-01-22得票数 1
我正在使用测试我的网站的用户界面。我需要检查单击一个按钮是否会产生一些结果。在每10次左右的测试运行中就有1次，Selenium甚至无法单击按钮。未打印出错误。JS没有任何问题，因为在Selenium单击按钮失败后，我可以手动单击它。
在最简单的情况下，我的HTML如下所示：
<html>
<head></head>
<body>
<a id="button" onclick="clickIt(); return false;"></a>
<script type="
浏览 0提问于2011-07-28得票数 1
回答已采纳
1回答
我正在用selenium测试django应用程序，我的一个页面使用。其中一个选项卡包含一个简单的表，列出了一些用户，并通过ajax加载。当使用应用程序时，选项卡工作得很好，但是当使用selenium自动测试时，选项卡似乎没有加载它的内容！我正在用python编写测试。一开始，我使用selenium的click方法，但正如我从以前的测试中痛苦地了解到的，在锚标记方面，这是相当错误的，所以我求助于我以前使用的解决方案: wait_for_condition方法，并显式地调用选项卡单击事件(甚至是load事件！)尽管如此，标签仍然不起作用！
I'm in despair here, the
浏览 0提问于2010-06-24得票数 4
回答已采纳
我们维护一个由测试脚本使用的库，这些脚本进行系统级测试。被测试系统的一部分是一个网站，为了导航和与网站交互，我们使用JPype来控制Selenium2.0的webdriver。Selenium 2.0有一个Java和C#接口，目前我们不能使用Java或C#重写测试库，这就是为什么我们使用JPype来控制它的原因。这个系统是由最近离开公司的人建立的，现在我正在加快它的速度。
每当我们与网站交互时，我们都使用time.sleeps：
self.browserDict['Driver'].findElement(self.browserDict['By'].id(by
浏览 2提问于2011-06-01得票数 4
回答已采纳
我需要建立一个Python刮板，从一个网站的内容只显示后，用户点击与Javascript onclick函数绑定的链接，页面不会被重新加载的数据。为了做到这一点，我研究了Selenium，并尝试了一下，似乎每次我实例化一个驱动程序时，Selenium都会打开一个新的Firefox web浏览器：
>>> driver = webdriver.Firefox()
这个开放的浏览器是必需的吗，或者有没有办法摆脱它？我之所以问这个问题，是因为scraper可能是web应用程序的一部分，我担心如果有多个用户开始使用它，我的服务器上会打开一堆浏览器窗口。
浏览 1提问于2013-03-03得票数 1
我有一个用sencha/extjs构建的网站上的按钮。目前按钮id是savebutton-1550-btnEl，但每次页面加载时都会发生变化。我知道该按钮已禁用，但出于测试目的，我想将此按钮设置为启用，然后单击它。
我如何找到这个元素，然后用Java Selenium禁用它并单击它呢？
我猜我将不得不执行一些javascript，但是我很难找到javascript的目标。
浏览 0提问于2015-03-31得票数 0
2回答
我正在尝试使用selenium & python从网站下载每日报告。
下载每日报告的方法
没有数据的网站加载
在X时间之后，页面将加载报表信息。
一旦页面加载了报表数据，"table@id='etfTable'“就会出现。
在代码中添加显式等待，直到"table@id='etfTable'“加载
显式等待代码
element=WebDriverWait(driver,50).until(EC.visibility_of_element_located(By.xpath,"//table[@id='e
浏览 2提问于2021-10-13得票数 0
如何将java selenium webdriver中的所有cookie保存到txt文件中，然后加载它们？文档中并没有太多关于addCookie函数的内容。
我尝试了很多方法，但似乎都不起作用。
我可以让selenium向我展示/将cookie保存到一个文件中，它只是加载它们，这就是问题所在……
谢谢你们！
浏览 0提问于2013-05-02得票数 0
正如我们所知，在昨天(2012/07/26)的一段时间内。在那段时间里，我的网站主页有些反应迟钝。主页试图加载twitter提要，但失败了，因此我的网站中的其他页面元素似乎损坏了，比如jquery滑块无法正确加载，因为它试图加载twitter API。
有没有解决这个问题，主页忽略twitter提要，如果网站注意到它已关闭，并显示一个简短的错误通知，而不是提要？
我正在使用下面的自定义推特小部件()来显示主页中最新的2条推文。
<div id='twitter_div'>
<ul id='twitter_
浏览 0提问于2012-07-27得票数 1
回答已采纳
如何使用InternetExplorerDriver禁用JavaScript？
我有以下功能，但它似乎没有禁用JavaScript：
self.selenium = webdriver.Remote(
command_executor="http://localhost:4444/wd/hub",
desired_capabilities={
'platform': 'WINDOWS',
'browserName': 'internet explorer',
&
浏览 0提问于2013-06-25得票数 0
回答已采纳
我试图在上刮，这是一个带有Selenium的网站(因为它是一个动态加载内容的网站)。
然而，为了等待加载这样的动态内容，虽然我通常使用time.sleep()，我刚刚知道(并尝试过) driver.implicitly_wait()，但似乎没有得到预期的内容。
以下是代码：
from selenium import webdriver
import os
import time
os.environ['MOZ_HEADLESS'] = '1'
baseSite = 'https://bair.berkeley.edu/students.html
浏览 1提问于2020-07-06得票数 0
3回答
在过去的几天里，我刚刚开始研究selenium的自动化测试，并且被卡住了。我一直在寻找关于这方面的文档，但没有找到任何非常有用的东西，但也许你们中的某个人发现了一些有趣的东西，如果是这样的话，我很想读一读。
无论如何，问题是:我需要打开一个网站。这个网站接受一些参数，将浏览器带到另一个网站，但是如果参数无效，那么下一个网站将显示一条消息，说明“发生了错误”。
如果第二个站点没有出现类似这样的错误，我们希望存储一些任意值，并在以后回显它们。如果站点确实出错，我们希望标记错误并继续。现在，如果第二个站点无效，selenium将停止运行。
它唯一能做到这一点的方法似乎是使用if-else语句，尽管我
浏览 1提问于2011-06-25得票数 6
回答已采纳
我有个问题需要帮助。我正在尝试从一个网站上抓取一些数字(参见下面代码中的链接)。因为网站是使用JavaScript加载的，所以我使用selenium首先加载页面，然后将其传递给xlml以解析数据。
我使用的代码如下：
from selenium import webdriver
from lxml import html
import time
url = "http://sebgroup.com/large-corporates-and-institutions/prospectuses-and-downloads/rates/swap-rates"
xpath =
浏览 4提问于2016-12-30得票数 2
回答已采纳
我在Service Now网站上使用Selenium和Python3。
所以这个过程是这样的: selenium加载ServiceNow URL，然后我使用sendKeys自动输入用户名和密码，然后加载页面，其中有一个我需要提取的事件表。不幸的是，由于我的组策略，我每次都必须登录。
直到我不得不找到包含数据的动态呈现的Javascript表，而我似乎永远也找不到它。我甚至试着在里面放上15秒的睡眠让它加载。
我还仔细检查了XPaths和Id / Class名称，它们是匹配的。当我打印query.page_source时，我没有看到JS呈现的任何东西。
我也用过很好的汤，但也不起作用。
有什么想
浏览 0提问于2021-07-13得票数 0
1回答
我正在尝试从这个页面获取数据
https://bscscan.com/tokenholdings?a=0xFAe2dac0686f0e543704345aEBBe0AEcab4EDA3d
但是网站所有者并没有为此提供端点API。所以我试着用不同的方式来实现它：
-USING DRYSCRAPE但这个库似乎被遗弃了；
-USING请求，但数据由javascript动态提供；
-USING请求超文本标记语言，但即使在这种情况下，数据似乎也没有加载。
我想忽略selenium，因为它很慢，但我不知道如何解决这个问题。谁有一个可行的解决方案？我需要的数据是包含钱包令牌的表。谢谢你的建议，祝你有愉快的一
浏览 23提问于2021-06-13得票数 0
回答已采纳
Selenium是用JavaScript编写的。如何在JavaScript中编写测试？我尝试添加用户扩展，但是如何从JavaScript调用常规selenium命令？我尝试调用doOpen，但这并没有等待浏览器正常加载。如何从JavaScript调用Selenium命令？
浏览 2提问于2011-02-23得票数 3
我使用Selenium (2.24)来生成单元测试(用于Visual Studio单元测试框架)。在使用FireFox的C# WebDriver时，由驱动程序启动的浏览器似乎没有通过javascript找到我的网站cookies (我在站点中包含了一个javascript文件，用于查找cookies，并在找到cookies时通知我)。此外，它没有使用浏览器的图像缓存，并且总是从服务器请求新图像。当我从“普通”(不是由Selenium启动的) FireFox运行我的站点时，这种行为不会发生。
奇怪的是，在我的单元测试中调用下面的代码确实会返回我的cookie (只是我的JavaScript找不到
浏览 0提问于2012-07-06得票数 1
回答已采纳
1回答
我正试图使用Selenium在Python中构建一个web刮刀，但当我从webdriver检索网站源代码时，我无法访问所需的信息。
我认为问题在于，一旦最初从服务器下载了页面，内容就会通过JavaScript添加到页面中。当我运行browser.page_source时，我会在添加该内容之前获得该页面的源代码。我想知道在添加了加载了JavaScript的内容之后是否有可能获得页面的源代码(换句话说，当我使用in元素查看页面时看到了什么)。
下面是我使用的基本Python脚本：
from selenium import webdriver
browser = webdriver.Chrome(
浏览 0提问于2018-09-20得票数 11
回答已采纳
好吧，所以我在一个小泡菜里。我遇到了JSoup的问题，因为页面需要Javascript来完成部分页面的加载。幸运的是，我在过去已经解决过这个问题(解析了原始的javascript代码)，而且非常乏味。最近，我尝试制作一个登录到网站的程序，但是它需要一个来自元素的令牌。除非执行了JavaScript，否则表单元素是不可见的，所以它根本不会出现，我甚至无法提取。所以我决定研究硒。
第一个问题，这是我应该查的图书馆吗？我之所以如此热衷于使用HttpClient，是因为其中一些网站的流量非常高，并且不会一直加载，但是--我不需要这些页面来加载所有这些页面。我只需要将其加载到可以检索登录令牌的位置。我更
浏览 6提问于2015-11-15得票数 5
回答已采纳
我正在编写一个程序，以自动化链接验证在一个网站。我们的网站每页有400多个链接，我们需要打开每个链接并看到它正在返回一个有效的页面，即200，还有其他要求来检查该页面是否是404重定向页等。它意味着验证400墨迹--大约需要30分钟左右。
我的设计是将它与前端(Selenium)自动化集成到一起，每次浏览器加载新页面或刷新浏览器时，它都会通过传递页面源来验证所有可用的href，从而触发一个新线程。
我们没有遵循一个页面对象模型，否则我可以在我的每个页面中触发它。
这里的问题是，我们是否可以使用Selenium驱动程序侦听浏览器刷新或页面加载事件？
浏览 2提问于2014-09-17得票数 1
早上好。我正在开发一个在中使用Selenium和钩子的程序。它的主要功能之一是自动下载，为我保存。在加载配置文件并在主页上之后，有一个名为JavaScript Class的Save，它有一个名为download()的函数
我可以通过浏览器在控制台中调用这个函数，并下载保存。
我设置了Selenium，挂到网站上，这很好，但是，当我试图通过
driver.execute_script('Save.download()')
它最终给了我这个错误：
selenium.common.exceptions.JavascriptException: Message: ReferenceE
浏览 4提问于2022-10-31得票数 0
我能够用以下代码计算selenium中的页面加载时间：
代码：Selenium C#
using OpenQA.Selenium;
double requestStart = (long)((IJavaScriptExecutor)CTest.Driver).ExecuteScript("return window.performance.timing.requestStart");
double domComplete = (long)((IJavaScriptExecutor)CTest.Driver).ExecuteScript("return window.pe
浏览 4提问于2019-09-23得票数 5
回答已采纳
我开始使用Selenium，它适用于我尝试过的任何网站，除了一个不加载页面的网站()。
它打开Chrome，但是页面是空的。我试着设置延迟的次数，但它仍然没有加载。
当我在一个普通Chrome (不含硒)上访问网站时，它会加载所有内容。
下面是我的简单代码，不知道如何继续：
import os
import random
import time
# selenium libraries
from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.chrom
浏览 11提问于2022-11-18得票数 0
回答已采纳
1回答
我正试图从纽约证券交易所的网站上获得一个股票的价格。例如，在上，我想从Quote数据网格中抓取与Last对应的字段。我相信这个网格是使用react.js生成的。使用我的浏览器中的开发工具，我可以找到所需的数据：
<span class="rtq-d big" domid="LastPrice">148.95</span>
因此，在页面完全加载后，应该可以使用domid="LastPrice"搜索span。但我似乎无法按程序加载那个网格。这并不奇怪，天真的刮板在这个任务上失败了，但我也在通过selenium使用Phanto
浏览 3提问于2016-05-12得票数 1
回答已采纳
我想从网站上抓取数据。
我正在尝试访问每个博客，然后点击链接，在给定博客的详细信息页上刮取详细信息。
我尝试使用BeautifulSoup，但它没有返回任何数据，并且我意识到数据是用JavaScript动态加载的。
然后我尝试使用Selenium来刮掉它，这是我想出的代码：
from selenium import webdriver
from selenium.webdriver.chrome.service import Service
service = Service('/usr/bin/chromedrivers')
service.start()
drive
浏览 7提问于2022-07-20得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
