我正在使用Selenium从一个网站上抓取表格数据。我发现我可以使用xcode轻松地遍历各行以获得所需的信息。selenium是不是每次我通过xcode搜索一个对象的文本时都会访问网站？如果前者是真的，有没有办法下载html并使用Selenium进行离线迭代？
浏览 22提问于2018-09-10得票数 0
回答已采纳
4回答
我想从一个网站上有TextFields，按钮等抓取数据。我的要求是填写文本字段并提交表单以获得结果，然后从结果页面中抓取数据点。(编辑)
我的要求是从ComboBoxes中选择值并单击search按钮，然后从结果页面中抓取数据点。附注:我正在使用selenium Firefox驱动程序从其他网站<
浏览 1提问于2013-05-28得票数 8
回答已采纳
1回答
我正在尝试从一个网站上的表单中抓取一个动态的选项列表。该网站的工作方式是，当您在查询框中输入一些数据时，它会将这些数据作为关键字从自己的数据库中进行搜索，并相应地生成结果。我试图通过使用selenium抓取来提取完整的列表。最初在inspect element部分，我有：这就是当我们在表单中写一些关键字时会发生的变化：for i in ra
浏览 2提问于2018-05-14得票数 0
2回答
基于日期抓取表数据
、、、
我正在尝试抓取kurs事务的表
从2015-2020年，但问题是默认日期和我选择的日期之间的链接仍然是相同的。那么我如何告诉python从2015-2020(20-11-15-20-11-20)抓取数据呢？我对python和python3的使用非常陌生。
浏览 0提问于2020-11-24得票数 0
2回答
NFT清单价格
、、、
在OpenSea中，您可以查看项目中列出的NFT的价格。当NFT被列出时，列出的价格是存储在区块链上，还是静态地存储在OpenSea的平台上？最终，我正在寻找一种方法，以刮价格上市的令牌在任何NFT项目。虽然我可以直接从OpenSea的网站上抓取，但是NFT数据被延迟加载，这使得直接从OpenSea.io抓取数据的过程更加复杂--我不希望使用selenium。tl;dr :在不使用
浏览 7提问于2022-03-03得票数 0
我正试图用selenium在'‘网站上进行网络抓取，但我无法从网站上获得表格或表格项目的文本。programCagriListTable"]/tbody')这段代码没有给出任何错误，但也没有给出文本，当我试图获取驱动程序的内部html时，我从网站获得了第一个选项卡的有什么问题吗？
浏览 2提问于2022-06-14得票数 1
回答已采纳
我正在尝试抓取以下网页： (我已从网站获得许可)from selenium import webdriver
options.a
浏览 0提问于2020-12-06得票数 0
1回答
C#中的动态网站抓取不挑项目
、、、、
我想网站刮以下的网页。但是，像selenium和puppeteersharp这样的动态网站抓取库不会拾取显示在这个页面表格上的项目(见图)。上面的库中没有一个在标题栏下列出引用，尽管如果我试图保存这个页面的屏幕快照，我可以看到很少的表行。为什么这些成熟的libs不能在这个页面上工作呢？
浏览 5提问于2021-07-19得票数 1
回答已采纳
我已经看了stackoverflow上关于美丽汤的大部分问题，只从网站上抓取了一半的数据，但到目前为止还没有一个有效。我已经尝试将功能更改为lxml或html5lib等。我也尝试使用selenium，现在我尝试使用selenium向下滚动网站，使用selenium加载网站上的所有内容，并使用漂亮的汤来抓取数据，但当需要超过100个项目</
浏览 0提问于2021-07-04得票数 0
1回答
我正在使用jsoup从网站上抓取数据。我想知道当我从中抓取数据的网站宕机时，会抛出哪个异常。
是SocketException还是NoHttpResponseException或者其他什么？我读到当服务器收到请求但没有响应时会抛出NoHttpResponseException，对吗？
浏览 1提问于2017-01-10得票数 1
如何使用URL访问下一页，内容如下：我知道如何使用刮取库(BS4、Selenium)，但我不知道如何抓取这样的站点。我一直在玩谷歌Chrome开发工具，但没有成功。像Python这样的抓取站点通常的工作流程是什么？
浏览 0提问于2019-07-05得票数 0
回答已采纳
我正在抓取一个使用activex控件的旧网站。我正在使用selenium来实现这一点。这个网站有buggy，当你注销它的时候，IE就会崩溃，你就会看到"Internet Explorer已停止工作“窗口。无论发生什么，网站都需要重新编码。令人恼火的是，当对话框在执行“搜索解决方案...”时它不会释放selenium，所以我的代码会挂起等待。
现在，我正在尝试通过windows api终止该
浏览 1提问于2014-08-22得票数 1
我正在尝试使用python来抓取一个用无限滚动实现的网站。实际上，网络就是pinterest。我知道如何使用selenium来抓取具有无限滚动的web。但是，WebDriver基本上模仿了访问web的过程，而且速度慢得多，比使用BeautifulSoup和urllib进行抓取要慢很多。你知道有什么时间有效的方法来刮一个无限滚动的网页吗？谢谢。
浏览 0提问于2014-12-29得票数 0
回答已采纳
我正在尝试从这个网站的一个表中抓取数据：https://prosettings.net/cs-go-pro-settings-gear-list/。鼠标敏感度是我一直尝试获取的第一个值。当通过xpath: //table@id="table_1"/tbody/tr/td8进行搜索时，所有需要的元素都会在inspect/developer工具中突出显示。使用webdriv
浏览 19提问于2021-09-06得票数 0
2回答
我正在做一个小项目，在那里我必须提交一个表格到一个网站。然而，该网站使用onclick事件提交表单(使用javascript)。
如何在python中模拟onclick事件？哪些模块可以使用？我听说过selenium和mechanize模块。但是，哪个模块可以使用，或者两者都可以使用，哪一个更好？我刚开始使用网络抓取和automation.So，这将是非常有帮
浏览 2提问于2016-07-11得票数 6
1回答
我有一个网站，我正在抓取，需要滚动水平(到最右边)和垂直(到最底部)的一个网页上的表格。我使用的是Python3、Selenium和Chrome Driver。我可以抓取表格数据，但它只能抓取我网页上可见的内容。当我检查网页时，我找不到任何滚动信息。通过在线搜索，我看到了使用Selenium进行滚动的各种方法，甚至可以通过xpath查找，然后以这种方式进行滚动。到目前为止，我没有任何幸运的选择，但可能做错了。brow
浏览 0提问于2019-10-26得票数 1
我正在使用VBA中的selenium web驱动程序来抓取一个表，但是它太慢了，无法实际使用。我需要对我的VBA代码进行一些改进才能真正使用它。
我一直在这个网站上使用IE自动化。复制整个HTML表格并粘贴它是一个相当快的过程。但是，由于网站确实发生了一些变化，我不能再在网站上使用IE。所以我试着设置了一个selenium web驱动程序，并<e
浏览 0提问于2019-09-10得票数 0
我正试图在aws上托管一个webscraping功能，并遇到了selenium的webdriver。有谁能告诉我如何添加chromedriver.exe文件，以及如何在AWS函数中工作。这是我函数中与selenium有关的部分，
from selenium import webdriver from selenium.webdriver.common.by import By fromwebdriver_manager.chrome import ChromeDriverManager
浏览 18提问于2022-04-05得票数 1
回答已采纳
1回答
我正在进行一个小型的instagram抓取项目，主要使用selenium和python请求模块。我发现当的请求头发生变化时，我从使用返回网页的HTML代码。如何使用selenium或request自动获取请求头？我希望得到附加的
浏览 9提问于2022-02-17得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
