我试图从美国证券交易委员会的档案网站上摘录以下信息。这是它在网站上的显示方式：Accelerated filer ☐Smaller reporting company ☐
Emerging growth company
浏览 16提问于2020-03-09得票数 0
回答已采纳
1回答
问题是，我无法通过python访问所需选项卡的内容，这是web世界中可用的典型WEB抓取代码。这些代码通常是基于bs4的。
有没有人有任何想法或示例代码来学习如何处理我的问题？
浏览 2提问于2020-02-06得票数 4
回答已采纳
我在试着从https://hk.appledaily.com/search/apple..。我需要从div class="flex-feature"但它只返回[]..。希望大家能帮忙，谢谢！ from bs4 import BeautifulSoup
results = soup.find_all(
浏览 40提问于2020-10-06得票数 2
回答已采纳
我使用C#和Python的Selenium Webdriver从网站获取数据元素，但web抓取的速度非常慢。抓取35000个数据表花了我大约1.5天的时间。使用Selenium Webdriver，我可以执行Javascript来获取Java元素。有没有一些库可以不需要像Webdriver这样的东西来在网页上执行Javascript来检索元素，并且能够点击元素？或者有没有比硒更快的替代品？
浏览 5提问于2015-04-16得票数 13
这个问题适用于Python3.6.3、bs4和Win10上的Selenium3.8。
我正在尝试用动态内容刮页。我试图刮的是数字和文本(例如来自 )。根据我的理解，使用requests+beautifulsoup不会完成这项工作，因为动态内容将被隐藏。因此，我必须使用其他工具，如selenium webdriver。然后，考虑到我无论如何都要使用selenium，您是否建议忽略漂亮的汤，继续使用selenium函数呢？elem = driver.find_element
浏览 6提问于2017-12-26得票数 2
回答已采纳
我想从这里抓取数据：在该页面中有一个标题为“市场流动”的部分，下面有3列：“最活跃的人”，"%获得者“，"%失败者”，每一个都可以点击。该部分列出了10只股票。我想要做的是点击"%获得者“，同时点击”加载10多个“，查看排名前20的获得者列表，并在Python中抓取数据。但是，在这两次单击之后，URL与之前相同。
我很感谢在这方面的任何帮助。
浏览 1提问于2015-09-11得票数 1
1回答
我正在使用Selenium和Beautiful Soup在Python中对动态内容进行web抓取。问题是，即使使用以下代码，也无法将定价数据表解析为Python：sel_soup=BeautifulSoup(html, 'html.parser')
然而，我后来发现，如果我在使用上面的代码之前单击WebPage上的“查看
浏览 15提问于2018-02-14得票数 2
我试图刮数据从板球网站，并已经写了一个方法，接受一个球员的名字，并显示他们的相应数据。我的要求是显示所有球员的完整记分卡，而不是只显示一个球员的数据。public static void displayData(WebDriver driver, String input) WebElement player = driver.findElement(By.xpath("//a[contains(text(),'"+input+"')]"));
Str
浏览 0提问于2020-03-04得票数 0
所以我从我的作品网站上收集了所有的数据，以获得我所有的班次和关于那些班次的数据，比如python和漂亮的汤。抓取移位是很好的，因为它们只是元素。但是要获得信息，比如谁在轮班，你必须单击一个元素，它会显示一个隐藏的元素，但也会根据你点击的日期更改信息。我试着将javascript:showFloorPlan('N','N','N','20200624')添加到我正在抓取的网址中，但没有成功。 非常感谢您的任何帮
浏览 17提问于2020-06-23得票数 0
我需要一个流视频播放的视频网址，我检查在网络的Chrome我可以得到的.m3u8流网址，我如何实现这一点编程使用website.If？
浏览 3提问于2018-12-03得票数 0
当我使用Selenium时，我可以看到浏览器GUI，是否可以使用scrapy或严格基于scrapy命令行？
浏览 4提问于2015-11-03得票数 1
回答已采纳
3回答
我正在尝试使用Python在javascript渲染的网页上进行动态web抓取。 1)然而，只有当我缓慢地向下滚动页面时，元素才会加载。因为它只滚动到页面上的某个点，而忽略了其他结果) 和 driver.execute_script("window.scrollTo(0, document.body.scrollHeight);") (这不起作用，因为元素在向下滚动到页面末尾时不会加载-它需要用户缓慢地滚动整个页面) 2)如何让Selenium在将所
浏览 48提问于2019-05-07得票数 1
我正在尝试以下代码：if __name__ == '__main__': import requests r = s.get(link) print(sou
浏览 1提问于2020-02-05得票数 0
1回答
我目前正在进行一个项目，该项目通过搜索查询(即谷类食品)来抓取杂货店页面上的数据，并将其显示在旋转视图中。但是，我很难找到一种从页面中抓取数据的方法。
浏览 1提问于2021-11-19得票数 0
回答已采纳
1回答
我正在尝试从网页中捕获动态内容。加载内容后，数据动态显示在网页上。在一个网页上，控制台中的响应是json格式的，第二个是html。
浏览 1提问于2020-05-25得票数 1
1回答
我目前正在使用Python进行web抓取。我使用了Selenium和Beautifulsoup库来抓取。我最近知道Selenium适用于php/Laravel。我的问题是，我可以使用Laravel + Selenium web驱动程序抓取web吗？如果是，你能给我提供一些链接或存储库，以便我学习吗？我被迫在我的抓取工作中使用php/Laravel，因为他们说php很容易在服务器上
浏览 19提问于2019-11-19得票数 0
我想知道有没有什么方法可以制作一个python脚本来从网站上获取一个所说的值，在我的例子中是一个离线数字，它在一个每5分钟刷新一次的网站上。我想要设置它，如果该值增加，它将发送给我一封电子邮件。我对python知之甚少，所以如果有人能给我指出正确的方向，我将不胜感激。。提醒一下，我真的是python的新手。
浏览 3提问于2020-10-01得票数 0
我想从什么应用程序中抓取所有的元素，但是我对selenium python有问题，这是我的代码：from selenium.webdriver.commonimport keysdriver.get("https://we
浏览 3提问于2021-10-01得票数 1
回答已采纳
我目前正在尝试从subreddit中抓取数据(我使用的是旧的reddit ->扩展名，它以这种方式恢复了reddit的旧外观，这样更容易抓取)，但是每当我试图获得结果时，我都会从这段代码中得到错误：，我是怎么解决这个问题的？(by=By.XPATH, value=xpath)
File "C:\Users\
浏览 0提问于2021-02-06得票数 0
回答已采纳
我现在正在执行一项任务，系统地从似乎是由javascript呈现的课程列表中抓取内容。我在web上使用PyQt4遵循了一些脚本，但失败了(我在下面复制了它)。我想知道是否有任何方法可以修改以下脚本，以便我可以使用PyQt4抓取这些内容，或者我必须寻找其他方法来实现此目的？
浏览 17提问于2016-09-21得票数 3
云服务器
ICP备案
对象存储
云直播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号