我试图刮这个网站，他们的网站布局使用相同的类名的信息，我需要的。我尝试使用document.querySelectorAll()，但它返回未定义的。let shoeHtml = await page.evaluate( () => document.querySelectorAll('.form-section-right'))
如果我尝试使用letshoeHtml = await page
浏览 31提问于2020-03-07得票数 0
我正在尝试web抓取，但我遇到了这个小问题。我想要抓取的网站有两个按钮，都有相同的类。使用Puppeteer，我想单击第二个按钮。问题是，当我必须在jQuery函数中执行字符串单击时，我不知道如何选择第二个元素。我的第二个解决方案是使用传统的jQuery DOM搜索，如下所示：
document.querySelector('.ws-c
浏览 37提问于2019-11-01得票数 0
回答已采纳
我运行Node 12和Puppetor2.2.1(两者现在都不能升级)。
挑战是在隐藏的根中找到DOM元素，并将它们传递给我的主类的另一个函数。此外，我刮不同的网站，所以代码必须找到阴影根动态。使用page.$()或page.$$()，我无法检查元素是否有shadowRoot，使用page.$$eval()或page.evaluate()似乎无法将元素句柄传回主函数(至少我不知道如何做到这一点)。例
浏览 13提问于2022-11-04得票数 2
回答已采纳
1回答
我正在抓取一个网站来练习，我正在使用Puppeteer作为一个无头浏览器。我的问题是在node.js控制台上记录木偶操纵者的响应。 我的目标是产品的DOM中的一个父元素，并从每个元素中检索某些信息。使用谷歌开发工具，我所有的querySelectors都是正确的，我可以打印我想要的数据，没有问题。但是，当尝试打印到我的<
浏览 15提问于2019-06-18得票数 0
回答已采纳
1回答
这是我第一次使用puppeteer，我需要一些帮助来抓取。我正在尝试从Array元素列表中获取数据；首先，我应该单击第一个元素，获取标题，返回，然后单击array中的第二个元素，获取标题，返回，等等。const result = await page.evaluate(() => {
let title = Array.from(document.<e
浏览 1提问于2019-11-09得票数 1
我使用元素属性来标识DOM中类似树的结构，以及每个分支负责其子节点的节点。它通过在DOM中搜索节点的后代并检查标识另一个节点的属性来做到这一点。它需要这样做，因为子节点可能是DOM中更深的几个层。我目前正在使用以下JS进行此操作：
const directChildNodes = [...nodeElement.querySelectorAll(`[tree-node</e
浏览 4提问于2022-07-28得票数 2
我现在正在做一个项目，遇到了一个错误，需要你的帮助！基本上，我尝试选择以下锚标记内的包装文本 <a href="..." class="productDetailsLink js-productName">Product Name</a> 这是我当前的代码> page.evaluate(() => { const itemNodeList = do
浏览 24提问于2020-04-10得票数 3
回答已采纳
2回答
我试图抓取网站上所有带有标签的元素，例如$('header')和它们的相关样式。本质上是遍历每个元素，获取与其相关的css，并将其全部转储到一个文件中。目前，我已经设置了以下内容：con
浏览 23提问于2019-11-11得票数 0
我使用Puppeteer编写了一个简短的抓取器，用于从页面中提取一些标题。虽然我可以抓取单个元素，就像一个单独的h2，但尝试抓取和返回一组项并不成功。主要是我试图确保我的查询选择器正常工作，我可以在我的Chrome dev工具中运行Array.from(document.querySelectorAll('div.landscape h3.title')).map(partner
浏览 23提问于2019-06-16得票数 1
回答已采纳
1回答
使用Node js进行Web抓取
、、、、
我一直在尝试从网站上抓取一些数据，并使用Node js将其显示在我自己的网站上。我已经写了一个运行良好的文件。我可以将它打印到控制台进行验证。我想将网页中的数据显示为HTML元素。const puppeteer = require('puppeteer'); const browser = await <
浏览 3提问于2020-08-14得票数 0
我面临着和一样的问题.我也是的新手。我的用例如下:我想刮掉包含在<h3>标记中的链接，但只针对选择标记的链接，这些标记位于定义的选择器( id为trend_container的div )之上。所以我的代码是： const page =;
浏览 3提问于2020-10-17得票数 0
回答已采纳
我正在使用Puppeteer，并试图使用document.querySelectorAll来获取元素列表，然后循环执行某些操作，然而，似乎我的代码中出现了一些错误，它要么什么都不返回，要么返回undefined，要么返回一个空的{}，尽管我的元素在页面上，我的JS： let elements = await page.evaluate(() => document.q
浏览 66提问于2020-03-29得票数 0
回答已采纳
1回答
解决办法： await page.waitForResponse('http://localhost:58080/',在中，可接受的答案使用await page.waitForSelector(cssSelector);，这在我目前的情况下是行不通的，因为Ajax调用的成功不会向页面添加任何新元素。ser
浏览 5提问于2020-05-29得票数 1
1回答
我需要获取一个HTML元素中的所有内容，包括所有子节点和孙节点及其内容，就像它是一个字符串一样。这是我的预期输出： <div class="images"><div class="img_100"><a class="img a" legenda="" target="" style=""><imgsite/570/b/random_image.jpg
浏览 39提问于2021-11-18得票数 0
回答已采纳
我正在尝试制作一个自动在网页上玩游戏的机器人。到目前为止，我可以导航到网站，登录，并加载游戏页面，但我被困在这里。
我想在网页级别注入一个脚本，它使用jQuery不断地抓取网页并确定游戏所处的状态。这将通知Node.js./Puppeteer级别的函数执行。我的问题是，当页面中的自定义事件被触发时，我不知道如何让Puppeteer做出反应。例如，假设我们
浏览 14提问于2017-12-03得票数 0
1回答
使用木偶操纵者无限滚动
、、、
我正在尝试从这个中抓取数据。页面在DOM中的元素中有无限滚动。我有以下puppeteer脚本，可以一直滚动到底部以显示所有数据，这样我就可以抓取数据了。第一个page.evaluate调用按预期工作，滚动到底部并显示进一步的内容。但是，后续调用不起作用。我曾尝试使用await page.waitFor(2000);等待，然后才能进一步滚动，但它似乎不起作用。好心帮助别人吧！= require('puppeteer'
浏览 9提问于2021-05-21得票数 3
在ubuntu服务器上使用Node.js，Chrome和puppeteer作为无头浏览器，我正在抓取一些不同的网站。其中一个偶尔的任务是与加载的页面进行交互(单击链接打开另一个页面，然后可能再次单击以接受条款等)。我可以做到所有这些都很好，但我正在尝试理解如果我同时打开多个页面并试图与不同加载的页面同时交互(重叠时间)，它将如何工作。
为了可视化这一点，我在想用户将如何做同样<em
浏览 1提问于2020-06-08得票数 3
1回答
我正在为我们的区块链验证器制作一个监控工具。
该工具将从 (示例)中抓取HTML，并检查是否存在Active。我使用puppeteer爬行，但我有一个问题。当我在我的主机上运行下面的代码时，它能够获得元素。$eval (/home/ec2-user/validator-crypto-checker/node_modules/puppeteer/src/common&
浏览 5提问于2022-04-28得票数 1
回答已采纳
我正在尝试通过node.js中的木偶操纵者抓取数据 目前，我正在编写一个脚本，它可以抓取well.ca某一部分中的所有数据 现在，以下是我试图通过node.js实现的方法/逻辑 1-前往网站的医药健康部分2-使用dom选择器通过dom选择器panel-body-content a[href]从.panel-body-content获取href数组，以抓取子部分 3-<em
浏览 67提问于2020-07-02得票数 3
回答已采纳
云服务器
ICP备案
云直播
腾讯会议
实时音视频
腾讯云开发者
