将Cheerio元素传递给Puppeteer以单击它
Cheerio是一个基于Node.js的快速、灵活、实现了核心jQuery功能的库，用于解析和操作HTML文档。它提供了类似于jQuery的语法和API，使得在服务器端进行HTML文档的解析和操作变得更加简单和高效。
Puppeteer是一个由Google开发的Node.js库，用于控制和操作无头（Headless）Chrome或Chromium浏览器。它提供了一组强大的API，可以模拟用户在浏览器中的操作，例如点击、填写表单、截图等。Puppeteer可以用于自动化测试、爬虫、网页截图、性能分析等场景。
将Cheerio元素传递给Puppeteer以单击它的过程可以分为以下几个步骤：
- 使用Cheerio库解析HTML文档，获取需要点击的元素。可以使用Cheerio提供的选择器语法来定位元素，类似于jQuery的选择器。
- 使用Puppeteer启动一个无头浏览器实例，并打开目标网页。可以使用Puppeteer提供的
puppeteer.launch()方法来启动浏览器实例，并使用browser.newPage()方法打开目标网页。 - 在Puppeteer中获取目标元素的选择器路径。可以使用Puppeteer提供的
page.evaluate()方法，在浏览器上下文中执行JavaScript代码，获取目标元素的选择器路径。 - 在Puppeteer中使用目标元素的选择器路径来定位元素，并执行点击操作。可以使用Puppeteer提供的
page.click()方法，传入目标元素的选择器路径，实现对元素的点击操作。
下面是一个示例代码，演示了如何将Cheerio元素传递给Puppeteer以单击它：
const cheerio = require('cheerio');
const puppeteer = require('puppeteer');
// HTML文档
const html = '<html><body><button id="myButton">Click me</button></body></html>';
// 使用Cheerio解析HTML文档
const $ = cheerio.load(html);
// 获取目标元素
const targetElement = $('#myButton');
// 启动Puppeteer浏览器实例
puppeteer.launch().then(async (browser) => {
// 打开新页面
const page = await browser.newPage();
// 获取目标元素的选择器路径
const selectorPath = getSelectorPath(targetElement);
// 在浏览器中定位元素并点击
await page.goto('about:blank');
await page.evaluate((selectorPath) => {
const targetElement = document.querySelector(selectorPath);
targetElement.click();
}, selectorPath);
// 关闭浏览器实例
await browser.close();
});
// 获取元素的选择器路径
function getSelectorPath(element) {
if (!element || !element.length) {
return '';
}
const path = [];
let currentElement = element;
while (currentElement.length) {
let tagName = currentElement.get(0).tagName.toLowerCase();
let id = currentElement.attr('id');
let className = currentElement.attr('class');
if (id) {
path.unshift(tagName + '#' + id);
break;
} else if (className) {
path.unshift(tagName + '.' + className.split(' ').join('.'));
} else {
let siblings = currentElement.prevAll(tagName).length;
let selector = tagName + ':eq(' + siblings + ')';
path.unshift(selector);
}
currentElement = currentElement.parent();
}
return path.join(' > ');
}这段代码首先使用Cheerio库解析HTML文档，并通过选择器获取目标元素。然后使用Puppeteer启动一个浏览器实例，并打开一个新页面。接着，通过调用getSelectorPath()函数获取目标元素的选择器路径。最后，在浏览器中执行JavaScript代码，定位目标元素并执行点击操作。
需要注意的是，上述代码仅为示例，实际应用中可能需要根据具体情况进行适当的修改和调整。另外，为了保证代码的可靠性和稳定性，可能需要进行错误处理、等待页面加载完成等操作。
相关·内容
1回答
我正在尝试抓取一个使用react的网站，当我在chrome中可以访问我想要的元素时，但是当我尝试使用puppeteer时，我无法访问相同的元素，因为源代码没有加载这些react元素，有什么方法可以访问它吗？ 以下是代码 const request= require('request-promise')
const cheerio= require('cheerio');
const puppeteer = require("puppeteer");
const Url='https://angel.co/companies';
浏览 34提问于2020-03-15得票数 0
回答已采纳
2回答
对于任何错误，我深表歉意，我对node.js完全陌生。我正在尝试从现有网站获得一个按钮点击事件。例如，如果我单击网站中的登录按钮，则需要在终端中单击该事件和打印按钮。我尝试过puppeteer，cheerio和axios，所有这些都有自动点击的选项，但不能读取点击事件。有没有人能帮我解决这个问题，或者给我一个替代的方法来完成它。
const puppeteer = require('puppeteer');
(async() => {
const browser = await puppeteer.launch({headless:false});
const
浏览 2提问于2021-06-25得票数 0
我使用Puppeteer获取网站HTML，然后用Cheerio抓取数据。以下是我的代码的一部分。它几乎每次都工作得很好，但有时我在companyAddress和companyIntro中得不到定义。一开始，我认为这可能是由于不同页面的差异，但即使我在不同的时间抓取相同的页面也会发生这种情况(大多数时候我会获得数据，但有时它是未定义的)。页面渲染成功，通过devtool确认属性及其值存在。我想知道它背后的原因。会不会是抓取过程中Puppeteer的问题？Cheerio代码是同步的，所以我不认为Cheerio是问题所在。我从来没有得到过错误:无法获取未定义的attr('profile
浏览 42提问于2021-02-24得票数 3
1回答
我正在用木偶来抓取网站。但是，尽管我可以看到那里有很多类，但类仍然是空的。对此有什么建议吗？ 我正在寻找“门户类型的人”的课程。这一页上大约有90个。但是所有的对象都是空的。 const axios = require('axios');
const cheerio = require('cheerio');
const puppeteer = require('puppeteer');
const mainurl = "https://www.fbi.gov/wanted/kidnap";
(async () =>
浏览 41提问于2020-10-29得票数 0
1回答
我正在尝试创建一个基本脚本，只需向下滚动到站点的底部。滚动实现取自 so问题(第二答案为kimbaudi，第一种方法)。
该实现的工作方式是在滚动时不断测量元素列表的.length (如selector提供的那样)，以确定浏览器是否成功地滚动到所述元素列表的底部。
对于我的selector，我选择了包含关于黑客新闻tr.athing的每一篇文章的HTML元素，目的是向下滚动到最底层的文章链接。相反，尽管tr.athing作为一个selector是可打印的(如下面的代码所示)，但我得到了以下错误：
Error: Error: failed to find element matching sel
浏览 1提问于2019-07-15得票数 0
2回答
所以我试着看了一个教程并制作了一个网络刮刀，我把5个教程的代码合并到我的代码中，所以我认为它很混乱。
这是代码：
const puppeteer = require('puppeteer-extra');
const StealthPlugin = require('puppeteer-extra-plugin-stealth');
const fs = require('fs');
const { html } = require('cheerio');
const cheerio = require('cheerio&
浏览 5提问于2022-07-04得票数 0
1回答
我正在尝试使用NodeJS，puppeteer和cheerio来收集github贡献者的见解。 const cheerio = require('cheerio');
const puppeteer = require('puppeteer');
const url = 'https://github.com/grey-software/grey.software/graphs/contributors';
(async () => {
const browser = await puppeteer.launch();
cons
浏览 22提问于2020-08-10得票数 3
0回答
我正在使用Cheerio从不同网页的html代码中提取信息。但是，有一个网站将我要提取的文本包含在一个脚本标记中；因此，Cheerio方法无法访问这段代码。
因此，在寻找解决方案时，我在web上发现了使用puppeteer运行该脚本的可能性，这是一个处理chrome实例的API节点。使用它，即使不是以最好的方式，因为我几天前发现了它，最终我获得了我需要的html代码。不幸的是，我无法提取我需要的信息。这是我想要从中提取数据的html代码：
<h2 class="property-price">
<a href="blablabla">
浏览 0提问于2018-07-14得票数 0
回答已采纳
1回答
我正在使用cheerio.js和puppeteer.js跟随这个来尝试做一些基本的web抓取。当我试图在服务器端编写它时，我并没有完全遵循教程的做法，我的想法是让我的后端处理所有的抓取，然后在将来将数据传递到前端。
正如现在所写的，我正在
[nodemon] restarting due to changes... [nodemon] starting node server.js Your app is listening on port 8080 [Function]
看起来dynamicScraper正在返回[Function]，而我希望它是教程中的html吗？
主server.j
浏览 1提问于2019-03-30得票数 0
回答已采纳
1回答
我正在尝试使用puppeteer制作一个屏幕截图，并将其发送回输入命令的通道。不管怎样，我做不到，所以请帮帮我。
const Discord = require("discord.js");
const fetch = require('node-fetch');
const cheerio = require("cheerio");
const puppeteer = require('puppeteer');
const client = new Discord.Client();
module.exports = {
浏览 10提问于2021-06-02得票数 0
2回答
我想从一页上收集一些信息。首先，我与Chrome检查和控制台如何找到正确的价值，这是一切都好。然后，我将代码粘贴到木偶师、啦啦队环境和一些原因，我不能收集正确的数据。
这是在铬中起作用的部分：
const modellek = $('[columntype="model"] > section > ul > li').map(function() {
return ($(this).text())});
console.log(modellek)
["txt1","txt2",
浏览 1提问于2021-07-02得票数 0
回答已采纳
我目前的工作是抓取谷歌新闻网页。我试着用木偶师刮这些页面，但是当我试图刮的时候，它总是会给我一个空的结果。
这是我的代码：
const puppeteer = require('puppeteer')
const cheerio = require('cheerio')
const getNewsData = async (query) => {
let title = [] , url = [] , snippet = [] , imgSrc = [] , lastUpdated = [] , source = [];
const brows
浏览 8提问于2022-05-03得票数 1
回答已采纳
2回答
我试图抓取网站上所有带有标签的元素，例如$('header')和它们的相关样式。本质上是遍历每个元素，获取与其相关的css，并将其全部转储到一个文件中。
目前，我已经设置了以下内容：
// npm install --save request request-promise cheerio puppeteer
const rp = require("request-promise");
const puppeteer = require("puppeteer");
var fs = require("fs");
const $
浏览 23提问于2019-11-11得票数 0
我想截图webiste和该截图发送的信息不一致时，命令运行。我搞砸了，不知道该怎么办 const BaseCommand = require('../../utils/structures/BaseCommand');
const Discord = require("discord.js");
const fetch = require('node-fetch');
const cheerio = require("cheerio");
const puppeteer = require('puppeteer'
浏览 24提问于2021-03-17得票数 1
回答已采纳
我试着在全球速卖通中获取评论，但由于某种原因，wait()函数总是找不到#transction-feedback 因此，从技术上讲，如果您转到该链接并单击反馈点击，它将显示所有评论 .click确实可以工作，因为它单击了选项卡，但#transction-feedback似乎从未出现过。我尝试使用浏览器重新创建相同的内容，结果显示了#transction-feedback。 ? 下面是代码 const cheerio = require('cheerio')
const Nightmare = require('nightmare')
const nig
浏览 18提问于2019-04-22得票数 3
1回答
我试着用木偶机从这个网站上删除数据。我认为需要保留会话数据来导航站点上的不同页面。下面是我的代码，有时有些页面没有加载，并且检测到我的请求是机器人请求。
请看代码，并帮助我的会话管理时，网络刮木偶。
const puppeteer = require('puppeteer-extra')
const storage = require('node-persist');
const StealthPlugin = require('puppeteer-extra-plugin-stealth')
puppeteer.use(StealthPlugi
浏览 6提问于2022-10-07得票数 -1
这段代码应该遍历从scrapeProductPage函数中抓取的urls。但在循环之前，它需要登录才能获得价格。价格仅显示给已登录的用户。而不是遍历urls，它只返回从一个页面抓取的数据。我得到的错误是"MaxListenersExceededWarning:检测到可能的EventEmitter内存泄漏“。 const request = require("request-promise");
const cheerio = require("cheerio");
const ObjectsToCsv = require("objects-to
浏览 37提问于2020-04-07得票数 0
我正在使用puppeteer在线检索数据，并且遇到了一个问题。 两个函数具有相同的名称并返回序列化的对象，第一个函数返回一个空对象，但第二个函数包含我所针对的数据。 我的问题是，我如何继续选择函数的第二个实例，而不是返回一个空对象的第一个实例。 谢谢。 我的代码： const puppeteer = require('puppeteer');
const cheerio = require('cheerio');
const Variants = require('./variants.js');
const Feedback = requi
浏览 15提问于2020-11-27得票数 1
回答已采纳
我正在尝试下载一个文件，它下载后不工作。我得到的文件，但大小是1kb，这不是实际的文件大小。
如果使用fetchResp.text()，则无法打开文件名。
这是完整的代码。
我认为问题可能在这里:返回等待fetchResp.text()；
这是一个例子，设置cookie也很重要，因为我想下载登录后的数据。
如何处理木偶，饼干和取？
如果我把fetch函数放在page.evaluation之外怎么办。{凭据：“包括”}是否有效？
提前谢谢你的帮助。
const puppeteer = require("puppeteer");
const cheerio = require(&#
浏览 0提问于2020-04-08得票数 0
回答已采纳
2回答
当我用傀儡手打开这个页面，并尝试点击元素时，它会抛出一个错误，当它可以单击元素时。
const puppeteer = require('puppeteer');
const url = "https://www.zapimoveis.com.br/venda/apartamentos/rj+rio-de-janeiro/";
async function run() {
const browser = await puppeteer.launch({ headless: false });
const page = await browser.new
浏览 1提问于2019-09-14得票数 1
回答已采纳
1回答
我有一个场景，我需要从一个网站获得所有的社交媒体链接。如果我认为所有的社交链接都在主页上，那么每个链接都是用来获取每个社交媒体链接的。以下是代码示例：
使用cheeriojs
const cheerio = require('cheerio')
const axios = require('axios')
const https = require('https');
const agent = new https.Agent({
rejectUnauthorized: false
});
// process.env.NODE_TLS
浏览 2提问于2020-02-14得票数 2
回答已采纳
我正在用cheerio和puppeteer写一份手稿。在cheerio each循环中，我想解析一个重定向的url字段。使用Promise，我可以通过控制台记录它，但是在元数据中插入它的最好方法是什么？
实际上，我也对控制流感到困惑。
(async function main() {
const browser = await puppeteer.launch({
headless: true,
});
const page = await browser.newPage();
await page.goto('https://ww
浏览 19提问于2021-05-23得票数 0
我希望产品信息会在显示时被打印出来。但是，当前代码将显示所有已加载的项，即使它们尚未显示。
我如何修改我的代码，谢谢
// const request = require("request");
const cheerio = require("cheerio");
const puppeteer = require('puppeteer');
(async () => {
const browser = await puppeteer.launch({
headless: false // 無外殼的 Chrome，有更佳的效
浏览 5提问于2022-09-01得票数 -1
在google.com函数中，当我尝试使用傀儡机时，我会得到以下所有站点的错误，这是google.com的一个例子：
Error: net::ERR_NAME_RESOLUTION_FAILED at http://www.google.com
at navigate (/srv/node_modules/puppeteer/lib/FrameManager.js:101:37)
at <anonymous>
at process._tickDomainCallback (internal/process/next_tick.js:229:7)
-- A
浏览 0提问于2019-04-04得票数 1
回答已采纳
下面是我使用node.js使用cheerio库的web爬虫：
var request = require('request');
var cheerio = require('cheerio');
var fs = require('fs');
var urls = [];
request('http://www.reddit.com', function(err, resp, body){
if(!err && resp.statusCode == 200){
var $ = cheer
浏览 1提问于2014-08-25得票数 0
回答已采纳
3回答
node.js傀儡“文档未定义”
、、、、
我尝试使用没有id或类的代码单击按钮，但是我的终端总是用以下方式进行响应：
document.getElementsByTagName("Accept Cookies");
^
ReferenceError: document is not defined
这是我的密码：
const puppeteer = require('puppeteer');
const product_url = "https://www.nike.com/launch"
async function givePage() {
const brow
浏览 12提问于2022-03-06得票数 2
那么，我有点不知所措，为什么我拿回了这个，是因为我把信息作为文本带回来了吗？我想不管怎样，它应该仍然能够进入p标记。
在网站html上返回"function map() { native code }“之前，我有Object，Object。。。返回到HTML
index.html：
<body>
<p id="results">${results.map}</p>
<h1>demo</h1>
</body>
索引路由：
router.get('/', fun
浏览 40提问于2020-03-12得票数 0
回答已采纳
1回答
这个巴西政府提供了来自不同法庭和法院的法官的工资数据。我想下载所有的表，但是当我使用request时，引用这些表的数据不在作为响应的html中。
为了解决这个问题，我使用puppeteer和cheerio打开浏览器，等待表加载，然后使用JQuery选择器并提取数据。这是我的密码：
const puppeteer = require("puppeteer");
const cheerio = require("cheerio");
const main = async () => {
const browser = await puppeteer
浏览 0提问于2021-07-19得票数 4
我有以下代码。 这段代码打开一个浏览器，我需要用javascript检索一个特定的项目。 var express = require('express');
var fs = require('fs');
var request = require('request');
var cheerio = require('cheerio');
var app = express();
var arr2 = [];
const puppeteer = require("puppeteer");
var
浏览 3提问于2019-02-18得票数 0
我正在尝试从一个网站获得所有的段落标签使用木偶，然后从它提取文本。然而，pTags总是一个空数组，我不知道为什么。
这是我的代码。
const puppeteer = require('puppeteer')
(async () => {
const browser = await puppeteer.launch();
const page = await browser.newPage();
await page.goto('https://www.newyorker.com/news/letter-from-trumps-washington/
浏览 5提问于2018-08-23得票数 1
2回答
我的问题是，我需要设置评论选择器为“所有评论”与木偶剧演员，但评论没有渲染后，木偶表演者点击正确的按钮，“所有的评论”，评论部分只是消失，我将提供代码和视频的浏览器在行动。
const $ = require('cheerio');
const puppeteer = require('puppeteer');
const url = 'https://www.facebook.com/pg/SamsungGlobal/posts/';
const main = async () => {
const browser =
浏览 19提问于2020-05-15得票数 2
回答已采纳
2回答
所以我试着从这个房地产网站()抓取数据来提取信息，我能够获得页面上关于列表的所有信息，但使用图像(图像链接/源)，在其中一些之后，结果是一些垃圾。我试着研究，发现这是因为懒惰加载。为此，尝试了几乎所有可用的方法，其他人也回答了，但似乎没有一个有效-这包括滚动到底部，滚动延迟()，尽可能缩小浏览器以获得渲染的图像。但它仍然不起作用。我已经到处找了几个小时了，然后我决定把我的问题和代码放在这里，让其他人自己解决。
let cheerio = require('cheerio')
let puppeteer = require('puppeteer-e
浏览 22提问于2019-07-16得票数 3
我正在抓取一个网站，我正在使用Cheerio和Puppeteer。我需要用给定的文本点击某个按钮。下面是我的代码： const browser = await puppeteer.launch();
const page = await browser.newPage();
await page.goto('https://www.website.com', {waitUntil: 'networkidle0'});
const html = await page.content();
const $ = cheeri
浏览 10提问于2020-11-20得票数 0
我正在从网页上抓取数据，分页也是有效的。我有一张有tr的桌子。对于每个tr，都有位置、标题和URL。 在函数.map((index，element) => {I要调用每个tr "async url => { await page.goto(${url});“中，转到”详细信息“，从”详细信息“页中抓取数据并返回列表。 我该怎么做呢？(在.map()内调用异步) const puppeteer = require("puppeteer");
const cheerio = require("cheerio");
浏览 19提问于2019-12-11得票数 0
回答已采纳
1回答
js noob在这里
我试图创建一个网络刮刀，从预订网站的价格数据，但我不能得到我想要的数据，至少不是每次。
我正在测试这个特定的网址：
这是我每20次尝试中得到的1次：
{ prices:
[ 'Prix / nuit',
'Hébergement',
'Avis',
'Emplacement',
'Autres',
'max. 500€+',
'Bien',
'108€',
&
浏览 2提问于2019-10-10得票数 1
回答已采纳
1回答
我试图为DOM中的所有脚本找到src。页面上大约有77个脚本，木偶师返回66个脚本。如果我检查DOM，就会发现有12个带有异步属性的脚本，而这些脚本正是缺少的脚本。我们怎么才能得到他们？
Analyzer.js
Next.js页面，它基本上是从用户那里获取输入，以便站点进行抓取。
import React from 'react'
import { useState , useEffect} from 'react';
const Test = () => {
const [websiteURL, setWebsiteURL] = useSta
浏览 8提问于2022-10-12得票数 0
我试着运行这样的代码：
const login = "login";
await page.$eval('#LoginForm_username', el => el.value = login);
它在表单字段中输入一个login值。
然而，我一直有一个奇怪的错误：
错误:评估失败:在puppeteer_evaluation_script:1:19 at ExecutionContext._evaluateInternal (/home/denis/WEB/nlu/node_modules/puppeteer/lib/Execution
浏览 1提问于2019-09-08得票数 0
回答已采纳
1回答
如何检索文本区域的值
、、、、
我试图使用cheerio访问文本区域中的文本，但是它的文本没有显示在HTML Dom中。 这是文本区域的HTML： <textarea id="MainContentPlaceHolder_txtGtin-inputEl" name="MainContentPlaceHolder_txtGtin" rows="4" cols="20" readonly="readonly" class="x-form-field x-form-text x-form-textarea" autocomple
浏览 12提问于2020-01-14得票数 0
10回答
此流星代码使用“木偶师8.0.0”、“木偶师-核心10.0.0”、“木偶师-额外3.1.18”和“木偶师-外挂-隐形2.7.8"，给出了以下错误：
错误:无法在本地找到预期的浏览器(chrome)。运行npm install下载正确的铬版本(884014)。
尝试了"npm安装“，但没有结果。在线阅读，尝试从package.json依赖项中删除“傀儡-核心”："^10.0.0“，但没有效果。
任何帮助都是徒劳无功的。谢谢
const puppeteer = require('puppeteer-extra');
const nameH = req
浏览 15提问于2021-06-20得票数 23
最后，我想到了如何使用Node.js。已安装所有库/扩展。所以puppeteer可以工作了，但是和之前的Xmlhttp一样...它只获取页面的模板/主体，而不获取所需的信息。在浏览器(Web app?)中打开页面几秒钟后，页面上的所有脚本都会启动。我需要在整个页面加载后获得某些标记内的信息。此外，我会问，是否有可能拥有纯JavaScript，因为我不像代码那样使用jQuery。所以这对我来说是加倍的困难...
这就是我到目前为止所拥有的。
const puppeteer = require('puppeteer');
const $ = require('cheerio
浏览 0提问于2019-02-07得票数 13
我正在试着用node.js，cheerio和木偶师写一个抓取脚本。 我现在遇到的问题是如何让writeFile()函数正常工作。 const puppeteer = require('puppeteer');
const $ = require('cheerio');
const fs = require('fs');
const url = 'https://www.made-up-url.com/';
puppeteer
.launch()
.then(function(browser) {
浏览 26提问于2021-01-04得票数 0
回答已采纳
我一直在写一个代码来刮站点。该网站是dynamic one，所以当我单击Show 按钮时，它会加载其他用户拥有的徽章。那么，有什么方法可以让我点击那个按钮，然后等待新内容的添加，然后才能在cheerio中加载标记以进行抓取。
目前，我只是让布鲁斯特等待3秒，然后再重新点击，但这使整个过程需要很多时间，它也可能会失败，如果浏览器无法获取的时间。
那么，除了这一点，还有什么别的办法吗？请在下面找到我的代码->
const url = "https://trailblazer.me/id/akganesa";
// function to load the pag
浏览 1提问于2020-03-11得票数 2
回答已采纳
1回答
因此，我正在刮一个网站，我希望它显示数据给innerHTML，我有困难，使它的工作。我试着用
document.getElementById('results').innerHTML = searchJobs('');
但是它告诉我，文档是没有定义的，抱歉，nooby问题，但是问这个问题比被困在同一件事上45分钟更容易。
以下是代码：
function searchJobs(i) {
const url = axios.get('actualurl')
return fetch(`${url}${i}`)
.the
浏览 2提问于2020-03-11得票数 1
回答已采纳
所以我想点击网站上的一个按钮。这个按钮没有id，class，...所以我应该找到一种方法来点击上面有名字的按钮。在本例中，我应该单击名称"Supreme®/The North Face®Leather肩包“
这是我用Node.js编写的代码
const puppeteer = require('puppeteer');
let scrape = async () => {
const browser = await puppeteer.launch({headless: false});
const page = await browser.newPage();
浏览 1提问于2018-10-20得票数 4
回答已采纳
1回答
你好，我正在实现一个刮刀，它刮取在电报公共频道中收到的最新消息。html就是这样的。
我可以在节类tgme_channel_history下获取所有div。它下面有五个div，意思是五个不同的消息。我只想拿到最后一张。我怎么能这么做。您可以在这里查看活动的
const $ = require('cheerio');
const url = 'https://telegram.me/s/newlink01/';
rp(url)
.then(function (html) {
//success!
浏览 0提问于2021-03-23得票数 1
回答已采纳
我尝试从两个不同的网页中抓取数据，并在我自己的页面中显示/比较。它可以很好地显示来自一个网站的数据，但当我添加另一个URL时，它会崩溃。(好吧，仍然显示从第一个网站获得的信息，但对于第二个网站保持空白)那么如何编写代码来从多个网站获取数据？以下是代码
//modules for express, path, ejs, puppeteer, cheerio
//steup const
const express = require('express');
const app = express();
const puppeteer = require('puppetee
浏览 0提问于2020-12-03得票数 0
我尝试循环.map函数，直到满足条件为止。我想在满足条件后中断循环，但得到非法的break语句输出。我对node js和cheerio相当陌生。 async function checkproduct() {
const browser = await puppeteer.launch({headless: false});
const page = await browser.newPage();
const page2 = await browser.newPage();
const maxRetryNumber = Infinity;
let s
浏览 37提问于2021-02-12得票数 0
1回答
我正在努力学习如何使用Puppeteer来抓取一个编辑页面。新的reddit具有动态添加内容和无限滚动。我从代码中得到了非常不一致的结果，并且很难调试和弄清楚如何使它工作。
主server.js文件，这里没有太多内容。
'use strict';
const express = require('express');
const cors = require('cors');
const app = express();
const cheerio = require('./redditScraper');
app.use(e
浏览 1提问于2019-03-31得票数 2
回答已采纳
1回答
在输入查询并单击按钮后，我正在尝试从页面中提取特定的元素。该页面不导航到新的URL:它只返回我需要提取的新HTML内容。
这描述了我有多远：
const puppeteer = require('puppeteer');
function timeout(ms) {
return new Promise(resolve => setTimeout(resolve, ms));
};
const input_val = 'some query text';
(async() => {
const browser = await p
浏览 2提问于2018-06-07得票数 3
回答已采纳
我遇到了一个问题，我有一个相当简单的Node进程来捕获屏幕截图。在获取屏幕截图之前，是否可以使用Puppeteer更改HTML元素的innerText？
我已经成功地使用Puppeteer在身份验证字段中键入文本并登录到站点，但我想知道是否有类似的方法可以让我更改特定元素中的文本(使用id或类名)。
我使用的屏幕截图代码示例：
const puppeteer = require('puppeteer');
(async () => {
const browser = await puppeteer.launch()
const page = await
浏览 2提问于2018-01-30得票数 19
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
云直播
对象存储活动推荐
腾讯云开发者
