腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
通过
Apify
阅读
简单
的
CSV
我想在
Apify
中创建一个日常任务,它读取这个非常
简单
的
csv
:并将数据解析到Google Sheets。我是一个
Apify
初学者,我想知道如何用几行代码就能做到这一点。 来自柏林
的
最佳
浏览 6
提问于2020-03-09
得票数 0
2
回答
将CVS从web保存到应用Dataset
、
const
Apify
= require('
apify
'); console.log('My output:'); console.log(html);await
Apify
.setVa
浏览 7
提问于2020-01-01
得票数 1
回答已采纳
2
回答
为什么"context.
Apify
“没有定义
、
、
我正在学习如何在
Apify
Web-Scraper中使用request,我不明白它是如何工作
的
。 我首先用Postman做了这件事,我确实得到了我想要
的
结果,现在我想在
Apify
上做同样
的
事情。const request = new context.
Apify
.Request({ method: 'POST', p
浏览 20
提问于2019-09-02
得票数 0
回答已采纳
1
回答
SyntaxError:等待仅在带有
Apify
元形态
的
异步函数中有效
我正试图用一个非常
简单
的
例子来获取
Apify
的
:const request = require('request-promise');
Apify
.main(async () => { startUrls: [{url: "http://example.org"
浏览 0
提问于2019-07-26
得票数 0
回答已采纳
1
回答
检查任何进程执行过程中
Apify
的
状态
、
、
让我们假设服务器const express = require("express");
Apify
.main(async () => { // Let the actor run for an hour.await
Apify
.u
浏览 0
提问于2020-12-21
得票数 0
回答已采纳
2
回答
如果运行成功,则下载最新结果
我想知道,如果运行成功,如何使用curl从
Apify
下载最新结果。目前我使用
的
是: curl "https://api.
apify
.com/v2/actor-tasks/SECRET/runs/last/dataset/items?token=SECRET&format=
csv
&clean=1" -o latest-result.
csv
这是相当愚蠢
的
时刻,它是下
浏览 14
提问于2020-02-03
得票数 0
2
回答
如何阻止
Apify
保存已处理
的
请求?
、
、
看起来
Apify
将处理过
的
请求保存在“已处理”目录中。我想停止这个操作,因为
apify
不会抓取我之前抓取过
的
页面。有人知道如何阻止
Apify
保存已处理
的
请求吗?
浏览 25
提问于2020-10-21
得票数 0
回答已采纳
1
回答
apify
-cli中是否有Pull命令?
、
、
、
、
正如我所看到
的
,在这个链接中
的
Apify
-cli文档中:https://docs.
apify
.com/cli 有一个命令可以将本地代码源推送到远程代码源(
Apify
cloud)。是否有反向操作
的
命令,从
Apify
cloud到local,(就像Git中
的
pull命令)? 还是必须
通过
复制粘贴手动完成? 谢谢!
浏览 15
提问于2020-09-25
得票数 0
1
回答
如果设置了
APIFY
_DEFAULT_DATASET_ID,则找不到默认数据集
Apify
documentation 解释说,默认数据集可以
通过
设置环境变量
APIFY
_DEFAULT_DATASET_ID来命名。我
的
代码出了什么问题?Wulfgäää干杯process.env.
APIFY
_DEFAULT_DATASET_ID = datasetName;log.info(`
AP
浏览 23
提问于2019-10-20
得票数 0
1
回答
如何将任何URL传递给
APIFY
任务?
、
、
在
APIFY
中有一个用于配置“开始URL”
的
框,但是如果我不知道开始URL,并且它依赖于我
的
用户输入,会发生什么呢?我希望能够将变量URL传递给"Start URL“ 我想
通过
APIFY
任务自动传递任何URL,然后将其丢弃。我试着让它自动
通过
Zapier,在配置中可以选择URL输入并将其传递给
APIFY
,但最终它停止了任务,因为无法读取传递
的
格式。来自Zapier<
浏览 13
提问于2020-02-14
得票数 0
回答已采纳
1
回答
Apify
-将JSON输出保存到key-store-value
、
、
如何将此脚本
的
JSON输出保存到
Apify
中
的
key-store-value?当我运行脚本时,一切正常,数据集显示了每种类型
的
抓取数据,但是key-value-store/Keys仍然是空
的
。有什么
简单
的
命令可以帮我做到这一点吗?下面是我
的
Actor代码: const
Apify
= require('
apify
');
Apify
.main(async () =>
浏览 6
提问于2020-09-11
得票数 0
1
回答
如何在Google云功能上使用
Apify
、
、
我正在部署一些使用
Apify
作为Google函数
的
代码。当触发时,云函数将无声地终止。我做错了什么?下面我用更
简单
的
代码重现了这个问题。虽然本例并不严格要求
Apify
,但我希望能够使用
Apify
提供
的
额外功能。
浏览 0
提问于2019-07-10
得票数 0
回答已采纳
1
回答
从多个sitemap.xml文件中抓取urls
我正在为一个页面构建一个
apify
参与者,其中所有所需
的
urls都存储在不同
的
sitemap.xml文件中。文件名是静态
的
,但不知道如何向参与者添加多个sitemap.xml文件。下面是带有一个xml文件
的
工作代码。不知怎么
的
,需要在多个url上做一个for -每个url,但是由于有大约600个url,最好是从
csv
中提取所有的站点地图,然后逐个抓取url,然后抓取每个url。const
Apify
= require('
apify<
浏览 0
提问于2019-08-27
得票数 1
回答已采纳
1
回答
应用从sitemap.xml中抓取urls
、
Apify
可以从sitemap.xml抓取链接 const requestList= new
Apify
.RequestList({ sources: [{ requestsFromUrl: 'https://edition.cnn.com/sitemaps/cnn/news.xml
浏览 0
提问于2019-08-20
得票数 3
回答已采纳
1
回答
将cookie从Actor传递给Crawler
我用我想要抓取
的
URL设置了一个爬虫,演员正在工作,我用cookie/截图示例进行了测试。我只是在演员和爬虫之间传递cookie时遇到了问题: const
Apify
= require('
apify
'); const input= await
Apify
.getValue('INPUT'); const browser = await
Apify
.launchP
浏览 26
提问于2019-05-10
得票数 0
3
回答
最好
的
办法是在做完之后再刮一次。
、
、
目前,我有一个请求队列中
的
所有30个urls (
通过
Apify
web-接口),并且我试图查看它们何时全部完成。 let pendingRequestCount = await queue.getInfo(); 最明显
的
原因是,在我把所有的东西都发送给DB之前,我需要确保我有所有30个擦伤
的
浏览 2
提问于2019-08-13
得票数 2
回答已采纳
2
回答
使用
Apify
木偶抓取器访问和循环外部数据源
、
Apify
Puppeteer Scraper不会在context object中公开jquery。我需要访问木偶刮板pageFunction中
的
一个外部JSON数据源,然后在其中一个节点上循环。
浏览 15
提问于2019-12-29
得票数 0
回答已采纳
2
回答
如何使用
Apify
登录到网站并单击按钮?
、
、
Zapier 2.登录一旦
通过
身份验证,目标页面就会出现。它有一个按钮条,包括按钮"Activate“(button
的
子span文本必须是”激活“,如果我们被允许点击它)。如何让<
浏览 1
提问于2019-10-03
得票数 3
1
回答
使用木偶时,快门停止收听
、
、
我目前正在编写一个
简单
的
API,它正在
通过
Puppeteer执行操作,但是,当我试图执行我
的
脚本以便访问API时,我
的
Express应用程序似乎在Puppeteer打开后停止了侦听吗?这是我
的
剧本:const puppeteer = require('puppeteer-extra'); const RecaptchaPlugin(async ()
浏览 1
提问于2020-06-13
得票数 0
回答已采纳
1
回答
关于代理轮换
的
几个问题
我已经
通过
使用PuppeteerCrawler开发了一个爬虫动作,目前使用
的
是min。还有麦克斯。并发性1和我有几个问题:最佳毕业生,Wulfg ng
浏览 1
提问于2019-10-29
得票数 0
点击加载更多
热门
标签
更多标签
云服务器
对象存储
ICP备案
云点播
实时音视频
活动推荐
运营活动
广告
关闭
领券