以前，相同的api工作正常，但现在它显示502坏网关。下面是我的api调用： def hit_dataprep_job(receipe_id): url = "https://api.clouddataprep.com
浏览 14提问于2021-04-14得票数 0
回答已采纳
Dataprep作业从触发器运行，该触发器在将文件写入存储桶时触发。我需要在Dataprep作业完成后立即在BigQuery上运行SQL update语句。不确定如何在Dataprep作业完成后立即运行SQL？
浏览 18提问于2021-07-20得票数 0
是否可以在google dataprep中设置，生成的数据流作业将在其中运行的区域？例如，我正在将欧洲存储桶中的CSV数据转换为欧洲的BigQuery数据集。但是数据流作业正在US-central-1中运行，情况不太好。
提前感谢您的帮助。
浏览 0提问于2017-10-06得票数 3
1回答
我们有一个dataprep作业来处理输入文件并产生一个干净的文件。可以从Python代码(远程)编辑dataprep作业的配方吗？如果是，是否可以从Python代码触发d
浏览 1提问于2018-06-15得票数 1
我正在尝试在google cloud dataprep中运行作业，但数据流作业默认选择network default。
浏览 4提问于2019-08-16得票数 0
我有一个云函数，它使用dataflow API从我使用DataPrep创建的模板创建一个新作业。我成功地从dataflow API运行了作业，数据正确地插入到bigquery表中，但是在时间戳字段中，时间戳的值总是相同的，它对应于我从其中获取模板的作业的执行时间(DataPrep模板)。当我从dataprep接口运行作业
浏览 1提问于2018-06-05得票数 2
Dataprep和Dataflow都可以用于ETL任务。事实上，Dataprep似乎使用数据流作业。这是Dataprep提供的工具与用户界面编写数据流作业的唯一区别吗？
浏览 31提问于2019-05-28得票数 1
启动dataflow.projects.locations.templates.launch(i ()函数(我也测试了"now()“函数)生成的列在作业执行期间似乎没有被求值。报告的日期始终以第一次创建模板的日期填充。
这是一个正确的行为吗？为什么没有使用作业启动日期填充该列？
浏览 1提问于2018-09-25得票数 0
有没有办法在GCS (Google Cloud Storage)文件上传时触发dataprep flow？或者，至少可以让dataprep每天运行，并从GCS中的某个目录中获取最新的文件？这应该是可能的，因为否则调度的意义是什么？用相同的输出在相同的数据源上运行相同的作业？
浏览 8提问于2018-01-27得票数 1
1回答
表中有一列，该列的值为JSON字符串。从文本文件导入到bigquery时，数据流作业运行时出现问题。作业抛出以下错误： INVALD JSON：:1:38预期的eof，但发现，"602...
浏览 23提问于2020-09-11得票数 0
好的，team...Dataprep遇到了BigQuery。我无论如何也找不到为什么在过去的5个小时里我有ZONE_RESOURCE_POOL_EXHAUSTED问题。前一天晚上，一切都很顺利，但今天，我遇到了一些严重的问题。更新：
我相信我的一些问题可能会涉及到，特别是因为它是一个以
浏览 0提问于2018-11-10得票数 2
我正在运行一个Cloud Dataprep作业，该作业已经成功运行了很多次，直到今天。有没有人可以指导我如何纠正这一点/为临时数据集设置一个位置并检查权限？此项目的trifacta服务和计算帐户拥有BigQuery中源数据集的编辑权限，还拥有Google Clou
浏览 1提问于2018-12-27得票数 2
我尝试在dataprep中使用数组类型的列，它在dataprep的显示ui中看起来很好，如下图所示。但是当我使用.csv文件运行作业输出时，数组列中存在无效值。为什么.csv输出与dataprep显示不同？
浏览 5提问于2020-09-29得票数 0
我的雇主最近开始使用Google Cloud Platform进行数据存储/处理/分析。我们是基于欧盟的，因此我们希望限制我们的云数据流作业留在该地区。我猜这可以通过--region和--zone在每个工作/每个工作模板的基础上完成，但我想知道(考虑到我们所有的工作都将使用相同的区域)是否有一种方法可以在更广泛的级别(项目或组织)上以更持久的方式设置这一点此外，google this n
浏览 1提问于2018-11-23得票数 1
3回答
我使用GCP的数据代表连接几个具有相同列结构的csv文件，处理一些数据，然后写入BigQuery数据库。
我必须将这些数据记录在BigQuery中。
浏览 7提问于2020-08-12得票数 0
回答已采纳
2回答
我将数据流式传输到BQ中，每天我在Dataprep中运行一个计划的作业，该作业需要24小时的数据，并修改一些数据，并在BQ数据集中创建一个包含24小时数据的新表。我想要做的是在dataprep制作副本之后删除表中的所有行，以便收集新的24小时数据流
我如何使其自动化，我似乎在dataprep中找不到任何可以删除原始表并创建新表的东西。
浏览 2提问于2018-11-28得票数 0
我在google dataprep中运行作业时遇到了问题。
我通过google sql上的外部数据库建立了一个连接。在大型查询中，我导入了数据库连接。我试图通过连接两个表来创建一个非常简单的流。之后，运行job。通过第一次“浏览”，我运行了一个测试作业，它工作正常。我不能让它工作，尽管帐户是所有者。我已尝试使用另一个我授予所有者权限的帐户。我在作业运行日志中看到的
浏览 0提问于2020-02-03得票数 1
作为POC的一部分，我试图通过Dataprep设置一些数据质量检查。有一个BigQuery表作为源，它应该运行一个输出到另一个BigQuery的作业。不幸的是，该作业失败并出现错误：
java.lang.RuntimeException: Failed to create job with prefix beam_load_[thenameofthejob我已经编辑了食谱，并且没有在那里设置任何转换，只是为了查看作业是否运行<
浏览 1提问于2019-08-21得票数 1
云服务器
ICP备案
云直播
实时音视频
即时通信 IM
腾讯云开发者
