1回答
在gcp中，每当文件( json、xml等多种格式)上传到存储桶中时，我都需要更新bigquery表。我有两个选择，但不确定每一个的优缺点。有人能建议一下哪个是更好的解决方案吗?为什么？方法1：方法2：
上传到存储桶的文件-->触发云函数(触发数据流作业) --> dataflow -->Big
浏览 9提问于2018-09-01得票数 2
回答已采纳
我正在寻找某种方式，在更新bigquery表时，需要通知计算引擎上的代码？类似于谷歌云存储上的对象更改通知？如果没有工作的话？我的bigquery表使用数据传输服务进行更新。
浏览 1提问于2017-06-22得票数 0
回答已采纳
自从几天前Google更新Bigquery以来，我遇到了一个计划查询的问题。通常，我每天都使用它们来更新不同的表。因此，在我的查询中，我写了“插入到表中，选择前一天的数据”
有些查询很复杂，我在循环中更新表，多次添加行。但现在我做不到，并得到了一个错误-‘错误代码3:无效的值:不能为脚本设置configuration.query.destinationTable；
浏览 2提问于2021-01-14得票数 0
我想以编程方式(通过API/SQL)在Bigquery表中插入/更新记录。Bigquery支持这一点吗？
浏览 1提问于2013-07-02得票数 0
是否可以限制dataset表上的DDL语句？例如，我希望限制用户向特定数据集的任何表中添加列的能力。
浏览 4提问于2021-03-31得票数 0
回答已采纳
我有100多万条数据记录，我希望通过去标记字段，然后输入到日期分区的GBQ表中来进行转换。日期可以追溯到2001年。我本来希望我可以用Python来转换它，然后从脚本中直接使用GBQ来完成这个任务，但是在阅读了这个，特别是之后，创建日期分区表似乎不那么直接。我在找一只方向正确的牛。更新
我不确定是否遗漏了什么，但创建的表似乎是按照创建表时的插入日期进行分区的，并且希望按照现有数据集中的日期进行分区。
浏览 7提问于2017-09-26得票数 3
回答已采纳
我面临的问题是，JSON文件上的时间戳采用Unix时代的时间戳格式，而大型查询无法检测到：
所以我想知道该怎么办？在将JSON格式加载到BigQuery表之前，我考虑过手动更改JSON格式。我在网上寻思，还找不到任何有用的东西。
提前感谢您的支持。
浏览 3提问于2020-09-14得票数 0
回答已采纳
1回答
Foo的名为my_label的标签。那么，我想要做的就是删除那些错误作业的元数据。因此，我在BigQuery中尝试了这个查询(具有适当的权限)：对于以这种
浏览 13提问于2022-07-27得票数 1
3回答
我们正在进行一个涉及大量数据的项目。现在我们最近读到了Google BigQuery的内容。但是我们如何将数据导出到这个平台呢？我们已经看到了将日志导入Google BigQuery的示例。但这不包含有关更新和删除数据的信息(仅插入数据)。
所以我们的对象能够更新它们的数据。而且我们对BigQuery表的查询数量有限。如何在不超过BigQuery
浏览 3提问于2017-04-06得票数 3
回答已采纳
1回答
理解大查询表
、、
我仍然在学习大查询，我还有一些关于数据集和表是如何工作的问题。我运行了一个查询并将结果保存到一个BigQuery表中。现在，这个表是我所提取的数据的快照吗?或者，如果新的数据与原始查询相匹配，表会更新吗？谢谢你的
浏览 0提问于2018-11-12得票数 0
回答已采纳
我需要在BigQuery中(以编程方式)分析预定查询的细节(例如，哪些表被更新，哪些表被访问)。我已经使用Apps Script BigQuery.Tables.list()对BQ表/视图执行了类似的操作，但我找不到一个API来访问计划的查询。UI能够列出它们，所以我觉得这应该可以通过编程的方式，例如通过REST API来实现。有没有人知道这是否可能，支持什么接口(Apps脚本，REST
浏览 18提问于2019-04-18得票数 5
回答已采纳
作为Bigquery解决方案的一部分，我们有一个cron作业，它检查在dataset中创建的最新表，如果该表不在date.This，则将创建更多的表。__TABLES_SUMMARY__] WHERE table_id LIKE 'table_root%' ORDER BY creation_time DESC LIMIT 1
我们的集成测试最近一直在抛出错误，因为这个查询击中了Bigquery的
浏览 3提问于2016-01-19得票数 1
回答已采纳
1回答
对于ETL过程，我还使用了Spark.This支持不同的摄入模式:插入新记录、插入以及更新以前的数据。
对于“服务层”，我们使用了Presto。同样，有了DeltaLake这样的新技术，就可以保持几乎相同的体系结构，以统一的方式支持流处理和批处理。Service层“是BigQuery表”。“处理层”到Bigquery是用BigQuery performance.的
浏览 3提问于2020-10-05得票数 0
回答已采纳
我创建了一个来使用Google服务将数据从BigQuery导出到雪花。我看到了一些问题，因为原始数据源是Firebase。Firebase导出分析数据的方式在名为analytics_{GA_project_id}的数据集中，事件被发送到名为events_{YYYYMMDD}的分区表中。该管道运行顺利，但几天后，我注意到，运行差距分析，有更多的数据在BigQuery (有时约3% )比雪花。我已经用Firebase和提出了一张罚单，他们确认有一些事件会被
浏览 5提问于2022-01-24得票数 1
回答已采纳
我是BigQuery的新手，而且还在努力奋斗。在SQL中，ALTER可以添加、删除列。但在BigQuery中，它表明我无法修改外部表(从驱动器导入)。有人能帮忙吗？如何更改外部表？
试图使用。
浏览 3提问于2022-11-09得票数 1
1回答
我在bigquery中有一个视图，其中包含来自不同数据集和表的字段，现在我想通过我的google脚本查询此视图。这样做的正确方法是什么？实际上，目前我已经在bigquery中创建了一个单独的表，并查询该表而不是view，但我需要view，因为view将在依赖表更新时更新。如果我使用的是表，它工作得很好，但在视图中，我得到了下面的
浏览 0提问于2016-05-23得票数 1
我是bigquery的新手。我从gcp控制台创建了bigquery表，其中使用GCS CSV文件作为数据源。我认为当我删除任何行时，也应该将其从GCS文件中删除。但实际上，这种情况并没有发生。
浏览 22提问于2020-06-22得票数 0
我在BigQuery中有几个表，它们都来自Google表。当Google表被更新时，BigQuery中的表也会自动更新。我正在试图了解此事件的日志在操作日志中的样子。我的最终想法是创建这些日志的接收器，以便创建Pub/Sub，并根据这些事件运行预定的查询。
谢谢
浏览 3提问于2021-12-19得票数 0
我想将1 TB的数据从Redshift迁移到BigQuery，这些数据分布在大约100个表上。
是否有任何工具可用于此数据迁移？如果像“pgloader”这样的东西(用于从MySQL迁移到PostgreSQL)是可用的，那么它会节省很多时间吗？
浏览 2提问于2016-09-23得票数 5
回答已采纳
谷歌的烧烤配额政策表明，每个项目的负荷上限为10,000。如何查看最近一天执行的负载请求的数量？而且，这个配额是在什么时候重新设定的？
谢谢。
浏览 2提问于2013-12-11得票数 9
回答已采纳
云服务器
ICP备案
腾讯会议
云直播
对象存储
腾讯云开发者
