对BigQuery中嵌套字段的查询是否仅将子字段的大小计为按需定价中的“已处理数据量”？

文章/答案/技术大牛

发布

2回答

google-bigquery

另一种可能是“已处理数据量”具有顶部的大小，包括STRUCT/RECORD类型，即使只选择了STRUCT/RECORD列的一个子字段。在线doc有"0字节+所包含字段的大小“，这对我来说并不明确。

浏览 72提问于2020-08-15得票数 0

1回答

对BigQuery表数据的定价

google-bigquery

我想澄清一个关于收费或定价的疑问。BigQuery是否在以下场景之一收费：-2)如果我的查询从100 GB返回90 GB的结果集。在这种情况下，检索的数据量。谢谢。

浏览 1提问于2012-11-01得票数 0

回答已采纳

2回答

谷歌BigQuery是否按处理时间收费？

google-bigquery

我运行了一个查询，它当前的速度接近12000秒，但它告诉我，除了处理的数据之外，This query will process 239.3 GB when run.是否按时间收费？

浏览 4提问于2020-03-29得票数 0

2回答

BQ不会降低查询成本

google-bigquery

因此，基本上在运行子查询以从params表中获取日期参数之后，我将在包含数据的表上运行查询，并根据提供的过滤条件尝试降低查询成本。不幸的是，BQ引擎无法降低查询成本(即使应用了过滤条件，它也会读取整个表)。有什么想法和变通方法吗？

浏览 0提问于2021-02-22得票数 0

1回答

如何优化

sql、google-bigquery

我最近发现了Google，它是开放的数据集。在对311_service requests数据集中的new_york表执行以下查询后，云控制台将bytes billed报告为130 MB。SQL查询：查询返回：| 9 | 3798

浏览 0提问于2018-11-21得票数 0

回答已采纳

1回答

BigQuery中记录类型与扁平表的查询性能

google-bigquery

我有一个包含"orders“和"order line”的表，它们以JSON的形式出现，在中以JSON的形式存储它非常简单。我可以运行一个进程将文件展平为行，但这是一种负担，而且会使BigQUery表变得更大。 BigQuery的最佳性能结构是什么？假设我对sum或products以及订单行中的销售额有疑问。记录列中“记录”(或“订单行”)<em

浏览 0提问于2012-11-02得票数 3

1回答

谷歌BigQuery中深度排序的广义透视表

sql、google-bigquery

这是的后续问题，在这个问题中，我想知道是否可以使用单个查询在Google BigQuery中构造嵌套的枢轴表。是的，所以在这个后续问题中，我想探讨一下一般情况。下面是我正在使用的数据的一个示例(也包含在这个共享中)：现在，我想构建一个具有以下属性的枢轴表：在行级和类级嵌套级别(上一个问题仅包含嵌套-cols)。行和科尔之间的<e

浏览 5提问于2017-02-17得票数 0

回答已采纳

1回答

Google Dataflow -关于数据有限的流式管道的定价的澄清

streaming、google-cloud-dataflow、apache-beam

我对一些围绕流媒体的数据流定价感到有点困惑：现在，

浏览 6提问于2022-08-16得票数 0

回答已采纳

2回答

在Power中使用BigQuery重复/嵌套字段

google-bigquery、powerbi

问题:当使用重复/嵌套字段将Power BI连接到BigQuery表(使用本机BI连接器)时，这些字段不会出现在Power BI中以用于报表创建。Power连接到这个BigQuery表时，我只得到几个字段(参见下面)据我所知，这是因为Power查询连接器不支持重复/嵌套或记录字段。问题:在构建Power报告时(特别是在本机Power查询连接器上使用动

浏览 0提问于2018-04-25得票数 1

5回答

BigQuery表的索引

cloud、google-bigquery

我有一个用例，其中我们在BigQuery中有几个表。现在，我想在BigQuery表中的一个列上实现一个索引。但我找不到足够的文件来做这件事。我发现一些博客和帖子提到BigQuery不支持索引。请帮我找到一个博客或帖子，可以帮助我在BigQuery上实现索引。提前谢谢。

浏览 3提问于2015-02-19得票数 18

回答已采纳

3回答

有办法增加BigQuery中查询的分配内存吗？

google-bigquery

我有一个大表(大约5900万行，7.1GB)已经按我的需要排序了，我想查询这个表，并为表的每一行获取一个row_number()。不幸的是，我得到了错误查询执行期间超出的资源:无法在分配的内存<e

浏览 1提问于2019-05-16得票数 5

1回答

谷歌BigQuery价格优化

google-bigquery

我使用Google BigQuery在我的应用程序中存储用户数据活动。我对这张表做了很多查询。我知道，BigQuery是由您在每次查询中使用的数据量来确定的。即使我使用相同的

浏览 3提问于2016-11-07得票数 1

回答已采纳

1回答

可以在BigQuery中划分嵌套表吗？

google-bigquery、partitioning、denormalization

我目前正在将数据仓库迁移到BigQuery中。我一直试图去美化数据库，因为我已经读到它可以带来更高效、更便宜的查询。然而，这导致了许多嵌套表。如果每个嵌套表都有一个列"created_at“和"last_modified_at"，那么是否可以使用这些值中的任何一个来对表进行分区？

浏览 3提问于2021-12-02得票数 1

回答已采纳

2回答

Bigquery价格变动？

google-bigquery

我们已经运行了大约4个月的BigQuery，我们有一些关于价格的有趣观察和问题：如果我在查询中重用相同的子查询，这是新的数据处理，而

浏览 10提问于2013-04-22得票数 5

回答已采纳

2回答

将列及其数据附加到BigQuery表

google-bigquery

我已经成功地使用此BigQuery表向表添加了一列。这只更新了模式，但我也希望填充新添加的列的字段。有办法吗？谢谢！

浏览 1提问于2015-05-18得票数 4

回答已采纳

1回答

BigQuery中的分区是如何工作的？

google-bigquery、partitioning

大家好:我正在尝试了解分区表是如何工作的。我有一个12.9MB的销售表。我有一个按天分区的日期列。我的假设是，当我使用这个date列过滤数据表时，BigQuery处理的数据量将会得到优化。然而，它似乎不是这样工作的，我想了解其中的原因。在下面的查询中，我使用子查询过滤sales.date。当我尝试这样执行查询时，它正在处

浏览 0提问于2020-10-12得票数 1

2回答

Azure Data Google BigQuery复制数据活动不返回嵌套列名

azure、google-bigquery、azure-data-factory、azure-data-factory-2、azure-databricks

我有一个复制活动在Azure数据工厂与谷歌BigQuery的来源。我需要导入整个表(其中包含嵌套字段-BigQuery中的记录)。嵌套字段按如下方式导入(仅包含数据值的字符串)： "{\"v\":{\"f\":[{\"v\":\"1\"},{\"v\":\"1\"},{\

浏览 4提问于2021-09-15得票数 2

回答已采纳

2回答

totalBytesBilled不同于totalBytesProcessed

google-bigquery

我正在使用streak BigQuery developer工具，并注意到了“查询成本”中的一些常见行为。来自BigQuery资源：这两个属性的描述相当模糊.优化查询以最小化&quo

浏览 7提问于2015-09-17得票数 10

回答已采纳

2回答

BigQuery从查询中创建重复记录字段

google-bigquery

是否可以在BigQuery中创建重复记录列？| b | c || 1 | 5 | 2 || 1 | 3 | 1 || 2 | 2 | 1 | 以下是可能的吗

浏览 3提问于2016-01-11得票数 11

回答已采纳

2回答

用于仪表板后端的BigQuery与Cloud

google-bigquery、google-cloud-sql

我没有多少BQ中的Gbs行数据，需要在这些数据上构建web仪表板(SQL与多个表的联接)。因此，查询速度和可靠性是主要目标。谢谢!

浏览 8提问于2020-08-23得票数 18

回答已采纳

点击加载更多