有没有可能在BigQuery中对数组进行UNNEST，这样嵌套的数据就可以按键值拆分为多个列？

文章/答案/技术大牛

发布

1回答

google-bigquery

假设我在BigQuery中有一些数据，其中包括一个嵌套的对象数组，如下所示： { "age": "24", }, "index": "3", "value":

浏览 12提问于2019-05-20得票数 1

回答已采纳

2回答

Azure Data Google BigQuery复制数据活动不返回嵌套列名

azure、google-bigquery、azure-data-factory、azure-data-factory-2、azure-databricks

我有一个复制活动在Azure数据工厂与谷歌BigQuery的来源。我需要导入整个表(其中包含嵌套字段-BigQuery中的记录)。嵌套字段按如下方式导入(仅包含数据值的字符串)： "{\"v\":{\"f\":[{\"v\":\"1\"},{\"v\":\"1\"},{\

浏览 4提问于2021-09-15得票数 2

回答已采纳

1回答

在Bigquery中卸载多个数组并再次聚合

arrays、google-bigquery、unnest

我试图在Bigquery中卸载多个嵌套数组，对它们进行筛选，并将新的数组重新组合在一起。我的问题是，我最终得到的是重复的值。示例数据：该图像有两个示例数据行，其数组“供应商”包含两个数组“主题”和“类别”。我想在vendor.topic.score >= 0.8、vendor.categori

浏览 1提问于2020-05-02得票数 1

回答已采纳

1回答

在BigQuery中使用SQL创建嵌套/重复字段，可以使用点符号(不使用UNNEST)进行查询。

arrays、json、struct、google-bigquery

我正在尝试使用SQL在BigQuery中构建一个数据结构，它准确地反映了我上传JSON时获得的数据结构。如果我用几行构建一个非常简单的虚拟数据集，然后使用ARRAY_AGG(STRUCT(字段列表))模式进行嵌套： WITH SELECT "attributes.data_thing att

浏览 23提问于2019-10-03得票数 0

回答已采纳

1回答

如何使用时间分区表与模板表和超过4000限制的BigQuery？

google-bigquery

这样，我就可以使我的表比仅仅使用分区表更小，从而使我的查询更具成本效益。而且，无论我的系统中有多少用户，我的每个用户的查询成本都保持不变。根据的文档若要按日期创建较小的数据集，请使用时间分区表.若要创建不基于日期的较小表，请使用模板表，BigQuery将为您创建这些表。关于我以上提议的体系结构，还有一个问题是我在上看到的4000限制。是否意味

浏览 0提问于2018-07-24得票数 3

回答已采纳

2回答

如何在BigQuery中通过连接两个非嵌套表来创建嵌套表？

google-bigquery

我有一种情况，需要在BigQuery中通过连接两个普通表来创建嵌套重复的表。这里是上下文，我的输入表数据如下:在下面的数据中，v_no是一列，而crit是包含更多数据的另一列。应该为每6个字符拆分cirt列(我在下面的查询中对其进行了编辑)。预期的输出应该是这样的<

浏览 21提问于2021-04-04得票数 0

回答已采纳

1回答

仅扫描筛选行的列

google-bigquery、bigquery-standard-sql

使用BigQuery是否可以只扫描满足某些条件的那些行的列？请考虑：想象一下，一半行的col1等于text1，另一半行等于text2。使用上面的查询，BigQuery将扫描整个表的col1和col2，然后通过where子句过滤掉行。 有没有一种方法可以在行被过滤后读取col2？

浏览 21提问于2019-08-15得票数 1

回答已采纳

2回答

使用从另一个数组派生的项创建一个新数组

arrays、postgresql、type-conversion

给定一种类型的项的PostgreSQL ARRAY，如何创建一个新数组，其中每个项都是从初始数组中的项派生出来的？ duration_second

浏览 3提问于2017-02-23得票数 0

回答已采纳

1回答

Angular:打印出存储在数组中的键值对

angular、typescript、pipe、key-value

在我的Angular项目中，我从未排序的后端获取数据。数据以JSON格式的键值对形式出现。今天，我只使用keyvalue管道将键和值拆分为两列。我仍然希望这样做，但我希望数据以特定的顺序排序。我选择使用数组来按正确的顺序放置数据。(自定义管道)问题是我不知道如何获取存储在此数组中</e

浏览 21提问于2020-04-15得票数 0

回答已采纳

1回答

不分组的嵌套数组中的BigQuery选择和别名字段

sql、arrays、google-bigquery

我在一个BigQuery表中有一些数据，其中一个字段是一个结构数组。我试图在本质上做一个SELECT *，但是给数组中的嵌套字段起别名。下面是一个简单的例子： with array_of_records as ( 'field1' as regular_field, array_entry.field_2

浏览 26提问于2020-01-09得票数 0

回答已采纳

1回答

PostgreSQL中索引的运算符类

postgresql、indexing、operators

如何了解PostgreSQL中已创建的索引使用了哪个运算符类？

浏览 0提问于2012-09-11得票数 1

回答已采纳

1回答

从现有数组值创建多维子数组

php、arrays、sorting、nested

简而言之，我们从数据库中提取信息，并希望使用一些结果列创建嵌套数组，并按它们的值进行排序和分组；Array ( [0] => Array，由“嵌套”命名类型列的数量来对X层进行深度分组。注意这里“嵌套”的命名方案只是例如，实际的</

浏览 4提问于2013-11-19得票数 0

1回答

Elasticsearch性能对选择索引映射结构的影响

performance、elasticsearch、memory

elasticsearch中，这样我就可以基于timerange、status或paramType进行查询。正如前面提到的here，我可以将datapoints或batch定义为嵌套数据类型，这将允许对数组中的对象进行索引。另一种方式，我可能认为是通过将结构划分为单独的文档。如果我选择第二种方法，我知道batch数组和10-15 paramsT

浏览 18提问于2019-04-14得票数 3

回答已采纳

1回答

将列表数组拆分为指定的子数组

python、pandas、numpy、xgboost

用于测试列车的分裂阵列我在这里的目标是将列划分为独立变量和因变量组，并在其上运行测试培训。我能够将dataframe转换为一个列表数组这实际上给出了每一行中每个值的列表。如果我要在这个数组上使用np.split()来尝试划分成组，它将只将

浏览 1提问于2022-04-21得票数 0

1回答

将字符串类型元素数组转换为键值对的映射。

python、apache-spark、dictionary、pyspark

我试图解析包含调用数据的日志文件的内容。..。我需要创建一个映射列，其中包含上面字符串数组中的所有键值对，这样我<e

浏览 2提问于2021-04-06得票数 0

3回答

如何在Bigquery中找到相似的字符串值

sql、google-bigquery

我的数据库中有两个表，每个表都有带有名称的列。如何比较这些表列，以及如何找到这些名称--这些名称与table1和table2中相似的名称--有确切的匹配项和名称？

浏览 9提问于2021-12-08得票数 2

回答已采纳

2回答

两个DynamoDB扫描数据段是否可以包含相同的哈希键？

amazon-dynamodb

我正在扫描一个很大的表(> 1B个文档)，所以我使用并行扫描(每个worker使用一个段)。有人知道DynamoDB在这种情况下是如何表现的吗？谢谢

浏览 0提问于2020-06-23得票数 2

2回答

使用Flatten从包含多个嵌套变量的bigquery表中选择var1 (非重复)= "abc“的位置？

google-analytics、nested、google-bigquery、flatten

我对BigQuery相当陌生(在没有训练的情况下使用它的第三天)，我只是想让我的头在嵌套的字段中游刃有余。发现children_age和citiesLived_place全名，年龄，性别，Children.name，children.age约翰·无名氏- 22 -男性-简上面

浏览 4提问于2017-02-03得票数 3

回答已采纳

1回答

Postgres，‘`where`’条件，按第一列排序，但我不想那样

postgresql、sorting

我在Ubuntu上使用PostgreSQL 11.5我使用了带有联接表和where条件的sql，该条件如下所示。) to stdout (format csv, quote '"');谢谢。

浏览 0提问于2019-08-29得票数 0

回答已采纳

1回答

根据vcf文件中的替换列重新排序变量效果

r、dplyr、vcf-vcard

我有一个包含逗号分隔的变异等位基因列("alt")的vcf文件，以及另一列，它具有预测的效果("info")。(有关数据below示例，请参阅下面的dput()结构。)然而，由于任何原因，变量效应预测软件以随机顺序输出效果，而不是相同的顺序，变量列在"alt“列中。我只想从每个变量效果字段中提取某些信息(真正的文件在这个字段中有很多我不需要的

浏览 5提问于2019-11-19得票数 0

回答已采纳

点击加载更多