如何在BigQuery中的SQL查询中将这些行链接在一起？(我认为这需要CTE递归，而BigQuery似乎不喜欢...)

文章/答案/技术大牛

发布

2回答

sql、recursion、common-table-expression、recursive-query

非常感谢您的帮助。在这一点上被难住了！我是SQL的新手，但我觉得BigQuery在这方面帮不了我。您可以看到它们是通过子ID的“链”链接在一起的。A是"master“对象。我希望在这个表中有一个新的列，它为链接的对象(称为P1-Obj)返回"A“(或等效的)。我需要这个<

浏览 7提问于2019-07-10得票数 0

回答已采纳

1回答

递归公用表表达式:为什么使用UNION ALL？

sql、sql-server、postgresql、common-table-expression、recursive-query

递归CTE包括锚查询和递归查询。锚点首先选择一行或多行，然后递归选择其余行。这些行与UNION ALL子句组合在一起。如果两个内部查询不返回相同的行，为什么需要将它们与UNION ALL子句组合在一起，而不仅仅是UNION？据我所知，UNION ALL的目的是包含重复

浏览 1提问于2020-02-16得票数 0

2回答

如何为每个具有(项目级别查看器)角色的人限制BigQuery的数据集访问

google-cloud-platform、google-bigquery、google-iam、google-cloud-iam

我希望限制对BigQuery中的一个数据集的访问，以便除一个用户(我)之外没有人能够查看该数据集。从文档中看，这似乎是不可能的，除非我更改项目级别的权限并从其中删除Editor角色。目前，N(10-12)在我的Google项目上有项目级的Editor访问。它们都不时地与多个服务交互。我希望保持这种状态，或者至少有一个具有几乎相同权限的新角色。根据

浏览 3提问于2019-12-27得票数 3

1回答

BigQuery -如何考虑查询优化时，从Server背景

sql、optimization、google-bigquery

我有一个背景，包括Server和Informix数据库查询优化(非大数据)。我对如何在这些系统上最大限度地提高数据库性能有信心。我最近一直在使用BigQuery和大数据(关于9+几个月)，而优化似乎不一样。我做了一些研究并阅读了一些关于优化的文章，但我仍然需要更好地理解如何在BigQuery上进行优化的基础知识。当我在为专栏引入

浏览 1提问于2019-07-23得票数 1

回答已采纳

1回答

如何使用、steam_id、event_name过滤器在power bi中编写查询以查找过去28天的火灾事件详细信息？

firebase、google-bigquery、firebase-analytics

firebase控制台及其first_open输出Firebase.console first_open 8,787- 8,575 -select platform, count(s.platform) from (SELECT * FROM `Table.events_*` where event_name = "first_openstream_id = "

浏览 1提问于2020-01-01得票数 0

回答已采纳

3回答

改进SQL查询以查找起始日期和结束日期之间的范围

python、sql、google-bigquery

我正在处理一个名为international_education的数据库，该数据库来自bigquery-public-data的world_bank_intl_education数据集。country_name indicator_name value 我的目标是与人口增长变化最大和最小的国家我在下面使用两个分区完成了这一工作，找到了每个国家

浏览 4提问于2020-01-30得票数 0

回答已采纳

2回答

BigQuery对亚马逊红移的利弊

google-bigquery、amazon-redshift

将Google BigQuery和Amazon进行比较，可以发现两者都可以满足相同的需求，主要是根据成本计划而有所不同。看起来Redshift在配置(定义键和优化工作)方面比Google BigQuery要复杂得多，而Google BigQuery在加入表方面可能有问题。有没有谷歌BigQuery和亚马逊红移的利弊清单？

浏览 3提问于2014-10-13得票数 17

1回答

谷歌BigTable的模式设计

google-cloud-platform、google-bigquery、bigtable

在我的项目中，我使用的是谷歌BigQuery，它保存了大量的数据。BigQuery列是： account_id，session_id，transaction_id，用户名，事件，时间戳。在我的仪表板中，我根据时间戳(最后30天)获取整个数据。因为我有非常大的数据，所以性能非常慢(获取最后30天的数据需要13秒)。最近，我

浏览 3提问于2022-05-25得票数 0

3回答

如何使用bigquery运算符将查询参数传递给sql文件

airflow、google-cloud-composer

我需要访问BigqueryOperator在sql文件中传递的参数，但是我正在获得下面代码中使用的错误ERROR - queryParameters argument must have a type<class 'dict'> not <class 'list'>：task_id='bq_fro

浏览 0提问于2019-05-24得票数 3

回答已采纳

4回答

在S3或Redshift中摄取谷歌分析数据

google-analytics、amazon-redshift、etl、google-analytics-firebase、data-ingestion

我正在寻找可供选择的摄取谷歌分析数据(历史数据以及)到红移。欢迎对工具、API的任何建议。我在网上搜索，发现Stitch是ETL工具之一，如果您有此选项，请帮助我更好地了解该选项和其他选项。

浏览 1提问于2019-02-27得票数 2

回答已采纳

2回答

无法在BigQuery中使用通配符加入

sql、google-bigquery、left-join

我正尝试在大型查询中连接两个表，Table1包含一个ID列，Table2包含一个具有相同ID或多个ID的列，这些列的形式是以逗号分隔的长字符串，如"id123，id456，id678“ 如果Table1.ID = Table2.ID，我可以将表连接在一起，但这会忽略Table1.ID是Table2.ID中多个if之一的所有行。on concat(

浏览 5提问于2018-02-06得票数 0

回答已采纳

2回答

在BigQuery中循环遍历数据

google-bigquery、user-defined-functions

我们已经非常努力地尝试在(标准sql) BigQuery中循环数据，但没有成功。我不确定是因为sql支持的功能、我们对问题的理解，还是我们想要在BigQuery中这样做的方式。我们认为的另一种方式是使用UDF，我们将日期间隔列表提供给函数，然后我们的函数将对每个间隔应用朴素的查询(用于计数)，返回间隔和该间隔的</em

浏览 1提问于2017-07-14得票数 4

回答已采纳

1回答

大表与大查询对timeseries数据的使用

google-bigquery、bigtable、google-cloud-bigtable

我希望在大表和大查询上最后确定我对timeseries数据的使用。我不能使用时间戳或CookieId作为前缀，因为我从最佳实践中学到了这一点。但是应该有一个标识符(最好是字母表？)然后是timeseries后缀。今天，SQL表中存储了52列，数据量为5亿。我认为数据可能是基于OLTP处理更新的。但该表稍后将被查询为诸如OLAP处理的timeseries数据。 (

浏览 2提问于2018-09-18得票数 6

回答已采纳

4回答

是否可以查询存储的云存储日志数据而不使用BigQuery对其进行清理？

google-cloud-platform、google-bigquery、stackdriver

我有大量日志数据从StackDriver导出到。我正在尝试使用BigQuery运行查询。但是，在BigQuery Dataset中创建表时，我将得到大量日志数据是从包含大量唯一列名的StackDriver接收器中导出的。其中一些名称不符合BigQuery表的要求。解决这个问题的<

浏览 0提问于2019-09-04得票数 0

回答已采纳

3回答

如何从oracle数据库中提取数据并保存到Google云平台

oracle、google-cloud-platform

需要从oracle数据库中提取数据并存储在Google云平台中。数据大小约为10 TB。有没有可能通过Spark？数据必须每月传输一次。在GCP中存储和处理的数据如下：我

浏览 2提问于2019-11-17得票数 0

3回答

如何确保Postgres中的递归CTE至少返回N行

sql、postgresql、common-table-expression、recursive-query、sql-limit

如果您需要从递归查询中选择最上面的N个元素，其中没有排序，并且有可能在没有递归的情况下返回少于N行(因此TOP部件对于确保结果集至少有N行是必需的，而LIMIT可以允许较少的行)，那么该怎么办？它与上面的链接非常接近，但已被修改为在输入表和输出结果集中是多态的，并且正确地考虑了只返回输入表中已经存在的列的<em

浏览 1提问于2016-03-20得票数 6

回答已采纳

1回答

在云中的大型无模式JSON数据集上运行类似SQL的查询？

bigdata、nosql、json

我想在这些文件中运行类似SQL的查询--例如，查找具有特定属性的文件的计数，查找属性在数字或时间范围内的文件的计数，等等。我有什么选择？以下

浏览 0提问于2017-07-05得票数 1

10回答

CTE和SubQuery的区别是什么？

sql、sql-server、tsql、subquery、common-table-expression

从这篇文章中，那么，与‘子查询’相比，使用CTE (Common Table Expression)的优势是什么？(因此，查询的实际操作更具可读性()) 与sub-select相比，使用CTE的唯一好处是我可以实际命名sub-query。当CTE用作简单(非递归)

浏览 152提问于2009-04-01得票数 172

回答已采纳

2回答

如何在BigQuery标准中将IP地址转换成地理位置？

google-bigquery、timezone、geoip、ip-geolocation

所以我读过我可能还没有遇到更多的移民问题。有人知道如何在BigQuery标准SQL中将IP地址转换为

浏览 13提问于2017-09-05得票数 3

回答已采纳

1回答

理解BigQuery* BigLake的几个特性*

google-cloud-platform、google-bigquery、google-cloud-storage

快速扫描 SELECT * FROM table WHEREcountry="US" 谓词下推将获取country='US'并在本机源上对其进行评估，而如果我们没有谓词下推(在本例中)，它将涉及运行SELECT * FROM table --将所有数据复制到处理服务器谓词下推和

浏览 5提问于2022-07-02得票数 0

点击加载更多