在寻找使用BigQuery进行报告的方法时存在逻辑混乱

文章/答案/技术大牛

发布

1回答

google-bigquery、data-analysis

我对一项高优先级的任务失去了逻辑。任务是找到一种方法，在车辆共享应用程序中报告客户活动随时间的变化。我们有一个用BigQuery编写的视图，它显示客户是否积极使用该服务30天或90天，以及他是否经常使用该服务。每月使用服务超过特定阈值的客户分别称为高用户和超用户。我真的很困惑，并且一直在寻找最好的策略来找出客户types.What产生了多少价值和

浏览 25提问于2019-10-17得票数 0

回答已采纳

1回答

逻辑应该放在底层SQL查询中还是在中？

google-bigquery、google-data-studio

在我的过去，使用引擎报告，如水晶报告，SSRS和其他，最好的做法是将数据提供给报告引擎，并让它处理数字和逻辑。逻辑通常是聚合、枢轴表以及一些基本的数学和if语句。今天，使用BigQuery和DataStudio，我被告知相反的前提是bigquery将具有更好的计算聚合的性能。那么，旧的最佳实践

浏览 4提问于2020-07-20得票数 0

回答已采纳

1回答

将Google Cloud SQL Server数据转换为BigQuery

google-cloud-platform、google-bigquery、google-cloud-sql

我需要将Google Cloud SQL Server数据库中的数据导出到BigQuery，以便进行一些数据分析和报告。我发现推荐的方法是使用BigQuery Cloud SQL federated query，但这不支持SQL Server数据库，在Google Cloud SQL服务中只支持MySql和Postgres我正在寻找一种使用Google Cloud资源来做到这一点的

浏览 22提问于2021-07-02得票数 2

2回答

云SQL到BigQuery的增量

google-cloud-platform、google-bigquery、google-cloud-dataflow、google-cloud-sql、dataflow

我们需要以一种使3-4表(扁平的、嵌套的或非规范化的)从这些表中得到BigQuery，这些表将用于Data、Looker等中的报告。数据应该进行增量处理，Cloud中的更改可以每5分钟发生一次，这意味着数据应该在几乎实时的情况下提供给BigQuery报告。如果可能的话，我们也应该保持数据变化的历史。解决方案：我们在BigQuery中保留了3层，

浏览 4提问于2020-01-28得票数 4

1回答

将Firebase分析数据转换为红移-将BigQuery记录数据类型转换为红移

google-bigquery、amazon-redshift、data-modeling、firebase-analytics

我需要将当前在BigQuery中的Firebase Analytics数据导出到Redshift。我遇到的问题是BigQuery中数据类型为RECORD的字段(下面是BQ模式的截图)： ? 如何在Redshift中存储这些键/值？但是，因为每个事件有多个键/值对，所以events表中的每个事件在维度表中都有多行-在我看来，在对数据运行报告时，维表仍然会很混乱</e

浏览 11提问于2020-10-10得票数 0

2回答

使用Google脚本将多个.CSV文件从Google导入到BigQuery中

google-apps-script、google-bigquery

我已经从美国运通的门户下载了一年的.CSV文件。我想使用Google脚本来获取这些数据并将其放入Google BigQuery中。由于BigQuery UX没有提供将数据附加到表中的机制，所以不能真正地进行交互。，但我注意到的是换行符不存在。因此，程序中的逻辑将看到许多列而不是所需的3。我所做的一些阅读表明，创建.CSV文件的当代方法并不

浏览 7提问于2022-02-09得票数 1

回答已采纳

1回答

关于保存BigQuery数据容量的方法(BigQuery/ data /Data/Google)

google-bigquery、google-data-studio

我想知道如何通过改变数据门户的设置来保存BigQuery数据容量(Google工具/旧名称: data )。原因是如果我不保存我的BigQuery数据容量，我就不能执行SQL或支付大量的费用。我想知道使用的方法不是更改BigQuery设置(包含更改SQL代码)，而是使用数据Protal设置。因为数据门户中的仪表板继续使用BigQuery数据容量，所以即

浏览 0提问于2019-07-09得票数 0

1回答

BigQuery中与时区相关的问题(用于分区和查询)

google-cloud-platform、google-bigquery、google-data-studio

我们在不同的渠道上创建和运行活动。当用户点击/访问任何Adv (作为活动的一部分)时，系统会生成日志。我们的系统托管在GCP中。使用‘Exports’将要素日志导出到BigQuery 在BigQuery中，日志表使用‘timestamp’字段(生成日志的时间)进行分区。我们知道BigQuery将日期存储在协调时时区，因

浏览 0提问于2019-03-11得票数 4

1回答

数据到BigQuery

sql-server、google-cloud-sql

我需要将数据库中的数据导出到BigQuery，以便进行一些数据分析和报告。我发现建议的方法是使用BigQuery Cloud联邦查询，但这不支持Server数据库，只支持Google服务中的MySql和Postgres。我正在寻找一种使用Google资源的方法，可能是批处理ETL工具，也可能是流工具。一个要求是BigQuery中的</em

浏览 0提问于2021-07-02得票数 0

回答已采纳

3回答

BigQuery中的谷歌广告印象计数与谷歌广告报告中的不同

google-bigquery

我正在使用谷歌广告的BigQuery数据传输服务，在通过查询来验证传输的数据时，我注意到我在谷歌广告报告中看到的数据与传输到BigQuery的数据之间存在差异。虽然点击量和费用数据还可以，但印象数据却有很大的不同。有没有办法让BigQuery中的印象数据接近谷歌广告报告中的印象数据？出现差异<

浏览 35提问于2020-11-16得票数 1

1回答

BQ客户端库: API资源管理器和堆栈驱动程序日志记录差异

python、google-bigquery

(首先，感谢您阅读我冗长的查询)job.done() 有人能澄清这个凭证是什么吗?这个凭证是什么额外的</em

浏览 1提问于2018-06-29得票数 0

回答已采纳

2回答

在大查询中制作视图是一种好的做法吗？

analytics、google-bigquery

我正在创建大查询中的视图，但如果我在此视图上再次运行任何查询，它会显示此查询将处理与创建所需视图的表相同的GB空间 View是自动销毁还是我们必须删除它？

浏览 1提问于2014-08-27得票数 1

1回答

BigQuery上的虚拟对象

view、field、google-bigquery、calculated-columns

有没有办法在BigQuery中定义虚拟对象？我正在寻找一种方法来定义虚拟表或虚拟字段。该概念类似于RDBMS

浏览 2提问于2013-10-15得票数 0

2回答

如何在应用程序引擎& python上使用Bigquery流插入

python、google-app-engine、google-bigquery

我想开发一个直接将数据流到BigQuery表中的应用程序引擎应用程序。根据Google的文档，有一种将数据流到bigquery中的简单方法： body = {"rows":[]} response =

浏览 0提问于2014-02-26得票数 13

回答已采纳

1回答

如何将事件参数记录到Firebase控制台

android、ios、firebase、firebase-analytics

我刚刚开始使用Firebase对我的应用程序进行分析，我遇到了一些问题，试图查看与我的事件相关的自定义参数。问题是，在创建观众时，我可以看到所有的事件，但不能深入到参数(没有显示与事件相关的参数)。[F

浏览 4提问于2016-07-19得票数 3

回答已采纳

1回答

如何在设置值时不断更新报表？

c#、wpf、winforms、report

好的，所以我不知道这是否存在于某个包中，或者我是否需要滚动我自己的包(我真的不想这么做)。基本上，我想要的是一个报告类型的系统，它几乎可以反映任务管理器，这是我能想到的最好的例子。我有一个WCF服务，当数据发生变化时，它可以将业务逻辑与订阅的客户端进行通信。因此，每当事件发生在客户端时，我都希望更新该报告。我已经创建了一个新的.rdlc，并开始构

浏览 2提问于2012-05-18得票数 1

回答已采纳

1回答

Bigquery中的部署自动化

google-bigquery

我在过去的3-6个月里一直在使用Bigquery，我们已经创建了几个datastudio报告，现在我们正在寻找保持源代码控制和自动化部署的方法。当使用SQL server作为关系型数据库管理系统时，我们使用了，它允许在源代码管理中保留初始模式/数据或迁移，并将它们推送到目标environment.What。

浏览 2提问于2018-06-12得票数 0

1回答

数据流流-它适合我们的用例吗？

google-cloud-dataflow

我们已经在批处理模式下使用了一段时间。然而，我们似乎找不到多少关于它的流媒体模式的信息。数据/事件正在实时地流到BigQuery中。在业务分析之前，我们需要对数据进行转换/清理/去有机化。现在，我们当然可以在批处理模式下使用Dataflow，并从BigQuery (基于时间戳)获取数据集，并以这种方式对其进行转换/清理/去修饰。但这是一种有点<

浏览 2提问于2015-06-04得票数 2

回答已采纳

1回答

如何在Crystal Reports中使用组公式中的共享变量？

crystal-reports、crystal-reports-8.5

因此，我的任务是更新由客户创建的自定义报告，使其更通用，以供所有其他客户使用。该报告显示了基于支付方式的总销售额，它将所有不同的信用卡(作为单独的支付方法存储在我们的软件内部)组合到一个“信用卡”组中。不幸的是，这些值在报告中是硬编码的。我在一个子报表中创建了以下公式，以生成从数据库中提取的有

浏览 2提问于2011-08-05得票数 1

2回答

我使用BigQuery for Java对一个数据约为5GB的表进行小读取。我所做的查询遵循最标准的SQL，如SELECT foo FROM my-table WHERE bar=$1，结果最多为1行。我需要在一个高频率这样做，因此性能是一个很大的关注。如何对此进行优化？我考虑过周期性地提取整个数据集，因为它只有5GB，但同样地，5GB听起来很需要经常保存在内存中。在BigQuery控制台中运行此查

浏览 5提问于2021-04-16得票数 0

点击加载更多