如何使用标准How从bigquery中的events_表中获取最近24小时的数据？

文章/答案/技术大牛

发布

1回答

在Bigquery中-如何查询昨天的数据& Firebase事件表中的最后7天数据

google-bigquery

我使用下面的查询来获取指定数据范围的数据。SELECT event_date, count(event_name) as APP_Installs FROM and event_name='first_open' group by 1 如何在<

浏览 2提问于2019-03-07得票数 2

3回答

sql、google-bigquery

我正在使用这个查询，我想从events_表中获取过去24小时的数据…… CAST(TIMESTAMP_ADD(TIMESTAMP_MICROS(event_timestampcurrent_date(), INTERVAL 1 DAY) and 但是我想每当查询将运行时，只给出过去24小时的数据，这意味着如果我

浏览 2提问于2018-08-31得票数 1

1回答

添加到BigQuery *events_**表的privacy_info列

google-bigquery

我使用BigQuery来查询发送到firebase的事件。我的日常查询在events_*表和events_intraday_xxx表之间运行联合。最近，我们添加了与广告跟踪框架的集成，我的查询被打破了。我看到这是因为最近几天在events_*表中添加了一个新列，名为'privacy_info‘。这会导致联盟破裂。我的猜

浏览 86提问于2021-06-29得票数 0

3回答

将数据追加到BigQuery表中

google-cloud-platform、google-bigquery、google-cloud-dataprep

我使用GCP的数据代表连接几个具有相同列结构的csv文件，处理一些数据，然后写入BigQuery数据库。我必须将这些数据记录在BigQuery中。我是否可以将这些数据包含在数据代表中，并将它们附加到BigQuery表中？

浏览 7提问于2020-08-12得票数 0

回答已采纳

2回答

跟踪报告的使用情况

google-analytics、google-data-studio

我试图用跟踪报告的使用情况。我在24小时前尝试创建一个流，但是它仍然说没有数据接收到。流“来源”是一个Google 报告，所以我听从了一个博客作者的建议，这个建议似乎对很多人都有帮助，但对我却不起作用。我将Analytics跟踪ID复制到Google报告中，并在Google中使用作为流URL。这是建立小溪的正确方式吗？另外，在我尝试连接流之后，每次都需要等待24小时才知道它是否正常工作吗？

浏览 2提问于2020-07-21得票数 1

回答已采纳

1回答

对Firebase分析数据集运行计划的DML查询

google-bigquery、google-workflows

我正在尝试从Firebase分析数据集中运行计划的DML查询。(背景故事，我们有很多不再需要的额外事件，目前从BigQuery中删除它们更容易)。.*` BETWEEN CONCAT('events_', format_date('%Y%m%d', date_sub(CURRENT_DATE, interval 7 day))) AND

浏览 6提问于2021-05-18得票数 1

2回答

我应该在什么时候为导出到BigQuery的Firebase Analytics数据运行每日ETL作业？

firebase、google-bigquery、etl、firebase-analytics

我们使用Firebase Analytics从我们的应用程序中收集事件。我们已经启用了将事件导出到BigQuery。每天我们都会运行一些ETL作业来在BigQuery中创建更友好的分析表(例如会话、购买)。问题是我们应该在什么时候运行这些ETL作业？我们知道Firebase Analytics在BigQuery中创建了'events_intraday_‘表，该表

浏览 0提问于2019-04-01得票数 2

1回答

如何从python的防火墙中获取事件的数据？

python、firebase、api、google-bigquery

我在Firebase Analytics部分中定义了一些事件，如下所示：问题是，我不知道如何通过API或使用python包从Firebase导出这些事件的数据。我还找到了google-cloud-bigquery包，如果我请求数据集和表，它将返回null。，我要做的是在数据库上执行一个查询，但是我发现任何链接都没有帮助。(client.query(query).result()) go

浏览 2提问于2021-05-09得票数 1

回答已采纳

1回答

4 BigQuery链接:事件排除无效

google-bigquery、google-analytics、google-analytics-api、google-analytics-firebase、google-analytics-4

问题：数据流配置(排除事件)不起作用。Datastream是在20220621上配置的。即使每天都有限制。截图显示一个事件的使用日期和数量。我希望从date 20220621开始增加计数。我希望从date 20220621开始增加计数。如果我再次检查events_*表和intraday_events_*表，就会看到数据中<

浏览 4提问于2022-06-27得票数 0

1回答

在使用user_properties查询时无法将STRUCT类型的字段“_TABLE_SUFFIX”读取为字符串

google-bigquery

我正在使用标准SQL查询从Firebase导出的BigQuery数据集。每当我使用带条件_TABLE_SUFFIX的通配符查询时，我就会得到_TABLE_SUFFIX，但是当我不使用通配符查询时就会工作。我不明白为什么使用通配符会导致不同类型的user_properties。这也发生在我身上，当我几个小时后再试的时候，它就起作用了。我非常怀疑这是一个BigQuery</em

浏览 13提问于2019-10-27得票数 0

回答已采纳

1回答

是否根据event_timestamp或服务器日志时间填充BigQuery中的事件表？

firebase、google-analytics、google-bigquery

我正在尝试找出BigQuery中的events_intraday数据集中的表和events_数据集中的表之间的区别。据我所知，events_param字段中的created_at是服务器日志时间，因此events_intraday表中的表将在该特定日期记录所有事件，无论它们是在何时触发

浏览 1提问于2020-05-13得票数 0

1回答

BigQuery谷歌页如何查询动态表名

google-bigquery

我的BigQuery里有几张股票表。表的名称只是股票的代码: AAPL、AMZN、MSFT等等。"{dataset_name}.AAPL""{dataset_name}.MSFT" 我在Google上，它试图创建一个查询，以便根据股票名称逐个从表中动态选择因此，我试图在表名上使用一个参数，并尝试

浏览 8提问于2022-07-10得票数 0

3回答

使用外部表从BigQuery到雪花

snowflake-cloud-data-platform

我创建了一个来使用Google服务将数据从BigQuery导出到雪花。我看到了一些问题，因为原始数据源是Firebase。Firebase导出分析数据的方式在名为analytics_{GA_project_id}的数据集中，事件被发送到名为events_{YYYYMMDD}的分区表中。我正在研究我可能会探索的其他解决方案，雪花也可以连接到Goog

浏览 5提问于2022-01-24得票数 1

回答已采纳

1回答

如何将Azure事件中心(kafka界面)的事件集成到google云发布/订阅

azure、apache-kafka、google-cloud-pubsub

我有一个需求，我需要在Azure事件中心使用kafka主题。需要创建将使用作为参数提供的主题的POST端点。消息必须以kafka主题为属性，以消息内容为主体，在公共子主题上发送。这是一个很高的要求。我看过以了解如何实现这一目标。但是，如果有人实时地实现了这一功能，即从Azure事件中心到google的事件，或者曾经进行过类似的实现，请提供帮助。

浏览 1提问于2021-06-03得票数 1

回答已采纳

2回答

云SQL到BigQuery的增量

google-cloud-platform、google-bigquery、google-cloud-dataflow、google-cloud-sql、dataflow

我们需要以一种使3-4表(扁平的、嵌套的或非规范化的)从这些表中得到BigQuery，这些表将用于Data、Looker等中的报告。数据应该进行增量处理，Cloud中的更改可以每5分钟发生一次，这意味着数据应该在几乎实时的情况下提供给BigQuery报告。如果可能的话，我们也应该保持数据变化<

浏览 4提问于2020-01-28得票数 4

1回答

在BigQuery中连续7天

sql、google-bigquery

我最近从Legacy SQL迁移了我的代码，需要一个TABLE_DATE_RANGE的替代品，如何使用标准SQL来实现？我的数据是以YYYYMMDD格式导入BigQuery的GA表。我已经通读了迁移文档，但我不明白如何使用_TABLE_SUFFIX应用动态日期范围(例如，最近7天)。我理解如何使用</e

浏览 3提问于2017-07-05得票数 0

回答已采纳

3回答

我将事件日志加载到elasticsearch引擎中，并使用Kibana将其可视化。我的事件日志实际上存储在Google Big Query表中。目前，我正在将json文件转储到Google存储桶中，并将其下载到本地驱动器。然后使用logstash将json文件从本地驱动器移动到elastic搜索引擎。根据我所读到的，我了解到有一个输出连接器，它将来自elastic search的数据发送到Googl

浏览 4提问于2016-08-31得票数 7

2回答

为什么在Bigquery中创建事件表时GA4要加载3次？

google-bigquery、google-cloud-logging、google-analytics-4

我想知道通过云日志记录事件表创建作业是什么时候完成的。protoPayload.serviceData.jobCompletedEvent.job.jobConfiguration.load.writeDisposition="WRITE_TRUNCATE"但是在Cloud中创建事件表时我的问题是为什么在Bigquery中创

浏览 13提问于2022-02-27得票数 1

回答已采纳

1回答

将集合列表转换为列

python、python-3.x、list、google-bigquery

我使用Python从BigQyery中提取了一个SQL查询结果，并将结果存储在一个dataframe中，其中一个字段event_params已被保存为一个集合列表，如下所示我

浏览 7提问于2022-01-13得票数 1

回答已采纳

1回答

BigQuery到GCS和GCS到Mysql

google-bigquery、google-cloud-storage

我正在创建一个气流管道，其中我使用BigQueryOperator查询我的BigQuery表，并使用BigQueryToCloudStorageOperator将结果表导出为GCS。我需要将csv移动到mysql数据库，在那里它应该作为表存储在mysql数据库中。我能得到任何关于如何实现这一点的建议或想法吗？谢谢!

浏览 1提问于2021-02-05得票数 0

点击加载更多

在Bigquery中-如何查询昨天的数据& Firebase事件表中的最后7天数据