如何获取bigquery表中的全部数据，而不是每天的数据

文章/答案/技术大牛

发布

2回答

firebase、google-cloud-platform、google-bigquery

你好，我是bigquery的新手。我已经链接到firebase数据并在bigquery中获取表。但数据显示每天。我可以知道如何获取bigquery表中的所有数据吗？

浏览 22提问于2019-02-06得票数 0

2回答

如何将Google中的数据附加到BigQuery中？

google-bigquery

每天我都会把一些数据放到谷歌的表格中，今天的数据覆盖了昨天的数据。我根据这个Google创建了一个BigQuery表--初始连接工作，来自工作表的数据可以在BigQuery中正确查询。Q：明天谷歌表格中的数据将被覆盖。如何将中的日常<em

浏览 10提问于2022-05-30得票数 0

2回答

使用python用bigquery表中的数据替换bigquery分区

python、google-bigquery、partition

在bigquery的每日分区表中，我有30天的数据。我有一个更大的桌子，每天都有5年的数据分区。我需要从stage表中进行选择，并在我的暂存表中的30天内替换大表中现有分区的全部内容。我的首选是使用Python来完成这项工作，而</

浏览 1提问于2018-11-17得票数 0

回答已采纳

1回答

如何在数据集中创建动态表并在tableau中访问？

google-bigquery、tableau-api

我有一个BigQuery数据库，我想要创建动态表。例: table_20170609 -如果日期是2017年6月9日每天我会得到一些excel数据，我必须上传到上面动态创建的表excel中的数据不是按日计算的，它将从开始日期到今天的日期。我知道将bigquer

浏览 3提问于2017-06-09得票数 0

1回答

我有一个表UNITARCHIVE，按日期分区，并按单元、DUID进行集群。表892 Mb的总大小。当我尝试此查询时 SELECT * FROM `test-187010.ReportingDataset.UNITARCHIVE` WHERE duid="RRSF1" and unit="DUNIT" Bigquery告诉我，它将处理892MB，我认为集群应该减少扫描的大小，我理解当我过滤每个日期时，大小大大减少，但我需要整个日期范围。是故意的，还

浏览 14提问于2019-09-17得票数 0

回答已采纳

1回答

大型查询中未显示Firebase Analytics中的事件

firebase、google-bigquery、firebase-analytics

当将Firebase事件链接到大数据时，我遇到了麻烦。 

浏览 0提问于2019-03-11得票数 9

2回答

Bigquery中数据输入的定价

google-bigquery

我正在寻找从云存储到大查询的数据输入的价格(通过"bq导入“)。谢谢罗曼。

浏览 6提问于2014-08-06得票数 1

回答已采纳

1回答

将数据从RDBMS加载到Bigquery

google-bigquery

我有一个App Engine调度作业，它每天运行，并在PostgreSQL表(托管在gcp中，而不是cloudsql中)中查找满足归档条件的行。如果满足条件，它将连接到BigQuery并将数据流式传输到大型查询。每天，有资格归档的记录很少，我们会写信给BigQuery。这是一种经济有效的方法吗?或者我们可以尝试使用Cloud Functions加

浏览 10提问于2020-01-31得票数 0

1回答

将Firebase自定义事件导入Bigquery

google-bigquery

我将账号链接到Bigquery，在沙盒上玩，基本上是为了学习如何使用。我已经链接了昨天和今天这些自定义事件不会在BigQuery上显示。有什么建议吗？

浏览 0提问于2020-05-14得票数 0

1回答

使用Python和Spacy从列中添加列

python、google-cloud-platform、google-bigquery、dml

我有一个包含来自mongodb数据库的所有数据的BigQuery数据仓库，这些数据每天同步一次。我想将一个列添加到我的一个表中，该列是另一个列的清理+混合版本(类型是string)。我如何能够在我的表上运行这样的转换，而不需要在本地获取所有数据并在

浏览 6提问于2021-12-22得票数 -1

回答已采纳

7回答

谷歌BigQuery删除行？

google-bigquery、sql-delete、delete-row

有没有人知道有计划在Google Bigquery中添加对从表中删除部分数据的支持？我们现在的问题是，我们正在使用它来分析我们随着时间的推移收集的数据点。我们希望对过去X天的数据运行查询，但是在过去X天的数据之后，我们不再需要将数据存储在BigQuery中。目前我们能想到的

浏览 8提问于2012-05-15得票数 29

回答已采纳

1回答

Firebase分析数据将被导出到BigQuery多长时间

google-bigquery、firebase-analytics

我已经在Firebase控制台中启用了BigQuery集成，并对此有一些问题： Firebase分析数据将被导出到BigQuery多长时间？我有从Firebase到BigQuery的集成，不知怎么的，Firebase数据导出被某人禁用了。我昨天在17:00左右启用了它，到目前为止还没有在BigQuery中更新数据。为什么即使数据从日内数据集移动到事件数据集，F

浏览 9提问于2020-05-08得票数 1

1回答

通过windows服务在BigQuery表中插入记录

.net、sql-server、c#-4.0、windows-services、google-bigquery

出于测试目的，我能够从BigQuery表中获取数据，以检查我的BigQuery服务和Windows之间的通信。但是这个服务基本上是从MSSQL server中获取记录，然后一个接一个地向BigQuery中的目标表插入或追加一条记录。我不想使用CSV或JSON文件作为数据源。有没有办法做到这一点？

浏览 0提问于2012-10-30得票数 0

回答已采纳

3回答

如何保持Firebase数据库与BigQuery同步？

node.js、firebase、firebase-realtime-database、google-bigquery、google-cloud-functions

我们正在进行一个涉及大量数据的项目。现在我们最近读到了Google BigQuery的内容。但是我们如何将数据导出到这个平台呢？我们已经看到了将日志导入Google BigQuery的示例。但这不包含有关更新和删除数据的信息(仅插入数据)。所以我们的对象能够更新它们的数据。而且我们对BigQuery表

浏览 3提问于2017-04-06得票数 3

回答已采纳

1回答

将云存储文件转换为BigQuery表/数据集，然后再进行查询

java、eclipse、google-bigquery、google-cloud-platform、google-cloud-dataflow

很棒的东西。现在我想从GCS获取数据，将其转换为BigQuery数据集。对于每个文件，我想创建一个新的数据集。这些细节对这个问题并不是很重要，尽管这将是一个不错的选择，因为我陷入困境的地方是一个简单的Hello示例，它使用Eclipse工具。任何有用的例子都会很感激，或者简单地提示一下现有的有工作样本的文档。日蚀在Eclipse中

浏览 4提问于2017-01-24得票数 0

1回答

在BigQuery中获取“查询太大”

google-bigquery

我将事件数据存储在BigQuery中，按日划分--每天一个表。TABLE_DATE_RANGE(my_dataset.my_dataset_events_, SEC_TO_TIMESTAMP(1391212800), SEC_TO_TIMESTAMP(1393631999)) 每个表的大小约为它似乎受到表大小的限制，因为在这个查询中，我只将它限制为一列。当我使用较小的时间范围时，它就能工作。但是使用

浏览 4提问于2014-06-30得票数 7

1回答

日内表到日表的Bigquery数据传输时长

google-bigquery

我正在使用平均每天50~60 GB数据的firebase分析和bigguery。我假设查询结果之间的差异就是因为这个原因。(可能是在不同的数据量上计算)提前谢

浏览 0提问于2019-12-30得票数 0

1回答

如何在大查询中将每天的数据追加到表中？

google-bigquery

我们正在从数字海洋迁移到GCP，为了测试，我们从mongo DB中将数据导出为json，并将其上传到GCS bucket (userDump.json是其中之一)到目前为止，一切都很顺利。每天我们都有新用户加入，他们的数据保存在GCS上。我们希望运行cron /similar功能来将数据</

浏览 0提问于2019-09-16得票数 1

1回答

实现Google Big Query时出现的问题

google-bigquery、bigdata

我们在Big Query中看到了很多缺点，比如以此类推...提前谢谢。

浏览 0提问于2016-03-02得票数 0

1回答

从Google BigQuery导出到CloudSQL？

google-bigquery、google-cloud-storage、google-cloud-sql

我想将数据从BigQuery (即报表)转储到CloudSQL数据库中，通过编程实现这一目标的最佳方法是什么？我意识到我可以通过运行一个查询，下载它作为一个CSV，然后通过云控制台上传它，但是我想通过编程来完成这个任务，最好是使用BigQuery /SQL。

浏览 1提问于2016-04-06得票数 18

回答已采纳

点击加载更多