我正在尝试在google bigquery SQL中创建一个时间序列。我的数据是一系列的时间范围，涵盖了该记录的活动周期。22:00:00 UTC 2020-11-02 09:48:00 UTC2020-1
浏览 10提问于2020-11-09得票数 1
我有时间序列数据，一秒的粒度。如何使用BigQuery计算/转换数据的平均时间间隔(例如:5分钟或1分钟)？或平均记录的数量-平均每60条记录-1分钟300条记录-5分钟。行数据-每条记录一秒。I需要将每条记录数据1秒转换为平均5分钟记录数据，例如_iowait参数的平均5分钟。我需要一些东西，如总结300
浏览 3提问于2020-10-29得票数 1
3回答
web应用程序中的大数据分析
、、、、
假设我有非常大的时间序列数据。例如，我将非常庞大的数据存储在像Google BigTable这样的存储中。我可以非常快地从存储中查询和获取数据。这样我就可以处理存储问题了。到目前为止，这个过程是非常有效的。
现在我有了一个web应用程序。我想分析存储在BigTable中的大型时间序列，并将结果可视化。我想对超过一百万个点的时间序列做一个统计评估。所以我有一个解决方
浏览 4提问于2015-07-20得票数 1
我正在尝试使用流式insertAll方法在BigQuery中插入38000条记录。但首先我得到的错误是：com.google.cloud.bigquery.BigQueryException: Read timed out然后，在将超时时间增加为：
RetrySettings retrySetting = RetrySettings.newBuilder().setTotalTimeout(Duration.ofMinut
浏览 5提问于2021-02-18得票数 2
Google ：我想在Google BigQuery表上加载~5B记录。我有一个名为“date_time”的字段，它描述了记录日期时间(从2012年到今天)。我希望在这个字段上对BigQuery表进行分区。
复杂性：我将所有记录都流到BigQuery表中，似乎只有过去12个月的记录被BigQuery接受。date_time：我已经阅读了说明()，但我仍然不明白如何
浏览 2提问于2019-03-06得票数 1
回答已采纳
例如，我将所有的苏格拉塔数据和ETL (提取、转换和加载)都转换到BigQuery中。
问题是如何通过纯碱API像查询一样运行。如何通过查询将时间戳字段转换为仅用于组的年份。例如，如果记录</
浏览 3提问于2014-08-10得票数 1
回答已采纳
有没有办法用BigQuery运行实时分析？我使用了CSV upload选项，该选项启动一个作业并以脱机模式加载数据，加载完成后可以对其进行分析。但在关于BigQuery的公告中，提到了使用BigQuery进行实时分析。如何才能做到这一点？我们可以将数据从Google Cloud数据库追加(无更新)到BigQuery中，以进行实时分析吗？顺便提一下，我注意到BigQuery CSV数据加载速度比我本地PC上使用10 PC数据文件运行的LucidDB和In
浏览 0提问于2012-05-02得票数 3
回答已采纳
我想将BigQuery结果导出到Google中，考虑到导出数据的数量很大，那么最好的方法是什么呢？我可以运行BigQuery(BigQuery)并循环它来创建CSV数据，并且可以使用GoogleSheet API上传它，但是我觉得这不是优化的方法，因为会涉及数千条记录，还有更好的出路吗？
浏览 0提问于2019-04-03得票数 4
回答已采纳
所以我有这个event_date (YYYYMMDD)和event_timestamp (以微秒为单位的Unix时代)列，用于BigQuery (原始数据源是Firebase)的每个记录。我创建了一个时间序列/条形图(我尝试了两者)，它将x轴显示为当前一天中的小时(我在event_date上进行了筛选)，y轴显示了记录的数量。我这样做的方式是使用Data函数HOUR(event_times
浏览 2提问于2019-12-28得票数 1
回答已采纳
我有一个程序可以从远程数据库下载时间序列(ts)数据，并将数据保存为csv文件。新ts数据被追加到旧ts数据。随着下载更多数据，我的本地文件夹继续增长和增长。下载新的ts数据并保存后，我想将其上传到Google BigQuery表中。做这件事最好的方法是什么？接下来，我删除Google BigQuery中的任何表，然后手动创建一个新表，首先删除Google BigQuery中<em
浏览 2提问于2017-06-28得票数 0
回答已采纳
我在Google DataProc上用Scala写了一个火花作业，它每天执行并处理记录，每个记录都有一个事务时间标记。记录按年月组合分组，每个组被写入GCS中的一个单独的每月拼花文件(例如，2018-07-file.parquet、2018-08-file.parquet等)。请注意，这些文件可以追溯到5年前，并形成一个非常大的数据集(~1TB)。
我希望将这些文件写入BigQuery，并让作业只更新当前运行中更改的
浏览 0提问于2018-08-27得票数 0
回答已采纳
2回答
我的Google Bigquery表有date和time列。表中每隔10分钟发布一次新数据，因此日期字段应为"2018-10-26“，时间字段为"19:05:00”。下一条记录将类似于日期和时间字段的"2018-10-26“和"19:15:00”。如何按一小时汇总每天的数据(每天24条记录)？
SQL请求使用Apps脚本从Google Sheets发送。以下是谷歌big
浏览 0提问于2018-10-27得票数 5
回答已采纳
我正在寻找一个云服务，它可以对用户提交的大量选票进行“实时”的高级统计计算。
在我们的应用程序中，用户可以提交不同类型的投票，比如选择最喜欢的，评分1-5，说是/不，等等。我们还想向用户显示“实时”统计数据，显示一个人的受欢迎程度等等。这将由一个相当复杂的SQL生成，在这个SQL中，我们计算一个人被选为最受欢迎的人的平均次数，除以该人参与的总票数和游戏数等。最新的X游戏的得分应该高于所有游
浏览 0提问于2019-05-27得票数 0
回答已采纳
3回答
自定义度量.数据保持期
、、、
我使用自定义度量，并创建了几个仪表板图来显示系统上的流量。问题是图形系统将数据保存了几个星期，而不是永远。来自Stackdrive
这个“人工数据副本”是如何工作的？只需
浏览 3提问于2019-09-25得票数 3
回答已采纳
1回答
每天将所有记录从BigQuery表传输到Cloud表的最佳方法是什么(每天预期记录的大致数量超过255801312,255,000)。我知道我们可以创建从BQ到CloudSQL的数据流管道，但是这大量的数据将持续几个小时。在google云中实现的最佳解决方案是什么？
浏览 7提问于2021-11-10得票数 0
回答已采纳
我在BigQuery中有几个表，它们都来自Google表。当Google表被更新时，BigQuery中的表也会自动更新。我正在试图了解此事件的日志在操作日志中的样子。我的最终想法是创建这些日志的接收器，以便创建Pub/Sub，并根据这些事件运行预定的查询。
谢谢
浏览 3提问于2021-12-19得票数 0
我们有一个系统来跟踪在上执行的所有查询。我们实际上是通过gcloud实用程序使用gcloud，为了跟踪DDL/DML查询，我们在DB上存储用户名和查询执行时间以及时间戳。但是，在这些API中，我无法跟踪直接从Bigquery中创建或删除表的DDL查询。有什么方法可以追踪这些查询的对象和时间吗？
浏览 2提问于2020-03-27得票数 0
在我的pip包和返回查询结果的bigquery连接器升级后，我突然停止了以下错误消息的处理from google.oauth2 import'data = client.query('select * from dataset.table').t
浏览 20提问于2022-07-14得票数 4
回答已采纳
有没有办法将序列号与BigQuery中的记录一起填充？例如，如果我要在BigQuery表中插入1000条记录，则必须有一个字段(序号。不是。)它将包含每次插入的记录号。下次发生另一次插入时，序列号应从1001开始。请让我知道在Bigquery中是否有这样的内置工具或解决方法。
浏览 16提问于2018-01-03得票数 1
我遇到了一个问题，Google Data Studio将错误的时间戳数据发送到我的社区连接器，因此当我尝试过滤日期时，我会得到一个错误。我有两个BigQuery TIMESTAMP类型字段(名为timestamp和created_at)，这两个字段都不加修改地传递到我的社区连接器。一旦我向报告中添加了一个日期过滤器(为了进行时间序列或常规过滤)，如下所示： ? 然后，我从连接器(在我的BigQuery项目历史<
浏览 2提问于2020-09-01得票数 0
云服务器
ICP备案
对象存储
云点播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号