使用谷歌BigQuery /应用程序脚本为插入到谷歌工作表中的数据添加时间戳

文章/答案/技术大牛

发布

1回答

google-apps-script、google-bigquery

我遵循代码示例here，使用Google Apps脚本将BigQuery中的数据插入到Google Sheets中。我能够让脚本正常工作，但我希望将更新后的时间戳作为新列添加到数据中。，假设我运行以下查询：select sample_data from data limit 3 结果： sa

浏览 14提问于2021-07-29得票数 0

2回答

通过Apps脚本的大查询API --我在一个较大的表上得到一个错误，但是在一个较小的表上工作。通过应用程序脚本有大小限制吗？

google-apps-script、google-bigquery、quota

我正在使用Apps脚本向BigQuery发送查询我可以在控制台内成功地查询表2，因此它似乎是Apps脚本<em

浏览 1提问于2020-07-09得票数 0

1回答

通过API来自CSV的时间戳

google-bigquery

当有时间戳字段时，API是否支持将CSV导入到新表中？如果我手动(使用BigQuery web界面)上传一个包含时间戳数据的CSV文件，并通过模式将该字段指定为时间戳，它就能正常工作。数据已加载。时间戳数据被解释为时间戳数据</e

浏览 2提问于2013-04-25得票数 0

回答已采纳

3回答

从gsheet向bigquery插入数据

javascript、google-sheets、google-bigquery

我想从gsheet上传数据到bigquery中的一个表，我的意思是我想用代码上传数据，而不是用add on，因为它将被安排在以后。有没有什么代码示例可以用于这两种方式(追加和截断)？我有一个2列的数据，我想要加载。这些列包括：josh big可能是使用以下函数的一些代码 BigQuery</e

浏览 1提问于2015-12-22得票数 2

1回答

应用程序脚本BigQuery标准SQL insert或update语句

google-apps-script、google-bigquery

我希望使用谷歌应用程序脚本中的BigQuery标准SQL方言。当未勾选"SQLVersion :使用遗留SQL“时，以下内容在BigQuery中有效；我可以很高兴地使用作业从谷歌脚本<e

浏览 12提问于2017-02-07得票数 3

回答已采纳

1回答

我需要从yyyyMMddHHmmss 20170227141500格式的时间戳中按年和月分组

sql、google-bigquery

我需要从yyyyMMddHHmmss 20170227141500 (谷歌的bigquery gkg表)的时间戳中按年和月进行分组。我需要清点这一年的月度记录。数据类型为整数。时间戳是列名。实际上，我需要对时间戳的前6位进行分组。yearmonth是我的组名，不包括在表<em

浏览 8提问于2021-02-11得票数 0

回答已采纳

1回答

使用Google Cloud Functions进行流式插入/更新

google-cloud-platform、google-cloud-functions

这是关于使用google云函数的流数据插入/更新。我使用Salesforce作为源数据库，并希望对谷歌BigQuery表进行流式插入/更新。我的插入部分工作得很好，但我如何能够进行更新，因为流数据首先被插入到流缓冲区中，这将不允许在30分钟左右的时

浏览 21提问于2019-06-04得票数 1

回答已采纳

1回答

Google BigQuery:使用Avro格式导入日期时间字段

google-bigquery、avro

我有一个脚本，从甲骨文数据库下载数据，并上传到谷歌BigQuery。这是通过写入一个Avro文件来完成的，然后使用BQ的python框架直接上传该文件。我要将数据上传到的BigQuery表具有预定义的模式，其中一些模式包含日期时间字段。 Field CHANGED has incompatible types.我还尝试在导出时将字段数据

浏览 4提问于2020-04-22得票数 0

2回答

是否使用特定的时间戳列将CSV导入BigQuery上的已分区表？

google-bigquery

我想要将一个大型csv导入到一个bigquery分区表中，该表具有一个timestamp类型的列，该列实际上是某个事务的日期，问题是当我加载数据时，它会将所有内容都导入到今天日期的一个分区中。是否可以使用我自己的时间戳值对其进行分区？我怎么能做到这一点。

浏览 0提问于2016-07-05得票数 1

1回答

需要帮助为非DBA设计数据库

google-bigquery、google-cloud-storage

我正在使用谷歌的云存储& BigQuery。我不是一个DBA，我是一个程序员。我希望这个问题足够一般性，以帮助其他人。我们的数据分析要求每个记录都有一个时间戳

浏览 1提问于2013-11-23得票数 0

回答已采纳

1回答

时间戳数据类型的Pubsub订阅错误:不兼容模式类型

google-bigquery、protocol-buffers、google-cloud-pubsub

我正在为pubsub编写新的bigquery订阅，在尝试创建订阅时遇到了一个错误：如果主题架构中的类型是字符串，而BigQuery表中的类型是<em

浏览 5提问于2022-09-18得票数 0

1回答

Bigquery v2 api密钥不工作

google-bigquery

我正在尝试从有什么想法吗？

浏览 3提问于2017-11-30得票数 0

3回答

使用BigQuery进行日志分析

google-bigquery

我正在尝试用BigQuery做日志分析。具体地说，我有一个appengine应用程序和一个将向BigQuery发送日志数据的javascript客户端。在bigquery中，我将在一列中存储完整的日志文本，但也会将重要字段提取到其他列中。然后，我希望能够对这些列执行即席查询。1) BigQuery在这个用例中是特别好还是特别差?也就是说，我只想存储最后N个日志或最后X

浏览 0提问于2012-05-02得票数 5

回答已采纳

1回答

使用App Script或Node JS将列数据堆叠成行

node.js、google-apps-script、google-sheets、google-cloud-storage

我有用户在列中提交的数据。我正在尝试将它们从列转换为堆栈行，这样数据库就可以将它们作为单个列读取，而不是必须引入X列来捕获数据。您可以在柱状示例屏幕截图中看到我当前所在的位置，以及在堆叠示例中看到我想要的位置。我可以使用应用程序脚本在谷歌工作表中执行此操作-加载数据为柱状数据，然后转换为堆叠数据</em

浏览 0提问于2020-02-20得票数 0

1回答

使用pandas将时间戳插入bigquery表

pandas、google-bigquery、python-bigquery

我在Google bigquery中有一个表，其中有一列设置为数据类型timestamp。我必须使用pandas的to_gbq函数插入数据。如果我将数据类型设置为string，而不是timestamp，那么数据就会加载到表中。但是我希望列是时间戳数据类型。如何将dataframe的列类型转

浏览 22提问于2019-09-11得票数 0

1回答

自定义Google Sheet冻结时间戳公式

google-sheets、formulas、ifttt

在此之前，我并不是特别精通谷歌工作表脚本，只是相当不错的谷歌搜索和让东西为我工作。如果我在我的RSS阅读器中保存一篇文章，我会使用IFTTT.com自动附加一个谷歌工作表。根据IFTTT的工作原理，它根据保存的文章的各种属性在工作表的底部添加</e

浏览 2提问于2017-03-18得票数 1

1回答

使用谷歌BigQuery* C# API库的示例代码*

c#、google-api-dotnet-client

我在StackOverflow和网络上搜索过，没有找到任何使用的代码示例PM> Install-Package Google.Apis.Bigquery.v2-Pre 我有使用OAuth 2.0验证谷歌项目ID的C#代码，这是有效的。但目前还不清楚如何继续使用BigQuery应用编程接口。我<e

浏览 1提问于2014-01-10得票数 0

1回答

无法在谷歌BigQuery时间戳数据类型列中保存时间戳和时区

google-bigquery

使用案例：'2014-09-27 12:30:00.45美国/纽约‘注:我已经尝试了另一种方法，给出TimeZone与协调世界时的小时偏移量，但没有成功

浏览 3提问于2020-05-26得票数 0

2回答

Bigquery数据集不加载

google-bigquery、google-compute-engine

我在Google BigQuery上遇到了一些问题，我们的一个数据集没有为我加载。这对我的同事来说是很重要的，但对我来说从来没有。加载资源失败: net::ERR_BLOCKED_BY_CLIENT 加载资源失败:服务器响应状态为404 ()中间的链接是这样的( project_name是我们的Bigquery</e

浏览 3提问于2017-11-06得票数 1

回答已采纳

1回答

如何使用将google幻灯片中的表的值除以一个数字？

google-sheets、google-apps-script、google-slides

我已经添加了一个表从谷歌工作表到谷歌幻灯片使用应用程序脚本。但是，我想将表的值除以1000000。有没有一种方法可以使用app脚本将google幻灯片中的表值除以指定的数字？否则，在将表格插入幻灯片之前，是否有一种方法可以自行编辑谷歌页中<

浏览 0提问于2023-04-12得票数 0

点击加载更多