我正在尝试使用Java API将本地CSV文件的行加载到BigQuery中。TableId tableId = TableId.of(datasetName, tableName);
WriteChannelConfigurationWriteChannelConfiguration.newBuilder
浏览 10提问于2018-02-21得票数 1
回答已采纳
我一直在搜索从Google Cloud Storage以编程方式将数据加载到Big Query中。我已经手动完成了这一点，将我的谷歌云存储备份到BigQuery表中，也能够在安卓中检索数据。我面临的唯一问题是，我想以编程方式将数据上传到BigQuery表中。实现这一目标的各种方法是什么？
浏览 12提问于2018-01-15得票数 1
我有一个ML模型(文本嵌入)，它输出一个很大的1024长度的浮点数向量，我希望将其持久化到一个BigQuery表中。
向量中的各个值本身没有任何意义，整个向量是感兴趣的特征。因此，我希望将这些列表存储在BigQuery中的单个列中，而不是每个浮点对应一列。此外，向最初只有4或5行的表中添加额外的1024行似乎不是一个好主意。有没有办法在BigQuery中的列中存储python列表或np.array
浏览 10提问于2020-02-27得票数 0
我已经用默认分隔符"，“成功地将GCloud SQL导出到CSV。我想将这个CSV导入到，并且我成功地做到了这一点。"Budi", "19", "Want to be hero, and knight"
是否可以使用自定义分隔符(例如“AC.26”)导出Google？如果没有，如何将上述示例
浏览 4提问于2019-04-16得票数 2
有没有一种方法可以使用Google客户端API将JSON文件从本地文件系统加载到BigQuery？1-逐个播放记录。
2-从GCS加载JSON数据。3-使用原始POST请求加载JSON (即不是通过)。
浏览 2提问于2014-07-30得票数 6
回答已采纳
2回答
使用API的本地文件是否对加载数据有任何限制？
正如Google文档提到的Web，本地文件大小比<=10 MB和16,000行还要大。同样的限制也适用于API吗？
浏览 0提问于2018-05-03得票数 1
回答已采纳
我使用json文件中的模式在BigQuery中创建表，并将DATETIME数据类型赋予一个列。然后，我简单地从日期时间格式为2020-01-01 00:00:00的csv加载数据，但是当它进入bigquery时，我可以看到它有一个'T‘分隔符，例如2020-01-01T00:00:00。google bigquery docs - YYYY-MM-DD[
浏览 22提问于2020-05-08得票数 0
回答已采纳
2回答
我有一个应用程序，从API发送数据给我。数据是半结构化的(json数据) 我想把这个数据发送到Google Big Query，以便储存所有的信息。 但是，我不知道如何才能正确地做到这一点。到目前为止，我已经在自己的服务器上使用Node通过POST请求获取数据。 你能帮帮我吗？特纳克。
浏览 17提问于2019-10-15得票数 0
请注意，这些文件可以追溯到5年前，并形成一个非常大的数据集(~1TB)。我正在尝试使用，但它似乎只在中，而不是由日期字段过滤的一批记录。客户端
浏览 0提问于2018-08-27得票数 0
回答已采纳
1回答
我在Google Cloud SDK Shell上组装了一个for循环，它将把当前目录(在我的本地计算机上)中的每个CSV上传到一个单独的谷歌BigQuery表中，所有这些都在同一个数据集中。另外，我希望在GBQ中创建的表与其相应的CSV文件具有相同的名称(除了.csv部分)。
实际上，我可以使用以下命令行完成所有这些操作，只是它会将所有CSV附加到同一个表中，而不是单独的
浏览 3提问于2020-04-20得票数 0
我有一个关于刷新google大查询表的问题，其中的数据源是google drive。如何使用此google驱动器文件刷新我的大型查询表？谢谢
浏览 4提问于2018-03-22得票数 1
我正在使用扫雪机进行行为数据跟踪。我可以使用雪地加载器(& mutator)开放源代码(https://docs.snowplowanalytics.com/docs/getting-started-on-snowplow-open-source/setup-snowplow-on-gcp/setup-bigquery-destination/)将数据从发布/订阅使用</em
浏览 20提问于2021-05-07得票数 0
回答已采纳
我目前正在编写一个软件，用于导出大量的BigQuery数据，并将查询的结果本地存储为CSV文件。我使用Python 3和google提供的客户端。我做了配置和身份验证，但问题是，我无法在本地存储数据。每次执行时，我都会得到以下错误消息
googleapiclient.errors.HttpError：返回“无效提取目标URI‘响应/文件名-*..csv”。必须是有效<e
浏览 5提问于2015-07-27得票数 21
回答已采纳
我有一条数据流管道，在本地运行。目的是使用TEXTIO读取JSON文件，进行会话并将其加载到BigQuery中。根据这种结构，我必须在GCS中创建一个临时目录，然后使用该目录将其加载到BigQuery中。以前，我有一个数据模式错误，无法加载数据，请参阅。这个问题已经解决了。因此，现在当我在本地运行管道时，它会将一个临时的JSON换行符分隔
浏览 0提问于2016-12-31得票数 0
回答已采纳
当有时间戳字段时，API是否支持将CSV导入到新表中？
如果我手动(使用BigQuery web界面)上传一个包含时间戳数据的CSV文件，并通过模式将该字段指定为时间戳，它就能正常工作。数据已加载。时间戳数据被解释为时间戳数据，并导入到时间戳字段中。然而，当我使用API对相同的文件做同样<em
浏览 2提问于2013-04-25得票数 0
回答已采纳
我正在尝试编写一个云函数，将匹配通配符的GCS文件加载到BigQuery中。我能看到的和api参考中的所有示例都是load方法，它们通过bigquery.dataset.table.load方法指定特定的文件名。
使用通配符触发文件加载可以使用什么方法？我知道我可以指定元数据源uri，但是我看不到load方法的
浏览 0提问于2020-01-21得票数 0
我正在尝试将一些数据从本地服务器上传到BigQuery。由于我刚开始使用BigQuery，所以我一直试图上传几行示例数据，但是在所有可用的API和文档之间，我还是弄糊涂了。如果我试图上载通过Java加载的数据，而不是从CSV文件中加载数据，我将如何加载？我应该只写一个POST
浏览 0提问于2012-06-21得票数 0
我想将BigQuery结果导出到Google中，考虑到导出数据的数量很大，那么最好的方法是什么呢？我可以运行BigQuery(BigQuery)并循环它来创建CSV数据，并且可以使用GoogleSheet API上传它，但是我觉得这不是优化的方法，因为会涉及数千条记录，还有更好的出路吗？
浏览 0提问于2019-04-03得票数 4
回答已采纳
我们正在使用Office365 Excel并手动创建一些我们在BigQuery中需要的数据。您将创建什么解决方案来自动将此excel中的数据加载到bq中的表？我们不允许使用Google Sheets (这将解决我们所有的问题)。
浏览 0提问于2021-04-26得票数 1
使用Java API将数据加载到Bigquery失败，因为文件不存在于云中。但是，Google Cloud Storage的位置是正确的，并且在使用浏览器加载数据时运行良好。这在Google Cloud Storage JSON API v1发布之前是有效的。我不确定这是否相关。
知道最近有什么变化吗？
浏览 0提问于2014-11-24得票数 1
云服务器
ICP备案
云直播
实时音视频
即时通信 IM
腾讯云开发者
