腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
Google
特定应用程序数据
的
BigQuery
数据传输
服务
google-cloud-platform
、
google-bigquery
、
google-play
谷歌
BigQuery
数据传输
服务允许我自动传输特定
的
应用程序数据吗?我不太明白如何用那个例子来计算我
的
成本。 谢谢。
浏览 5
提问于2022-06-22
得票数 0
回答已采纳
2
回答
如何安排从
BigQuery
表
到
云存储
的
导出?
google-cloud-platform
、
google-bigquery
、
google-cloud-storage
我已经
在
BigQuery
中
成功地安排了我
的
查询,结果被保存为数据集中
的
表
。我看到了很多关于将在
中
传输到
BigQuery
或Cloud
的
信息,但我还没有发现任何关于将导出从(
BigQuery
表
)调度
到
云存储( Cloud )
的
信息。
是否
有可能安排将
BigQuery
表
导出到云存储,以便我可以进一步安排
通过<
浏览 6
提问于2020-01-10
得票数 3
1
回答
Google
云批量数据
流
问题
google-app-engine
、
serverless
、
dataflow
、
serverless-architecture
当我要
从一
个
bigquery
表
中
读取数据并将其写入
到
另一个
bigquery
表
中
时,使用批处理数据
流
,使用apache beam和java。
在
同一项目中创建
的
临时数据集
在
1天后过期,但临时数据集仍是Biquery
的
一部分。 我
在
google
云中使用批量数据
流
,使用模板创建。 如
浏览 12
提问于2019-12-11
得票数 0
1
回答
使用数据流在
BigQuery
表
之间进行流式更新
google-bigquery
、
google-cloud-dataflow
、
apache-beam
正在尝试
在
云数据
流
作业
中
启用流式处理,该作业需要
从一
个
BigQuery
表
中
读取数据,然后使用附加模式将其写入
另一个
BigQuery
表
。为此,我
在
Java代码
中
启用了options.setStreaming(true);。<TableRow>into(FixedWindows.of(Duration.standardMinutes(1)))); 最后使用
浏览 0
提问于2019-03-06
得票数 0
1
回答
在
google
bigquery
中
,
从一
个
表
到
另一个
表
的
数据传输
是否
通过
流
缓冲区
?
google-bigquery
使用GBQ
的
插入流API时,数据遵循如下图所示
的
生命周期。
浏览 0
提问于2018-07-31
得票数 0
回答已采纳
1
回答
在
GKE上插入
BigQuery
流失败
go
、
google-cloud-platform
、
google-bigquery
、
google-kubernetes-engine
我们有一
个
拥有3x n2-highcpu-8节点
的
GKE集群,用GO编写
的
web应用程序可以扩展
到
3
个
实例(每个节点1
个
),将所有请求都使用流传输到
BigQuery
,我注意到了非常奇怪
的
行为:
在
高应用程序使用率期间,应用程序启动
的
3
个
实例中有2
个
在
流式写入时100%失败,错误是仅写入“超过上下文截止日期”,而当我删除这2
个
pod时,它们又开始接
浏览 19
提问于2020-12-04
得票数 0
回答已采纳
1
回答
为什么查询
表
返回行时
表
元数据显示为零?
google-cloud-datalab
我已经将数据插入
到
Cloud Datalab
中
的
一
个
表
中
。当我查看表元数据时,它显示该
表
的
大小为0,但是如果我对该
表
进行查询或采样,则可以看到数据。怎么回事?
浏览 0
提问于2015-12-15
得票数 0
2
回答
Google
BigQuery
流
-插入时间
json
、
ssis
、
google-bigquery
我首次
在
客户端项目上使用
Google
BigQuery
,并使用SSIS插件(CData)
在
SSIS
中
创建包,将数据插入
到
表
中
(这是一
个
奇怪
的
组合,但我
的
客户需要这样
的
组合)。我希望将大约100 k行插入
到
BigQuery
表
中
,但是,当我想对该
表
执行进一步
的
更新查询时,无法执行
浏览 1
提问于2017-11-29
得票数 1
2
回答
BigQuery
流
和删除,而
流
缓冲区
不是空
的
?
google-bigquery
、
streaming
BigQuery
不会直接流到他们
的
长期存储
中
,他们首先将其放入一
个
写优化
的
存储
中
,并定期将其刷新到主存储
中
。 在下面的用例
中
,我想更好地理解
BigQuery
流
缓冲区
。1)如果我删除
bigquery
表
,并立即以相同
的
名称重新创建一
个
新
的
bigquery
表
,此时某些记录仍然保存在
浏览 1
提问于2018-01-18
得票数 1
回答已采纳
1
回答
将数据从API流到
BigQuery
时延迟
google-cloud-platform
、
google-bigquery
、
google-cloud-pubsub
因此,我一直
在
尝试从
Google
到
BigQuery
的
实时中
的
流
数据。 数据从GSC
中
检索并流到
BigQuery
流
缓冲区
中
。但是,
在
流
缓冲区
被刷新之前,我经历了很长
的
延迟(最多2小时或更长时间)。因此,数据保留在
流
缓冲区
中
,但不在
表
中
浏览 0
提问于2018-04-11
得票数 0
1
回答
谷歌
BigQuery
-将数据流式传输到
BigQuery
java
、
google-cloud-platform
、
google-bigquery
我正在使用谷歌
BigQuery
为我
的
项目,现在我正在尝试插入一
个
新
的
行
到
基于此https://cloud.
google
.com/
bigquery
/streaming-data-into-
bigquery
#
bigquery
-stream-data-java
的
BQ private void insertRowsToBQ(MyCustomObject data) { Stri
浏览 21
提问于2021-03-24
得票数 1
2
回答
如何仅在
BigQuery
中
查询
流
缓冲区
中
的
数据?
google-bigquery
我们
在
BigQuery
中有一
个
按日分区
的
表
,它是
通过
流
插入更新
的
。 说:“当流到分区
表
时,
流
缓冲区
中
的
数据对于_PARTITIONTIME伪列有一
个
空值”。但是,如果我查询select count(*) from table where _PARTITIONTIME is NULL,它总是返回0,尽管bq show告诉我
流
<em
浏览 0
提问于2017-01-26
得票数 8
回答已采纳
2
回答
如何将
Google
中
的
数据附加到
BigQuery
中
?
google-bigquery
每天我都会把一些数据放到谷歌
的
表格
中
,今天
的
数据覆盖了昨天
的
数据。 我根据这个
Google
创建了一
个
BigQuery
表
--初始连接工作,来自工作
表
的
数据可以
在
BigQuery
中正确查询。Q:明天谷歌表格
中
的
数据将被覆盖。如何将
中
的
日常数据从
Google
附加到
BigQuery
<
浏览 10
提问于2022-05-30
得票数 0
4
回答
如何在
google
中
设置作业依赖关系?
google-bigquery
我有几个工作,比如从
google
云存储桶中加载一
个
文本文件
到
bigquery
表
,
另一个
是
通过
某种转换将数据
从一
个
表
复制
到
另一个
表
的
预定查询,我希望第二
个
任务取决于第一
个
任务
的
成功与否,如果有可能,我们如何在
bigquery
中
实现这一点?诚挚
的</em
浏览 0
提问于2020-01-31
得票数 3
回答已采纳
1
回答
如何实现
bigquery
传输:数据集投影
google-bigquery
谷歌似乎
在
BigQuery
的
数据传输
上开辟了一
个
新
的
(beta)特性:数据投影。 似乎我们可以
通过
数据采样将所有
表
复制
到
另一个
数据集。遗憾
的
是,缺乏关于如何
从一
个
数据集
到
另一个
数据集
的
表
样本转换
的
文档。
在
源
的
定义
中
,会询问
浏览 2
提问于2020-04-06
得票数 0
1
回答
BigQuery
更新或删除DML
google-bigquery
最近
通过
BigQuery
流
(tabledata.insertall)写入
的
表
不能使用UPDATE或DELETE语句进行修改。要检查表
中
是否
有
流
缓冲区
,请检查名为tables.get
的
部分
的
streamingBuffer响应。如果没有,则可以使用UPDATE或DELETE语句修改
表
。当我试图修改我
的
表
时(最近插入了数据行,几天前创建了
表</
浏览 2
提问于2017-03-23
得票数 0
回答已采纳
2
回答
何时将流到
BigQuery
表
的
数据可用于查询操作?
java
、
google-app-engine
、
google-bigquery
我有一
个
用例,在这个用例
中
,我执行以下操作:
在
t1上运行一些查询来聚合数据并将它们存储
在
另一个
表
中
。在上面的用例
中
,我今天遇到了一
个
问题,我运行
的
查询
在
聚合数据中有一些差异。当我稍后从
BigQuery
的
Web
浏览 8
提问于2017-03-01
得票数 1
回答已采纳
2
回答
如何将数据添加到
BigQuery
中
,而不存在速率限制问题?
python
、
pandas
、
api
、
google-cloud-platform
、
google-bigquery
目前,我有一
个
系统,希望
通过
Google
函数将该系统
中
的
数据发送到
BigQuery
(使用Python)。我
的
想法是分两
个
简单
的
步骤:
Google
功能将数据解压缩并存储
在
Google
包
的
Google
BigQuery
表
中</
浏览 5
提问于2022-06-28
得票数 0
回答已采纳
2
回答
获取
BigQuery
表
中
的
行数(
流
缓冲区
)
python
、
google-bigquery
我正在
通过
流进行插入。
在
UI
中
,我可以看到以下行计数:有什么方法可以
通过
API获得这个信息吗?当我这样做时:client =
bigquery
.Client()table = client.get_table(dataset.table('table_streaming')
浏览 0
提问于2019-02-10
得票数 2
回答已采纳
1
回答
来自不同请求
的
联接
BigQuery
表
失败
google-cloud-platform
、
google-bigquery
我有两
个
想要加入
的
数据集,但是当我试图加入它们时,GCP给了我一
个
错误,它无法
在
同一
个
区域内找到
另一个
表
,这是正确
的
,因为它驻留在不同
的
区域。因此,一
个
托管
在
EU,
另一个
托管
在
europe-west1。我想更改一
个
数据集
的
区域,但这是不可能
的
,文档还提到:
在
地点间移动
BigQuer
浏览 4
提问于2021-04-28
得票数 1
回答已采纳
点击加载更多
热门
标签
更多标签
云服务器
ICP备案
对象存储
云点播
即时通信 IM
活动推荐
运营活动
广告
关闭
领券