腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
0
回答
BigQuery
数据
和
计算
节点
、
Google
BigQuery
是否使用不同的
节点
来存储
数据
和
计算
查询?我看到Amazon Redshift使用的
节点
可以同时完成这两个功能,而Snowflake有一个正在申请专利的架构,该架构将存储层
和
计算
层分开。 谢谢你的帮助。
浏览 3
提问于2017-06-01
得票数 0
回答已采纳
1
回答
BigQuery
API通讯公共互联网/google intranet
、
、
我正在使用来自谷歌
计算
节点
的
BiGQuery
应用程序接口(在DataFlow作业中)。我的
数据
流
计算
引擎在VPC内。我正在对我们项目中的
数据
集调用一些SQL命令。我知道
BIgQuery
和
GCS存储桶不会在我们的VPC内。但是,我找不到任何关于API调用是如何路由的文档。它们将使用公共互联网进行路由,还是将通过google私有内部网(因为呼叫的始发是在
计算
节点
内)。
浏览 25
提问于2019-05-14
得票数 0
3
回答
以高效的方式从
BigQuery
读取到Spark?
、
、
、
当使用从
BigQuery
读取
数据
时,我发现它首先将所有
数据
复制到Google Cloud Storage。然后将这些
数据
并行读取到Spark中,但当读取大表时,复制
数据
阶段需要很长时间。那么有没有更有效的方法将
数据
从
BigQuery
读取到Spark中呢? 另一个问题:从
BigQuery
阅读由2个阶段组成(复制到GCS,从GCS并行阅读)。
浏览 6
提问于2017-01-04
得票数 7
回答已采纳
1
回答
使用
数据
流的处理偏向于一个
节点
。
、
、
处理不是由DataFlow分发的,而是由一个
节点
处理的。 因为执行起
浏览 0
提问于2019-03-20
得票数 0
1
回答
在
BigQuery
中更新购物客户级
数据
的最佳方法
、
出于报告的目的,我正在考虑将我们的购物
数据
移动到
BigQuery
。我通过shopify API对customers端点进行分页,并获得所有客户级
数据
。然后我将其导出为csv,然后将其存储在google云存储上,然后导入到
BigQuery
。我的问题是,考虑到当前customer datamart上的一些条目(例如,总订单数)可能已经更改,并且自上次表更新以来可能已经创建了一些新客户,那么处理增量
数据
加载的最佳方法是什么。
浏览 0
提问于2021-03-06
得票数 1
1
回答
Youtube Data,如何从两个不同的
数据
源(例如两个
BigQuery
表)创建
计算
字段
、
从指令视频“创建新的
计算
维度
和
度量,然后可以在图表
和
控件中使用”,它展示了如何从一个
数据
源创建一个
计算
字段。但是,我需要一个
计算
的字段,它将对来自两个不同
数据
源的字段的值进行汇总(具体来说,是两个
BigQuery
表)。 反正我也找不到这么做。除了,我可以创建一个
BigQuery
视图,将
BigQuery
视图中的两个
BigQuery
表的值相加。然后使用这个
BigQuery
视图作为我的新
浏览 0
提问于2018-04-30
得票数 1
回答已采纳
1
回答
将
数据
从K尼姆上载到
Bigquery
/ GCS
、
、
、
我正在使用KNIME的
数据
库连接&
数据
库写入器
和
Simba的JDBC驱动程序来尝试将
数据
集上传为
BigQuery
表。是否有人有将
数据
从KNIME上传到
BigQuery
的经验,或者知道一个解决办法,例如GCS?
浏览 4
提问于2019-07-16
得票数 0
1
回答
BigQuery
和
Data的使用(成本)
、
、
、
我想在我的项目中查看
BigQuery
成本。我根据以下功能将日志下载到表中:protoPayload.methodName = "jobservice.jobcompleted"protoPayload.serviceName = "bigquerybiengine.googleapis.com"
浏览 10
提问于2022-02-21
得票数 1
1
回答
Google特定应用程序
数据
的
BigQuery
数据
传输服务
、
、
谷歌
BigQuery
数据
传输服务允许我自动传输特定的应用程序
数据
吗?谢谢。
浏览 5
提问于2022-06-22
得票数 0
回答已采纳
3
回答
基于pods或部署的GKE账单明细
、
、
、
有没有可能以某种方式获得这些
数据
?我想知道每个部署或pods的网络+
计算
成本是多少。或者是否有可能至少在集群级别上拥有它?这个细目在
BigQuery
中可用吗?
浏览 14
提问于2018-08-29
得票数 2
回答已采纳
2
回答
写入
BigQuery
我的问题是关于从
BigQuery
标准SQL写入
BigQuery
。 我有一个要求,我必须在Standard中进行一些
计算
。在这些
计算
之后,我必须将这些
计算
数据
保存到
BigQuery
。从标准SQL中将
数据
插入
BigQuery
的标准方法是什么?
浏览 2
提问于2017-03-27
得票数 0
回答已采纳
1
回答
逻辑应该放在底层SQL查询中还是在中?
、
在我的过去,使用引擎报告,如水晶报告,SSRS
和
其他,最好的做法是将
数据
提供给报告引擎,并让它处理数字
和
逻辑。逻辑通常是聚合、枢轴表以及一些基本的数学
和
if语句。今天,使用
BigQuery
和
DataStudio,我被告知相反的前提是
bigquery
将具有更好的
计算
聚合的性能。那么,旧的最佳实践是否仍然有效,还是将
计算
放在底层
bigquery
语句中真的是使用组合式"
BigQuery
和
浏览 4
提问于2020-07-20
得票数 0
回答已采纳
2
回答
Google
BigQuery
:通过API批量加载
首先,有没有可能通过它的API批量加载到Google
BigQuery
中?如果是,那要多少钱呢?我将每天插入一百万行。
浏览 0
提问于2018-08-15
得票数 1
1
回答
BigQuery
ML如何处理空数值特性?
使用分类特性,我们可以看到
BigQuery
ML通过在创建的模型上运行ML.WEIGHTS自动创建"_null_filler“虚拟变量,这是有意义的。在数字特性的情况下,丢失的值是用平均值还是其他什么来
计算
的?这两种行为是否在官方文档中提到过?
浏览 1
提问于2018-12-11
得票数 3
回答已采纳
1
回答
youtube
bigquery
在同一日期在同一个表上传输回填,我在6月份运行它时得到的计数与9月的运行相比,有不同的计数。
、
今年6月,我在youtube
bigquery
上对2017-04-10的
数据
进行了回填,我在“资产估计收入”方面总共获得了120,000+记录。9月份,我在youtube
bigquery
上运行了同一天的传输回填,总共获得了98,000条“资产估计收入”的记录。 youtube
bigquery
是否应该转移2017-04-10的回填
数据
?当运行youtube
bigquery
传输回填的日期为2017-04-10时,Google
bigquery
是否返回了他们为2017-
浏览 1
提问于2017-09-29
得票数 0
回答已采纳
2
回答
是否可以创建每天将SQL
数据
库写入MongoDB的管道?
、
、
、
、
我需要确定将创建
BigQuery
数据
库的
数据
ETL工作流与react/node web应用程序相结合的最佳方法。data使用气流创建工作流,该工作流(a)将日常
数据
备份到GCS中,(b)将
数据
写入
BigQuery
数据
库,(c)运行一组SQL在
BigQuery
中创建附加表。我已经有了一个使用mongoose编写的
节点
/快速API,它连接到一个MongoDB集群,这种方法将允许我保留该API。 使用nodejs库创
浏览 0
提问于2020-04-20
得票数 4
回答已采纳
1
回答
抛出“查询执行期间超出的资源”的大查询
、
在Google
BigQuery
中,我正在运行一个使用组by并接收错误的查询,“在执行查询过程中,资源超出了在分配的内存中无法执行查询。峰值使用率:限制的152%。
浏览 3
提问于2020-08-20
得票数 2
2
回答
以预定义的顺序运行多个云sql
和
bigquery
查询的选项有哪些
、
我需要在GCP
BigQuery
和
GCP CloudSql之间执行定期
数据
清除和
数据
加载操作。这涉及到在GCP
BigQuery
和
GCP cloud SQL中以预定的顺序运行多个查询,并在后续查询中使用早期查询的查询结果。选项2:我正在考虑的另一个选项是使用gcp
计算
linux引擎VM作为我的控制器,以执行跨gcp cloud、SQL、mysql
数据
库
和
GCP
bigQuery
的操作。这应该允许我运行一系列交错的<e
浏览 2
提问于2021-03-02
得票数 0
1
回答
未能部署云
数据
融合“将
数据
从MySQL传输到谷歌
BigQuery
”模板管道
、
、
、
我刚刚尝试过云
数据
融合,Transfer Data From MySQL to Google
BigQuery
模板管道。在配置了该设置之后,我在部署管道时得到了下面的错误。有什么建议吗?从云
数据
融合集线器中选择Transfer Data From MySQL to Google
BigQuery
管道,将创建一个新管道。在MySQL
节点
中配置某些设置(警告:不能修改
BigQuery
节点
)。 单击部署按钮。
浏览 3
提问于2019-04-26
得票数 2
2
回答
为什么
BigQuery
有自己的存储空间?
BigQuery
有自己的存储系统,与完全分离。 我的问题是:为什么BQ不像Hadoop那样直接处理存储在GCS上的
数据
?这种设计的好处
和
必要性是什么?
浏览 1
提问于2019-01-17
得票数 1
回答已采纳
点击加载更多
热门
标签
更多标签
云服务器
对象存储
ICP备案
云点播
实时音视频
活动推荐
运营活动
广告
关闭
领券