腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如
何在
GCP
BigQuery
联邦
查询
中
使用
查询
参数
、
我有一个基于
gcp
的环境。我在
gcp
BigQuery
中
使用
标准SQL脚本,并对cloudsql MySql
使用
联邦
查询
。
联邦
查询
从cloudsql mysql数据库中选择数据。我需要根据依赖于
BigQuery
中
数据的条件从cloudsql mysql数据库中选择数据。我在
gcp
bigquery
中
使用
标准sql脚本
中
的变量来存
浏览 75
提问于2021-02-01
得票数 1
回答已采纳
2
回答
以预定义的顺序运行多个云sql和
bigquery
查询
的选项有哪些
、
这涉及到在
GCP
BigQuery
和
GCP
cloud SQL
中
以预定的顺序运行多个
查询
,并在后续
查询
中
使用
早期
查询
的
查询
结果。我正在考虑以下几个选项 Option1 :
使用
使用
“联合
查询
”()的
BigQuery
“计划
查询
”。这是很好的,因为在
gcp
cloud SQL数据库
中
触发“只读”
查询
浏览 2
提问于2021-03-02
得票数 0
1
回答
GCP
Bigquery
-
联邦
查询
中
的
查询
参数
、
、
、
mysql_table where id > ('|| bq_last_id ||')"';我得到以下错误 无效表值函数external_query无法从MySQL服务器获取
查询
架构。select * from ext
浏览 8
提问于2022-01-12
得票数 0
回答已采纳
1
回答
如何通过
bigquery
删除cloudsql mysql记录。联合
查询
提供错误“未能从MySQL服务器获取
查询
模式”
、
、
你好,谷歌云和
bigquery
专家:-)我在()上查看了Cloud
联邦
查询
文档。它清楚地提到"external_database_query (string):是外部数据库的SQL方言(MySQL或Postgr
浏览 9
提问于2021-01-13
得票数 0
2
回答
当我在脚本中
使用
连接时,
GCP
BigQuery
消息"Not : Connection“
、
、
我正在
使用
GCP
bigquery
。我定义了一个外部连接"myconnectionid“。这种连接类型为“cloudsql - MySQL”,对于从
bigquery
到cloudsql实例运行的fedarated
查询
来说,它工作得很好,如下所示。SELECT * FROM 但是,当我试图声明一个SQL变量并将
联邦
<
浏览 7
提问于2021-01-08
得票数 3
回答已采纳
1
回答
BigQuery
联合
查询
--对云SQL性能的影响
、
当涉及到
联邦
查询
对Cloud SQL (MySQL)数据库的影响时,我很难找到关于
BigQuery
中
联邦
查询
的内部工作原理的文档。 我见过here说
联邦
查询
是只读的,这没有问题。我的问题是:
联邦
查询
是否与
使用
MySQL工作台等管理工具时对数据库的常规
查询
一样,或者
联邦
查询
是否有其他机制可用于读取底层表,而不会影响数据库的正常性能?例如,如果通过LOCK TABLE
浏览 14
提问于2021-01-26
得票数 3
1
回答
BigQuery
联邦
查询
的性能如何?
、
我正在重新设计一个服务,以便可以
使用
BigQuery
搜索大型数据集。最初,我打算每天晚上建立一个流程,将数据从CloudSQL流到
BigQuery
,但在研究阶段我意识到了
联邦
查询
。也许我遗漏了一些显而易见的东西,但我似乎找不到任何具体说明
BigQuery
联合
查询
是否与普通
BigQuery
查询
一样具有性能的东西。它似乎专注于在多个系统和
联邦
查询
中
存储数据的问题,这使得将MySQL (
浏览 8
提问于2020-04-20
得票数 0
回答已采纳
1
回答
如
何在
BigQuery
中最大限度地减少每次执行SQL
查询
的成本
、
、
我是
BigQuery
和
GCP
的新手。我正在
使用
BigQuery
中
可用的(大型)公共数据集,运行一个SQL
查询
--它基于一个简单的where子句从dataset
中
的一个表中选择一组数据。我只需要每月运行一次这个
查询
,其他操作就需要更频繁地运行(每小时)。 我的问题是,每次我这样做,都会导致
BigQuery
处理4+百万行数据,而运行这个
查询
的成本对我来说是快速增加的。有没有方法可以运行SQL
查询
并将数据
浏览 3
提问于2019-12-30
得票数 2
回答已采纳
2
回答
云SQL转
BigQuery
的成本
、
、
我有一个Cloud SQL数据库(作为PostreSQL),我想向
BigQuery
传输一份副本。这代表了1TB的数据(
使用
云SQL存储),超过100个表。 我想估算一下这种一次性的大数据传输的成本。当我阅读
BigQuery
和Cloud SQL定价的
GCP
文档时,我得到的印象是这是免费的:
BigQuery
导入是免费的,Cloud SQL网络出口到大陆内部的“其他谷歌产品”是免费的。我说的对吗?另外,我想通过
BigQuery
的“
联邦
查询
”来确认这是否可行
浏览 2
提问于2020-12-12
得票数 0
2
回答
我是否可以从
BigQuery
或Data
使用
禁用的公共IP连接到Cloud ( Server)?
、
、
、
我的数据库在Cloud ( Server)
中
。公共知识产权被禁用。 我是否可以从
BigQuery
或Data
使用
禁用的公共IP连接到Cloud ( Serve
浏览 5
提问于2022-03-14
得票数 0
回答已采纳
5
回答
如何将Google与Google集成
、
、
、
我正在设计一种解决方案,其中Google将用于存储应用程序正常功能
中
的所有数据(某种形式的OLTP数据)。预计随着时间的推移,这些数据将增长到相当大的规模。这些数据需要被输入到对分析的大
查询
中
,并且需要接近实时分析(作为最好的情况),尽管现实
中
可能会有一些滞后。但我正试图设计一种解决方案,将这种延迟降到最低限度。我的问题有三部分- 我是否应该
使用
Cloud来存储数据,然后将其移动到
BigQuery
,或者更改基本设计本身,以及最初
使用
BigQuery
浏览 4
提问于2017-09-22
得票数 11
1
回答
GCP
composer从桶
中
读取sql并将其推送到
bigquery
表
、
我们
使用
GCP
(气流管理)作为管弦乐工具,
使用
BigQuery
作为DB。我需要从另一个表(位于
bigquery
中
的两个表)将数据推入表
中
,但是方法应该被重新插入。因此,我编写了一个
使用
marge更新或插入的sql脚本。 marge脚本位于
GCP
编写器桶
中
,如何从存储桶读取sql脚本?读取sql文件后的,如
何在
bigquery
?上运行
查询
?
浏览 10
提问于2022-03-17
得票数 0
回答已采纳
1
回答
联合
BigQuery
成本和性能优化
、
、
我正在编写一个调度的
联邦
查询
,以便每天加载我的BiqQuery表。
BigQuery
表加载策略是重写。我的源是一个云SQL数据库(mysql实例)。我想知道从性能和成本优化的角度来看,从长远来看,加载我的
BigQuery
表的正确方法是什么?我是应该每天
使用
源数据覆盖我的
BigQuery
表,还是应该
使用
连接在我的
联邦
查询
本身
中
构建一个逻辑,以便仅检测源
中
的新添加内容,然后在每天计划的运行期间将它们添加到
浏览 0
提问于2020-05-13
得票数 1
2
回答
删除模块
参数
中
的引号?
、
、
datalab
中
的“parameterization”IPython笔记本
中
的
参数
化示例(在datalab/tutorials/
BigQuery
/下)显示了如
何在
WHERE子句中更改要测试的值。%sql --module get_dataFROMWHERE但是,这种语法似乎总是在
参数
周围插入引号当我传递不仅仅是一个简单值的
参数
时
浏览 5
提问于2015-12-15
得票数 1
回答已采纳
2
回答
如何将多字串作为
参数
传递给Google
BigQuery
中
的bq
查询
命令?
、
、
如何将多字串作为
参数
传递给Google
BigQuery
中
的bq
查询
命令?我的命令:bq
查询
\ --use_legacy_sql=false \-
参数
=param_value:string:$value\ "select @param_value“
使用
_
浏览 2
提问于2020-04-03
得票数 1
回答已采纳
3
回答
在谷歌
BigQuery
中流式传输PostgreSQL表
、
、
我想自动将数据从外部PostgreSQL数据库传输到我的
GCP
帐户
中
的Google Cloud Platform
BigQuery
数据库。到目前为止,我已经看到可以
使用
EXTERNAL_QUERY()函数
查询
外部数据库(MySQL或PostgreSQL),例如:https://cloud.google.com/
bigquery
/docs/但要实现这一点,数据库必须位于
GCP
Cloud SQL
中
。,是因
浏览 26
提问于2021-04-01
得票数 2
2
回答
将
BigQuery
联邦
表作为数据源在数据流
中
读取会引发一个错误
、
我在
BigQuery
中有一个
联邦
源代码,它指向GCS
中
的一些CSV文件。当我尝试将
联邦
BigQuery
表作为Dataflow管道的源读取时,它会引发以下错误: 1226 [main] ERROR com.google.cloud.dataflow.sdk.util.BigQueryTableRowIterator- Error reading from
BigQuery
table Federated_test_dataflow of dataset CPT_7414_PLAYG
浏览 5
提问于2016-03-24
得票数 4
回答已采纳
1
回答
从
BigQuery
(
联邦
/外部
查询
)
查询
不同GCS存储类
中
的文件/数据需要花费多少?
、
桶
联邦
-
查询
-标准有standard的存储类.桶
联邦
-
查询
存档有archive的存储类。根据官方的
BigQuery
定价: “从
BigQuery
查询
外部数据源时,将按
查询
读取的字节数收取费用。有关更多信息,请参见
查询
定价。还将负责将数据存
浏览 1
提问于2020-06-23
得票数 3
回答已采纳
1
回答
如何从大
查询
EXTERNAL_QUERY配置DBT源
、
在Big Query
中
,我
使用
了一个外部连接/
联邦
SQL
查询
(cloudSQL),我可以通过SELECT * FROM EXTERNAL_QUERY("
gcp
-name.europe-west3.friendly_name", "SELECT * FROM database_name.external_table;")从这个
查询
中
获取数据 现在我的问题是,在DBT
中
,如
何在
schema
浏览 2
提问于2021-07-06
得票数 0
2
回答
& Cloud
、
、
我想要访问连接到Cloud的大型
查询
。是否有可能将与Cloud副本连接起来?
浏览 0
提问于2020-08-05
得票数 1
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
谷歌推出Bigtable联邦查询,实现零ETL数据分析
如何用纯SQL查询语句实现神经网络
如何用纯SQL查询语句可以实现神经网络?
BigQuery提供脚本存储程序,可在单一请求执行多个陈述式
分析GitHub:最流行的许可证是什么?
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券