我正在对google存储执行一个提取查询，如下所示： job_config = bigquery.ExtractJobConfig() extract_job.result() 它返回一个ExtractJob类，根据谷歌文档(https://googleapis.dev/python/bigquery/1.2
浏览 24提问于2021-06-16得票数 0
我每隔2-3分钟用我的new服务器上的数据向Google Cloud Storage存储桶中写入新的日志文件(管道分隔值)。我在一个Google Cloud Storage存储桶中有数千个~1MB的文件，并希望将所有文件加载到一个BigQuery表中。"bq load“命令似乎需要单独的</e
浏览 2提问于2013-05-22得票数 1
我真的很想使用BigQuery进行数据分析和开发商业智能。唯一令人担忧的是，我们的一些客户对云存储不太满意，因此我们有内部服务器为所有其他流程存储数据。据我所知，除了指定应该使用云中的哪个位置(美国或欧盟)外，BigQuery在数据集的存储上没有提供灵活性。有没有办法指定将BigQuery数据集存储在本地集群中？
浏览 55提问于2017-02-11得票数 0
回答已采纳
大家好，我是第一次使用GCP，当我使用模拟数据浏览一个项目的云函数示例时，我对每个云函数的异同感到困惑，我想要更清楚地了解它们的不同之处，因为对我来说，它们看起来太相似了。
浏览 21提问于2021-02-25得票数 1
回答已采纳
3回答
我正在尝试找出在谷歌云上存储数据的最佳方式。我的理解是HDFS不会工作，因为每次集群关闭，HDFS数据都会消失，所以我每次都必须从CSV转换到HDFS，这很耗时。似乎正确的策略是使用BigQuery，但是我不能确定BigQuery是否是持久性的？
浏览 20提问于2017-06-28得票数 0
回答已采纳
用于AES加密的密钥被加密并存储在GCS中。我已经开发了Javascript代码，它将执行以下步骤：const Storage =require(@google-cloud/storage)；const kms =require(@google-cloud
浏览 2提问于2019-11-15得票数 0
我在本地机器上开发了一个基于Tensorflow的机器学习模型。我想把它部署在Google Cloud Platform (Cloud ML Engine)中进行预测。该模型从Google Bigquery读取输入数据，输出预测只能用Google Bigquery编写。在运行模型预测之前，必须运行一些数据准备脚本。我已经将Google Cloud Storage用于模型存储，并将其
浏览 24提问于2019-02-28得票数 2
为了从Google Cloud函数连接到存在于不同GCP项目中的Google Cloud BigQuery，我创建了BigQuery客户端，如下所示： const {BigQuery} = require('@google-cloud/bigquery'); keyFilename: 'path/to/service_account.json
浏览 15提问于2020-01-22得票数 1
回答已采纳
我已经安装了ODBC驱动程序，并将链接服务器配置为在MS SQL SERVER中使用。在驱动程序中，我启用了高吞吐量API，并为我的项目启用了google存储API。我的驱动程序安装在C:\Program Files\Simba ODBC driver for Google BigQuery\
但是我没有在lib目录中看到BigQueryHTAPI_sb64.dll在安装驱动程序的过程中是否会安装d
浏览 26提问于2020-05-26得票数 0
2回答
我正在创建一个自动脚本，从FTP下载文件并将它们存储到BigQuery中。import pandas as pd
data_xls = pd.read_excel('file_on_ftp.xlsx&#x
浏览 0提问于2019-02-18得票数 1
回答已采纳
1回答
我有一个Jypyter笔记本，它使用Pandas作为工具访问大型查询：这在我的本地机器上运行得很好(事实上，太好了！)但是，当我将相同的笔记本加载到云DataLab时，我得到：这似乎相当令人失望！最可取的理由是不必将代码从我们在本地
浏览 1提问于2016-06-13得票数 5
回答已采纳
2回答
我想在Google Big Query中启动一个数据仓库，但我不确定如何实际安排作业来将数据放入云中。
给出一些背景知识。我有一个托管在本地的MySQL数据库，目前我每天晚上都会做一个演示作为备份。我的想法是，我可以将这个转储发送到Google Cloud，并让它将数据导入Big Query。我认为我可以发送转储，然后可能使用云调度函数来运行打开转储并执行此操作的程序，但我不确定这些服务如何组合在一起。我是Google Cloud的新手，所以如果有更好
浏览 0提问于2019-09-25得票数 0
4回答
在朱庇特笔记本中，我试图使用BigQuery服务器上的类似sql的查询从BigQuery导入数据。然后我将数据存储在一个dataframe中：os.environ["GOOGLE_APPLICATION_CREDENTIALS"]="credentials.json"
s
浏览 2提问于2018-11-22得票数 16
1回答
我是BigQuery的新手，我正在努力了解VPC如何为BigQuery项目工作。我有一个BigQuery项目，它从其他几个BigQuery项目中导入数据(没有VPC，而是同一个组织)。我还需要连接到VPC网络中的一个项目(仍然是同一个组织)。我阅读这个VPC项目的唯一方法是
我希望能够在我自己的项目中读写VPC项目
浏览 2提问于2020-05-27得票数 0
我有一个带有nodejs & mysql的遗留电子商务应用程序。现在，我想将这个mysql数据添加到bigquery数据集中。
mysql和bigquery应该同步，(15到30分钟的延迟并不重要
浏览 1提问于2018-03-26得票数 0
我正在尝试使用BigQuery存储API获取一个巨大的BigQuery表。目前，我使用一个流顺序获取数据。该程序将在使用数十个虚拟CPU的服务器上运行，因此我希望并行化表的获取以获得性能。我使用的bq存储版本是google.cloud.bigquery.storage.v1，我在中看到，为了并行计算多个流，可以指定一个分片策略为BALANCED，但它看起来
浏览 0提问于2021-06-15得票数 0
1回答
我用它来设计30 TB文本文件的存储，作为在Google云上部署数据管道的一部分。我的输入数据是CSV格式，我希望尽量减少为多个用户查询聚合值的成本，这些用户将使用多个引擎在云存储中查询数据。使用云存储进行存储，并链接大查询中的永久表以进行查询，或使用Cloud表进行存储，并在计算引擎上安装HBaseShell来查询大表数据。基
浏览 0提问于2019-01-24得票数 0
回答已采纳
1回答
我想访问计算引擎VM中存在的文件。我必须从GCE中读取文件，并需要使用云数据流中的python SDK将文件转换为GCS。如果有人建议我做这件事，我会帮上大忙的。
浏览 0提问于2019-10-06得票数 0
我正在构建一个应用程序，其中我必须检测购买是测试购买(从测试帐户进行)还是来自真实用户的真实购买。请注意，该应用程序已经处于活动状态，并且我正在使用的SKU与生产环境中的SKU相同。Google可以检测购买是否是测试，因为它会显示一条消息(“这是一个测试订单，您将不会被收费”)，但我正在寻找一种方法来检测编程。
浏览 4提问于2016-02-29得票数 5
我正在尝试在数据融合中设置一个非常简单的管道，它从BigQuery获取一个表，然后将数据存储到Google Cloud Storage中。有了下面的管道设置，就很容易了。我们首先读取bigquery表和模式，然后将数据存入Google Cloud Storage存储桶中。这是可行的，但问题是，我运行的每个新传输都会创建一个新映射和一个新文件。我想要做的是用每次新<
浏览 0提问于2019-11-06得票数 1
云服务器
ICP备案
对象存储
云点播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号