如何批量上传数据到Google App Engine数据存储区？
要批量上传数据到Google App Engine的数据存储区，您可以使用以下方法：
- 使用Google Cloud Storage Transfer Service：这是一个允许您从Amazon S3、Google Cloud Storage、HTTP/HTTPS URL等源批量传输数据到Google Cloud Storage的服务。您可以使用Google Cloud Console或gcloud命令行工具创建传输作业。
- 使用Google Cloud SDK：Google Cloud SDK是一个命令行工具，可以让您轻松地管理Google Cloud Platform的资源。您可以使用
gsutil命令行工具将数据从本地或其他云存储服务批量上传到Google Cloud Storage。 - 使用Google Cloud Storage Client Libraries：Google Cloud Storage提供了多种编程语言的客户端库，您可以使用这些库在应用程序中批量上传数据。这些库提供了高级功能，如重试、分页、加密等。
- 使用Google Cloud Dataflow：如果您需要对大量数据进行转换或处理，可以使用Google Cloud Dataflow。它是一个高性能、高可扩展的数据处理服务，可以从多种来源读取数据，并将其写入Google Cloud Storage。
推荐的腾讯云相关产品和产品介绍链接地址：
- 腾讯云对象存储：https://cloud.tencent.com/product/cos
- 腾讯云数据迁移：https://cloud.tencent.com/product/dts
- 腾讯云数据处理：https://cloud.tencent.com/product/data
请注意，腾讯云不是Google Cloud Platform的官方合作伙伴，因此我们不能提供与Google Cloud Platform相关的产品和服务。
相关·内容
不使用App Engine，仅使用数据存储区。在创建第一个实体时，门户会要求您选择一个区域。
但是你如何看待它在创建后运行的区域呢？
浏览 3提问于2018-07-10得票数 6
对于我的小框架，我希望能够在AppEngine项目之外使用谷歌ORM数据存储，因为我现在已经习惯了这种AppEngine模式，对于一些小的快速修改来说，这是很好的。我不能对我所有的项目都使用Google AppEngine，因为它在文件大小和文件数量上的限制。
如果有一个项目提供与AppEngine数据存储相同的名称的ORM，那么也是一个很好的替代方案。你知道我在哪里或者如何找到这样的解决方案吗？谢谢。
浏览 2提问于2009-07-19得票数 5
回答已采纳
我有一个用mysql编写的小应用程序，我想将其移植到AppEngine，但我就是找不到将php+mysql数据移植到数据存储的方法。编辑:我说伪对象是因为我不想使用它们，它们只是一种克服GAE设计缺点的方法。这里有一个想法，如何通过一个接一
浏览 0提问于2009-08-28得票数 4
我可以使用appcfg.py download_data选项，但在这种情况下，我不想备份到本地计算机。我想要一种更快的方式在GAE中创建文件，将其保存到Google Storage或其他地方，然后从多台机器上下载。
我假设我将需要在任务中执行此操作，因为完成操作可能需要30秒以上的时间。
浏览 0提问于2011-09-09得票数 2
回答已采纳
我需要将大约4000条记录上载到数据存储区。
它们当前为CSV格式。如果有人能给我指点或解释如何将数据批量上传到GAE，我将不胜感激。
浏览 5提问于2009-04-12得票数 5
1回答
应用引擎批量加载器性能
、、、、
我使用App Engine批量加载器(Python Runtime)将实体批量上传到数据存储。我上传的数据是以专有格式存储的，所以我实现了自己的连接器(在bulkload_config.py中注册)来将其转换为中间python字典。我只是创建新的数据存储实体(基于我的input_dict)，并返回它们。
现在，一切都运行得很好。然而，批量加载数据
浏览 2提问于2010-09-09得票数 5
回答已采纳
我还在使用数据存储，并尝试使用终端和CSV文件将数据批量上传到数据库，如下所示：
import datetimefrom google.appengine.tools import bulkloader('close', float)])
loaders = [F
浏览 6提问于2013-05-28得票数 2
我有一个10MB的地理位置数据的CSV文件，昨天我试图上传到我的App Engine数据存储。我按照的说明使用了批量加载器/appcfg工具。数据存储表明记录已上载，但它花费了几个小时，并耗尽了我当天的全部CPU配额。在我实际超过我的配额之前，这个过程在接近尾声的时候错误地崩溃了。但不用说，10MB的数据不应该需要这么多的时间和电力。那么，有没有其他方法可以将此CSV数据放入我的A
浏览 1提问于2011-04-22得票数 1
有没有一种方法可以将数据库内容上传到Google App Engine for Java，就像Python版本中的批量上传程序脚本一样？如果没有，您将如何将现有数据添加到GAE/J应用程序中？
浏览 0提问于2009-04-20得票数 4
回答已采纳
db.polymodel.PolyModel类型的实体批量上载失败，出现以下错误(我已设法上载了其他实体，并且所有导入都应该存在)： File "c:\program files (x86)\google\google_appengine\google\appengine\tools\ap main(sys.argv)
File &q
浏览 0提问于2013-09-02得票数 0
我目前正在将一个网站迁移到Google App Engine。以前，所有的图像和静态资源(100MB的东西)只是部署的一部分。我需要从我的磁盘批量上传这些图像到GAE，并怀疑我需要某种脚本来做到这一点。对最好的方法有什么想法或建议吗？
浏览 0提问于2011-04-15得票数 0
回答已采纳
我在Python3中的一个Google App Engine项目中工作，该项目需要允许用户上传超过32 on限制的文件。理想情况下，我希望这些文件也能在我的存储桶中结束。我找到了Python2的指南，但它(A)没有告诉你如何将blobstore导入到项目中，(B)似乎表明这种方法是针对Python2的。
如果有任何帮助，我将不胜感激！
浏览 1提问于2019-09-23得票数 1
我正在尝试使用上面列出的批量上传程序将一些数据上传到GAE；appcfg.py create_bulkloader_config --filename=bulkloader.yaml
浏览 0提问于2011-08-08得票数 1
回答已采纳
以前可以通过批量加载程序下载并上传到本地开发服务器。然而，由于不支持oauth2，批量加载器下载已经几个月不起作用了。一些地方建议从云存储备份下载，并通过批量加载程序或直接解析备份上传到本地数据存储。然而，这两个似乎都不再起作用了。是否存在用于将实时数据存储区拷贝到本地开发数据存储区的当前有效方法？
浏览 0提问于2016-05-06得票数 1
我正在编写一个App Engine Standard python应用程序，它访问数据存储。但是，导入google-cloud-datastore库会触发此错误： File "/usr/li
浏览 12提问于2018-02-14得票数 1
我一直在阅读有关用于批量上传Google App Engine的remote_api和bulkloader.yaml配置文件的文章，但我真正想做的是用本地数据存储的内容替换我在云上的活动数据存储。
浏览 1提问于2011-02-09得票数 2
回答已采纳
我计划使用terraform来设置Google Cloud数据存储，但在文档中找不到任何数据存储。这个资源在terraform中可用吗？
浏览 0提问于2018-04-11得票数 3
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
