我们希望使用数据流从Pub-Sub流式传输PubSubmessage(json字符串)，然后写入云存储。我想知道在将数据写入云存储时，什么是最好的数据格式？我进一步的用例可能还涉及使用Dataflow再次从云存储读取数据，以便根据需要继续操作到数据湖。我在想的几个选项如下：
a)使用Dataflow将自身作为json字符串直接写入云存储？我假设云存储中的文件中的每一行都被视为一条消息，如果从云存储读取，然后处理到Datalake的进一步操作，对吗？
b)使用Dataflow将json转换为文本文件格式，并保存在云存储中
c)还有其他选择吗？
浏览 3提问于2018-08-02得票数 0
2回答
我一直在阅读，开发层和生产windows天蓝色云结构之间似乎有一些不同，但是我找不到开发层上哪些功能和什么与云结构相比的列表。
例如，如所见
云中所有的Windows环境都是相同的；测试或暂存区域没有什么特别之处。然而，在本地开发结构和云结构之间存在差异，这就是为什么在云中测试应用程序非常重要的原因。
(强调地雷)
我在很多地方都看到过这些不同的地方，但是.没什么可说的。
有人知道有什么资源可以描述这些差异吗？
浏览 3提问于2011-06-14得票数 6
回答已采纳
我在一个使用Swift存储的项目中，我想找到一些可以与Swift存储很好地配合使用的桌面工具。“Gladinet Destop”可能是个不错的选择，但它似乎不太适合Swift Storage。(它可以很好地满足其他云文件存储的需求。)有谁有什么建议吗？
浏览 1提问于2013-03-12得票数 0
我想创建几个云服务- Int、QA和Prod。其中每一个都将连接到不同的Db。
这些云服务是否需要“存储帐户”？--从概念上讲，云服务有可执行文件，而且它们必须位于物理位置。
注意:我不使用任何blobs/队列/表。
如果是这样，我必须创建3个单独的存储帐户，还是将它们链接到one
浏览 4提问于2014-03-13得票数 2
回答已采纳
1回答
我正在研究AWS，以解决我需要解决的特定情况。我有一个客户，我们提供一个大型的闭路电视解决方案。大约800个摄像头。我们现在正在尝试将此基础架构的一部分迁移到AWS中的云解决方案。
这是一个很大的步骤，取代了所有的现场存储，他们必须基于云的解决方案。
我一直在研究最好的解决方案来解决这个问题，我发现最好的解决方案可能是开发一个与Amazon Storage Gateway协同工作的解决方案。
问题是:谁知道在AWS上处理大量视频存储最有效的方法是什么？推荐的方法是什么？
注意:希望这个问题不会因为过于宽泛或基于观点而结束。我知道它正处在它的前沿。
浏览 2提问于2017-11-07得票数 0
1回答
在谷歌云AppEngine上运行，并从运行在同一实例上的dotnet应用程序访问它，有什么方便的选择吗？
浏览 15提问于2017-12-29得票数 0
回答已采纳
1回答
我正在云运行中运行一个非常简单的程序。我知道Cloud是无状态的，我不能访问在程序完成执行后生成的屏幕快照，但是我想知道在截图之后我能在哪里/如何访问这些文件，这样我也可以在我的云存储桶中存储对它们的引用
浏览 2提问于2022-08-04得票数 0
因此，我将我的subversion存储库存储在一些云(例如code.google.com)上，但由于各种原因，我需要将代码非公开。
我决定需要下载整个存储库并迁移到自己的svn服务器。
所以我开始用：
svnsync init DEST SRC
svnsync sync DEST
每次修改都需要0.5秒的时间！
幸运的是我的回购只有200次修改..。所以再等几分钟。但是，有20万或200万次修订的成熟项目呢？
2e6 * 0.5 / 60 / 60 / 24 ~约11天！
有什么比"svnsync“更快的东西可以从云下载您的回购吗？
浏览 2提问于2010-02-08得票数 6
回答已采纳
1回答
我有一个rackspace托管服务器，我想要“添加”更多的存储。我愿意考虑利用更便宜的云存储选项，而不是为将额外的驱动器实际添加到我的服务器上付费。
是否可以将can存储帐户作为网络驱动器安装在我的服务器上，并为iis站点添加虚拟目录以指向此驱动器，以便我的应用程序/iis可以像在本地存储云文件一样与云文件交互。理想情况下，我希望在不对当前应用程序进行任何更改的情况下完成这一任务。
这个是可能的吗？是明智的吗？
浏览 0提问于2016-05-13得票数 0
我对在web服务器上存储图片非常陌生。目前，我正在使用Google App Engine的Cloud SQL来存储我的数据库中的所有用户信息(用户名、密码等)。我读到了大多数人不把图片存储在数据库里的文章。
我关注的是云存储或云数据存储。我认为人们选择的路线是使用云存储。如果是这种情况，我需要帮助组织保存，检索，修改和删除的个人资料图片(用户定义)的存储。
我的想法是:要保存个人资料图片:将配置文件保存到云硬盘上的//profile pic/ .jpg _pic.jpg
我将有/1/profile pics/profile_pic.jpg，/2/profile pics/profile_pic
浏览 1提问于2014-07-05得票数 2
1回答
我需要在google云平台上存储json对象。我曾考虑过若干方案：
将它们作为文本(.json)文件存储在桶中。
使用json.dumps(obj)将它们作为文本存储在数据存储中。
将其解压缩到数据存储中的对象层次结构中。
选项1:拒绝，因为除了文件名之外，它没有其他的组织原则，并且不能被搜索。
选项2:易于实现，但不能使用dql进行搜索。
选项3:在与密钥和父密钥结构进行了多次争论之后，它才能正常工作。虽然它是可搜索的，但结果对象已被拆分并由父键关系连接在一起。太丑了！
除了在计算实例中设置mongodb之外，有没有任何方法可以在google云平台上存储和搜索结构较深的j
浏览 4提问于2017-07-19得票数 1
我有一个问题让我有点困惑。我有一个项目通过围栏在组织层面上被锁定。这是为了将访问云存储存储桶的网段列入白名单，因为用户无法通过服务账户或api进行身份验证，需要流式传输数据。
这很好，可以工作，但是我对如何在gcp中打开对无服务器环境的访问感到困惑。现在的问题是云构建。引入边界后，由于违反vpc控制，我无法再运行云构建。想知道有谁能告诉我如何实现这一点吗?显然，列出整个云构建ip范围不是一种选择。
浏览 21提问于2019-11-21得票数 5
回答已采纳
我需要一些关于我的亚马逊云设置的建议。
我有一个servicestack api，它接收图像和视频形式的流，这些需要保存在某个地方。同样的api还可以将这些流传送到客户端(网站、应用程序等)
这意味着大量数据正通过Internet传输并保存到磁盘上的某个位置。
在考虑定价时，这里的最佳设置是什么？我试过亚马逊云定价计算器，但很难计算出所有的数字。
我在想……-用于托管接口的普通ec2实例-用于保存图像和视频的S3 bukcet -用于分发图像和视频的CloudFront
有没有更好更便宜的方法？我在想，在这种设置中，数据传输和磁盘空间将是一笔巨大的成本。
浏览 1提问于2013-08-28得票数 1
1回答
向我的rails应用添加内容的推荐方式是什么？具有云托管图像的页面，如amazon S3和格式化文本？我想要的只是创建一个教程页面，可以很容易地与索引页链接。
有没有推荐的方法，而不是重复发明轮子？现在流行的宝石是什么？
浏览 1提问于2012-12-03得票数 0
我正在创建一个express js应用程序。我将在云铸造中跨多个服务器托管此应用程序。我正在寻找任何建议，我应该使用的会话管理选项。
浏览 0提问于2018-06-21得票数 0
回答已采纳
我有一个反应原生项目，上传照片到firebase DB。一旦最后一张照片上传到Firebase (或者更好，当照片正在上传到Firebase时)，我想将这些照片的副本发送到指定的Google Drive文件夹。我看到下面的链接提到了转移到其他存储桶，但看起来它们指的是云存储服务器位置。 关于复制的最佳路径(将照片同时保存在Firebase DB和Drive文件夹中)有什么建议吗？ https://cloud.google.com/storage-transfer/docs/create-manage-transfer-program#transfer_between_buckets
浏览 11提问于2020-08-25得票数 0
我想浏览我通过Visual Studio使用一些C#代码部署的云服务上的文件，以比较不同云部署之间的文件版本和修改日期。做这件事最好的方法是什么？
浏览 1提问于2014-11-08得票数 1
1回答
我在GITHUB和GCP(Cloud Build for deployments)上工作，工作很好。以下是以下步骤：
创建多个云函数，并使用相同的GIT存储库。
为每个云函数创建单独的云构建触发器，其中存储库中每个云函数文件夹中都有单独的cloudbuild.yml。
当相应的云函数脚本发生更改时，触发器将被运行。
现在，我需要将Cloud Build与GITLAB集成起来。我查看了文档，但发现只有webhook才是选项，触发器将基于整个存储库的更改。对于每个云功能或云运行，它都需要单独的存储库。没有选项可以选择存储库本身。
专家能否指导我如何进行这种集成，因为我们计划在存
浏览 7提问于2022-07-18得票数 0
回答已采纳
我正在尝试将数据从我的google云发布到一个网站。我已经创建了一个脚本，可以动态地将数据从我的设备上传到google云。我面临的问题是如何将数据从google云发布到网站。我只需要显示我在google cloud上的数据。
浏览 3提问于2020-08-03得票数 0
可能重复: 如何找到符合我要求的网络主机？
我正在建立一个照片收集/画廊共享网络应用程序。
我需要知道我应该考虑什么来储存。我的网站上只有几个gb。而且我不可能得到我需要的存储量，就像我有我的网站一样。
为此目的使用云服务有意义吗？是否可以使用像hotfile之类的在线存储服务？什么才是最好的？我想至少需要20-30 gb的空间。
提前谢谢。
浏览 0提问于2010-12-08得票数 2
1回答
我有一个spring客户端应用程序，它使用云服务器，我为每个环境都有一个分支，例如，客户端STAG指向中的STAG分支，我要做的是创建另一个名为common的分支，它包含整个环境中的公共属性。我想将STAG分支从客户端应用程序指向云服务器，以及指向公共分支，该分支检索所有环境中使用的所有公共属性，尝试通过定义相同的URL和不同的标签在application.yml的云服务器中使用复合类型。
尝试使用复合类型，但不起作用
spring:
profiles:
active: composite
cloud:
config:
server:
浏览 10提问于2019-07-10得票数 0
目前，我正在为我的数据库使用Firestore，并且我有一个用户集合。每当用户文档被创建或更新到用户集合时，云函数就会接收用户文档，并将其保存在El154搜索中。
我开始关注这个体系结构的可伸缩性。例如，假设数千个云函数开始一次向Elasticsearch写入文档，那么Elasticsearch将处理这个负载。谷歌云有更好的解决方案吗？
例如，这些云函数能否在队列中写入用户文档，并在队列的另一端具有云功能，获取100个文档并将它们大容量写入Elasticsearch。
我是谷歌云的新手，如果你能给我一些想法、视频和阅读的东西，我将不胜感激。
谢谢
浏览 2提问于2021-07-17得票数 1
回答已采纳
1.访问云通信工单页面；
2.“选择常见问题”一项选择“云通信配置变更”；
云通信配置变更这一项没有了，替换菜单选项是什么？
浏览 403提问于2017-09-27
回答已采纳
我使用Click在Google Compute Engine上部署了MEAN Stack。一切都很好，在云端和我的本地机器上运行。
当我尝试在开发人员控制台中浏览源代码时，我看到了云源工具的Getting startet屏幕。是否应该在创建实例时自动设置？
当我通过SSH进入实例时，我可以看到opt/myApp的内容。我希望在浏览源代码时也能看到这一点。
如果我尝试git克隆Cloud Repository，它是空的。
我目前使用的是试用版。也许这就是我不能浏览或克隆云存储库的原因？
浏览 3提问于2015-03-28得票数 0
2回答
我需要一些关于google云作为whole.Supposing的基本理解，我有一个android应用程序可以存储用户的联系方式，照片等等，在这种情况下-
1.我应该使用哪种服务-谷歌云存储还是谷歌硬盘？
如果我使用谷歌云存储，我如何做到这一点？这就是我们如何使用带有端点类的实体类创建应用程序引擎后端，从而将其保存到云的无模式NoSQL数据存储中吗？如果这样做，应用程序可以使用的存储空间是否有任何限制？
2.如果我使用谷歌驱动器，我如何做到这一点？我应该先用xml存储数据，然后将其保存到google驱动器中吗？
3.应用程序无原理图NoSQL数据存储与cloudSQL数据存储有什么不同，这更有利
浏览 3提问于2015-03-08得票数 5
回答已采纳
域名在万网，要买入60天才能转到腾讯云，现在还没到万网备案要幕布什么的比较麻烦请问域名不在腾讯云下可以在腾讯云备案吗60天后再转过来
浏览 1076提问于2016-03-21
2回答
Kubernetes部署的不同方式？
1.Kops 2.Terraform 3.Kubeadm
无论是内部部署还是云部署，哪一种都是最佳选择？请告诉我最好的资源。
浏览 1提问于2019-03-21得票数 1
这不是关于存储系统使用什么的问题，而是关于在移动平台(iOS和Android)上本地存储数据的可能策略的问题。
我不会使用AsyncStorage，因为数据不是加密的，我认为这个领域可能是一个很好的选择，但是我对其他选择持开放态度。
我的跨平台React本地应用程序处理一些应该是设备上的持久的合理数据。我打算坚持的意思是：
一些敏感的数据，未经用户许可，不能被iOS或Android删除/删除/清除。必须在每次应用程序升级时都可以获得的数据，例如在每个新版本中，这些数据必须保持不变，并且在App之后没有发生任何事情。如果应用程序处于后台(任务管理器)、关闭或重新启动，则不能删除/删除/清除数据。
浏览 4提问于2020-02-03得票数 0
回答已采纳
1回答
我的一个客户在托管他们自己的文档服务器时遇到了问题，所以他们正在考虑将他们的文档服务器和应用服务器迁移到云上。问题是，我们有一个应用程序将文档扫描到文档服务器(内部网络)上的特定文件夹中，现在使用云，该应用程序可能需要修改以发送文档。FTP已失效。我们正在寻找一个主机服务，允许我们映射服务器上的文件夹，或将使我们能够通过HTTP/HTTPS上传文档。有没有人能推荐一种我可以用来实现这一点的服务？请让我知道谢谢！
浏览 1提问于2011-07-21得票数 1
回答已采纳
3回答
我有一个云服务器池(~50)，需要使用SSH与许多其他远程云服务器(~4000)对话。每个远程服务器都有自己的SSH密钥，因此我们需要一个位置来安全地存储所有这些远程服务器的SSH密钥。我们应该如何存储这些密钥而不把它们全部保存下来呢？
在一个地方安全地存储大量SSH密钥并让我们的服务器在运行时请求它们的最佳方法是什么？
浏览 0提问于2014-02-04得票数 14
回答已采纳
为什么 相同配置（1核 1g 1m 1年）的云主机阿里云 300 多可以买到，而在腾讯要 600多？
搞不懂，马上就要到续费期了，选腾讯还是选阿里的呢？
浏览 1382提问于2017-09-08
2回答
澄清一下，我并不是真的在寻求帮助来解决这个问题，我只是想了解它，因为我从来没有在GCP中做过任何事情(目前是一名大学生，这是一份季节性的工作)。
所以任务是：
“用一个云函数在GCP中创建一个API，用一个连接到(NoSQL) Cloud数据库的节点(在Datastore模式中创建)。该表应该包括具有特定属性的客户，并且该API应该支持方法/getCustomers (返回id和名称)和/getCustomer?id (返回所有属性)。将代码放在一个中，并在云构建中创建一个具有触发器的管道，以便在每次提交/推到回购时自动操作。”
到目前为止，通过搜索和执行Google控制台中的内容，我可以(为
浏览 10提问于2022-04-08得票数 0
回答已采纳
有没有人能推荐一些关于数据库高可用性技术的好资源/书？此外，系统软件的高可用性，如入侵防御系统或Web服务器。我认为高可用性是一个全局的术语，它涵盖了clustring，云计算，复制，副本管理，集群的分布式同步。
提前感谢！
浏览 3提问于2010-04-05得票数 1
回答已采纳
专用托管服务是否还比较便宜，并将继续如此？他们真的能生存下来吗，因为基于云的产品也一天比一天便宜吗？我想了解一下空间托管的长远前景，并了解目前的情况。
无论我走到哪里，都会出现“云”这个流行词，观众甚至不用把它与专用的托管选项进行比较。云真的是前进的路吗？这是什么缺点？
浏览 0提问于2011-03-18得票数 4
2回答
我知道appengine数据存储和什么是云数据存储，使用云数据存储对我来说总是一个困惑，以下是我的问题：
云数据存储需要计算引擎吗？(在google文档中，我看到了类似于启用计算引擎的东西)
如何从应用程序访问云数据存储(这是非常需要的)
如何使多个应用程序访问此公共数据存储？
注:我知道如何激活它，但我没有得到明确的答案，我的问题以上。
浏览 5提问于2014-04-13得票数 0
回答已采纳
1回答
通过运行sudo gitlab-rake gitlab:backup:create，我们可以手动为Gitlab创建备份。但有没有办法定期进行Gitlab备份，比如每日或每月。
PS:我希望备份文件在本地文件夹中，而不是任何云存储
浏览 0提问于2018-05-25得票数 1
回答已采纳
计划购买三个月的腾讯云服务器和一年的数据库，问下源码程序是上传到腾讯云服务器还是上传到数据库？
浏览 741提问于2019-01-01
回答已采纳
2回答
我需要一种最佳的方式来存储大量的个别字段在消防局。以下是问题所在：
我从某个api获得json数据。它包含一个用户列表。我需要知道那些用户是否活跃(在过去的n天里已经上线)。
我不能用防火墙从api中查询列表中的每个用户，因为这个列表中可能有数十万用户，因此需要成千上万的查询和读取，这太昂贵了。
据我所知，没有办法使用列表作为查询的地图，所以这不是一种选择。
我最初所做的是让一个云函数遍历并找到所有活动用户，也许每小时一次，然后将他们放到结构中的实时数据库中：
activeUsers{
uid1: true
uid2: true
uid2: true
etc...
}
浏览 1提问于2018-07-31得票数 1
回答已采纳
2回答
在云提供程序之间移动文件
、、、、
我希望通过使用云提供程序的Java将文件从云提供程序转移到另一个文件。
在源云提供者上，我可以获得一个文件作为输入流，也可以将它下载到file对象(使用File )。目标云提供程序接受要存储的文件为输入流(需要内容长度)或文件对象。
是否最好将文件移动到
获取云存储提供程序上文件的输入流和内容长度，并使用这些数据存储在目标云提供程序或
先将源云提供程序上的文件下载到file对象，然后再将其存储在目标云提供程序上。
什么是优点/缺点？
第一种移动策略的一个优点是它需要更少的磁盘空间。但它们之间有什么表现上的差异吗？
浏览 2提问于2013-04-02得票数 0
回答已采纳
我开始在电信领域开发数据仓库。我熟悉Kimball的方法(将我的DW建模为星型模式)。我预计许多事实表，最大的可能是数百亿行。我无法想象几年后数据仓库将再次运行的所有类型的查询。
现代db方法指出，计算能力应与存储(即Azure Synapse Analytics、Redshift谱、Presto等)分离。而格林梅利或红移等数据库则总是运行PostgreSQL服务器来存储数据。
与“解耦”相比，更喜欢基于RDBMs的数据仓库的原因是什么？
虽然我完全喜欢解耦方法，但我的混淆是基于这样一个事实:我完全不知道在S3/ADLS和RDBMs中分析数据对性能的影响：
如果您选择没有能力暂停集群(并使
浏览 4提问于2020-01-01得票数 1
我正在阅读云供应商针对分布式存储系统的解决方案，如Amazon和Google。
在两个方面都很困惑：
什么是不信任的文件系统，云供应商使用不同类型的DFS？
什么是分布式存储系统？
这些术语和功能有什么不同？
如果我理解这些术语，我将创建云供应商的一般架构，任何好的教程或网页都将不胜感激。
谢谢
浏览 0提问于2010-04-17得票数 4
回答已采纳
我需要运行的任务是处理我的google云sql中的所有数据，并将文件从blobstore复制到google云存储。我正在考虑使用任务队列，但它有10分钟的时间限制，但我的任务必须比这更长。我不确定是否可以使用mapreduce，因为我不需要并行运行，而且我还没有找到任何mapreduce对云sql的支持。那么，在应用程序引擎上进行这种数据处理的建议方法是什么，尤其是对于云sql？
浏览 0提问于2014-02-23得票数 0
我正在使用Google app Engine在Eclipse中编写一个Java MVC web应用程序。 我想知道为什么一旦我将应用程序部署到谷歌云，谷歌云MySQL连接就停止工作。一旦部署到云上，我不确定如何连接到它，但它显然不起作用。我在本地运行时有连接吗？ ?
浏览 21提问于2020-03-26得票数 0
我最近不得不将"/dev/sda1“的文件大小从10 of增加到50 of，但我很好奇为什么文件一开始就这么大。我通过谷歌云平台托管了一个WordPress站点，而WordPress站点本身就有762MB。文件大小(相当于9 9GB)还会增加什么？
浏览 24提问于2021-04-25得票数 1
回答已采纳
我正在使用云开发数据解决方案，我们需要通过选择正确的存储解决方案来降低成本。
有许多文章/博客帮助我们了解云存储的生命周期策略，以及与近线和冷线存储相关的成本。
但是想知道，这些云提供商在技术上发生了什么，使得这些冷线存储比近线存储成本更高？
浏览 6提问于2021-09-22得票数 0
1回答
快把我逼疯了，有人帮我解决here.This google云的东西让我很困惑。我有点糊涂了，我的理解中缺少了一些东西。我想使用云storage.Now我有一个默认的Android项目，它有一个android客户端，一个应用引擎后端，由实体、端点、客户端库等组成，以及一个通过google云存储文档的CLIENT.While，我发现了以下内容：
Google客户端库
Google云存储客户端库
Google云存储API
客户端Java库
我仍然不知道每个人实际上都做了什么，我不知道如何在我的android客户端实现云存储。
如果我使用云存储，为什么我需要应用程序引擎后端应用
浏览 5提问于2015-03-14得票数 2
回答已采纳
2回答
我们知道Snowflake是基于云的分析数据仓库，在这些云环境(AWS、Azure、GCP)上提供Saas。我们可以选择像亚马逊网络服务这样的云环境，数据将存储在雪花管理的S3存储桶中。是否可以使用我们的AWS云环境而不是针对存储进行管理的snowflake？有什么选择吗？
浏览 5提问于2021-10-22得票数 2
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
