1回答
我想知道你们是否有任何建议，哪些存储库实现在常见硬件上具有良好的集群和水平伸缩特性？问题是，我们必须在存储库之上实现一个保存系统，该系统能够摄取和管理大量具有大文件(> 50 TB)的异构数据(> 500 TB)。
似乎只能通过使用分布式文件系统来实现集群。我应该检查哪些存储库系统？
浏览 3提问于2011-05-05得票数 3
1回答
我的工作是分布式系统(Java/EE，netty，protobuf).Wondering如何将文档从客户端发送到服务器，并将其存储在服务器数据库中。
发送字符串似乎很简单，但是如何发送一个大文件呢？任何好的教程，关于如何处理文档。
浏览 1提问于2013-10-07得票数 2
我需要在网络上分发文件的内容(最多5GB)，这样文件的每个分布式节点(XML或简单文件)都不会复制数据并相互同步。
更重要的是，可能有1000多个大文件，需要在分发过程中进行。我可以使用Hadoop来存储大文件，并使用集群节点来存储分布式数据吗？
浏览 2提问于2014-07-23得票数 0
回答已采纳
不过，我对分布式系统的行为并不清楚。另外，我如何开始实际运行流作业，以便它在两个系统上以并行方式运行？
浏览 2提问于2012-04-30得票数 0
回答已采纳
问题背景故事我没有可用的备用磁盘，所以我想:为什么我不创建一个回环设备并使用它呢？由于我的主机OS磁盘有足够的空闲空间，我应该能够在上面创建一个大文件，并将其作为回送设备挂载。这方面有两个问题(据我理解)：
必须用某种文件系统</e
浏览 0提问于2021-10-20得票数 1
回答已采纳
1回答
Github有一个推送大文件的。因此，如果您想将一个大文件推送到您的存储库，则必须使用。
我知道在git repo中添加二进制文件不是一个好主意。但是如果我在我的服务器上使用，并且存储库中没有文件大小限制，那么我并不关心我的服务器上的存储库大小是否超大。在这种情况下，git lfs的优势是什么？
浏览 68提问于2016-02-23得票数 61
回答已采纳
根据我的理解，HIVE和HBASE都使用HDFS来存储数据。当我们integrate HIVE and HBASETwo:设置为scenario One。现在是新插入的记录。他们会去哪里？
浏览 2提问于2014-01-18得票数 2
回答已采纳
1回答
你好，我有一个项目，这个项目我必须在这里存储鸡尾酒的图像，所以我定义了鸡尾酒是什么，所以我的项目是一个名字，一个包含酒精和图像的成分列表，这是我的问题，我如何存储我的鸡尾酒对象，所以我做了我的研究，我看到我们可以存储图像在mongodb，但我不知道它是否是最好的解决方案，或如何做到。
浏览 1提问于2022-07-03得票数 0
回答已采纳
众所周知，Hadoop和HDFS更喜欢大文件。但我不知道这是否也适用于分布式缓存，因为分布式文件存储在本地计算机上。
如果它们需要合并，在HDFS上以编程方式合并文件的最佳方式是什么？
浏览 1提问于2013-04-07得票数 2
回答已采纳
我正在阅读云供应商针对分布式存储系统的解决方案，如Amazon和Google。什么是不信任的文件系统，云供应商使用不同类型的DFS？
什么是分布式存储系统？
浏览 0提问于2010-04-17得票数 4
回答已采纳
我正在构建一个具有不同存储大小的分布式存储系统。例如，我的存储设备在一个系统中的大小为50 in、70 in、150 in、250 in、1000 in、5个存储系统。我的应用程序会将任何文件存储到存储系统中。问题:我如何建立一个分布式存储的想法，数据冗余和故障转移，以存储文件，视频，任何类型的文件，同时确保如果任何一个
浏览 0提问于2013-06-29得票数 0
7回答
是否有分布式版本控制系统(git、bazaar、mercurial、darcs等)？可以处理比可用RAM更大的文件？
浏览 0提问于2008-09-16得票数 14
回答已采纳
2回答
在monolith中，潜在的大型文件存储在数据库中，我希望与微服务共享这些信息(包括文件内容)。因此，我会存储消息块，订购并加入它们，并存储结果。我注意到卡夫卡溪流。
浏览 0提问于2019-06-09得票数 5
回答已采纳
1回答
我们的一些要求：
这里的情况和你们中的一些人可能经历过的有些不同专业系统管理和开发人员的成本比在存储解决方案领域与硬件或软件供应商签订合同要便宜得多。我们扩大规模的方式是购买廉价的商品硬件，并(很可能)使用各种开放源码软件自己构建基础设施。我们正在研究各种用于存储的分布式文件系统，例如MogileFS、GlusterFS、HDF
浏览 3提问于2011-02-20得票数 6
我正在阅读有关分布式哈希表的资料，但我很难找到当一个节点发生故障时对分布式哈希表的值有何影响的信息。
据我所知，如果没有数据冗余(散列表值)，单个节点的故障只会使该节点中存储的值不可用。但是，如果我想使用DHT作为任何系统的存储，我希望该系统能够随时依赖所有存储的可用性，对吧？也许数据冗余在这里被外包为一个独立的问题，但这将意味着分布式哈希表的去中心化方面引入了额外的故障点，这似乎是分布式哈希表的一个巨大的缺点。那么，如果负责这些值的
浏览 13提问于2020-09-10得票数 2
1回答
lustre，或google文件系统(，GFS)将文件分割成某种块，并将它们保存到不同的节点中。因此，它们可以获得可伸缩性、分布式通信量。
尽管有很多文件系统支持恒定时间的克隆。但是我找不到任何支持恒定时间克隆的分布式文件系统。Nexenta存储看起来像是通过“命名空间nfs”来支持这些特性。
浏览 7提问于2012-02-22得票数 0
我知道MongoDB接受和检索作为JSON/BSON对象的记录，但是它实际上是如何将这些文件存储在磁盘上的呢？它们是作为单个*.json文件的集合存储还是作为一个大文件存储？我对后者有一种预感，因为MongoDB文档指出，它在装有ext4/xfs的系统上工作得最好，后者更擅长处理大文件。有人能证实吗？
浏览 0提问于2010-11-09得票数 70
回答已采纳
1回答
freebase存储系统是如何工作的？它是否使用像Cassandra或MongoDB这样的分布式键值存储？我一直在寻找关于这个细节的文档..
浏览 1提问于2012-09-10得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
