腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
S3多个小文件与
大文件
性能
、
、
、
无论
如何
,如果我使用相同的tcp连接(),更大的文件还能提高性能吗?
浏览 0
提问于2020-03-30
得票数 0
1
回答
在通用x86硬件上水平扩展
存储
库
、
、
、
我想知道你们是否有任何建议,哪些
存储
库实现在常见硬件上具有良好的集群和水平伸缩特性?问题是,我们必须在
存储
库之上实现一个保存
系统
,该
系统
能够摄取和管理大量具有
大文件
(> 50 TB)的异构数据(> 500 TB)。 似乎只能通过使用
分布式
文件
系统
来实现集群。我应该检查哪些
存储
库
系统
?
浏览 3
提问于2011-05-05
得票数 3
1
回答
有关核心网络和Protobuf的教程
、
、
、
我的工作是
分布式
系统
(Java/EE,netty,protobuf).Wondering
如何
将文档从客户端发送到服务器,并将其
存储
在服务器数据库中。 发送字符串似乎很简单,但是
如何
发送一个
大文件
呢?任何好的教程,关于
如何
处理文档。
浏览 1
提问于2013-10-07
得票数 2
1
回答
如何
将文件内容分发到多个节点?
我需要在网络上分发文件的内容(最多5GB),这样文件的每个
分布式
节点(XML或简单文件)都不会复制数据并相互同步。 更重要的是,可能有1000多个
大文件
,需要在分发过程中进行。我可以使用Hadoop来
存储
大文件
,并使用集群节点来
存储
分布式
数据吗?
浏览 2
提问于2014-07-23
得票数 0
回答已采纳
1
回答
如何
使用hadoop流和ruby映射器/缩减程序设置
分布式
map-reduce作业?
、
、
不过,我对
分布式
系统
的行为并不清楚。另外,我
如何
开始实际运行流作业,以便它在两个
系统
上以并行方式运行?
浏览 2
提问于2012-04-30
得票数 0
回答已采纳
2
回答
如何
创建作为合法块设备传递的原始(无文件
系统
)回送设备?
、
、
问题背景故事我没有可用的备用磁盘,所以我想:为什么我不创建一个回环设备并使用它呢?由于我的主机OS磁盘有足够的空闲空间,我应该能够在上面创建一个
大文件
,并将其作为回送设备挂载。这方面有两个问题(据我理解): 必须用某种文件
系统</e
浏览 0
提问于2021-10-20
得票数 1
回答已采纳
1
回答
git lfs的优势是什么?
、
Github有一个推送
大文件
的。因此,如果您想将一个
大文件
推送到您的
存储
库,则必须使用。 我知道在git repo中添加二进制文件不是一个好主意。但是如果我在我的服务器上使用,并且
存储
库中没有文件大小限制,那么我并不关心我的服务器上的
存储
库大小是否超大。在这种情况下,git lfs的优势是什么?
浏览 68
提问于2016-02-23
得票数 61
回答已采纳
1
回答
在Hive - Hbase -Integration中,数据是
如何
在Hive和HBase之间移动或反射的。
、
、
、
根据我的理解,HIVE和HBASE都使用HDFS来
存储
数据。当我们integrate HIVE and HBASETwo:设置为scenario One。现在是新插入的记录。他们会去哪里?
浏览 2
提问于2014-01-18
得票数 2
回答已采纳
1
回答
mongodb中提升图像的最佳方法
、
、
、
你好,我有一个项目,这个项目我必须在这里
存储
鸡尾酒的图像,所以我定义了鸡尾酒是什么,所以我的项目是一个名字,一个包含酒精和图像的成分列表,这是我的问题,我
如何
存储
我的鸡尾酒对象,所以我做了我的研究,我看到我们可以
存储
图像在mongodb,但我不知道它是否是最好的解决方案,或
如何
做到。
浏览 1
提问于2022-07-03
得票数 0
回答已采纳
2
回答
将小文件合并为用于Hadoop
分布式
缓存的
大文件
?
、
众所周知,Hadoop和HDFS更喜欢
大文件
。但我不知道这是否也适用于
分布式
缓存,因为
分布式
文件
存储
在本地计算机上。 如果它们需要合并,在HDFS上以编程方式合并文件的最佳方式是什么?
浏览 1
提问于2013-04-07
得票数 2
回答已采纳
1
回答
连续散列和锥形散列有什么区别?
、
、
、
、
我知道的是: 这两种散列的区别是什么?
浏览 8
提问于2015-04-12
得票数 3
1
回答
分布式
文件
系统
和
分布式
存储
系统
的功能是什么?
、
、
我正在阅读云供应商针对
分布式
存储
系统
的解决方案,如Amazon和Google。什么是不信任的文件
系统
,云供应商使用不同类型的DFS? 什么是
分布式
存储
系统
?
浏览 0
提问于2010-04-17
得票数 4
回答已采纳
1
回答
分布式
存储
系统
中的数据冗余和故障转移算法?
、
我正在构建一个具有不同
存储
大小的
分布式
存储
系统
。例如,我的
存储
设备在一个
系统
中的大小为50 in、70 in、150 in、250 in、1000 in、5个
存储
系统
。我的应用程序会将任何文件
存储
到
存储
系统
中。问题:我
如何
建立一个
分布式
存储
的想法,数据冗余和故障转移,以
存储
文件,视频,任何类型的文件,同时确保如果任何一个
浏览 0
提问于2013-06-29
得票数 0
7
回答
是否有可以管理
大文件
的
分布式
VCS?
、
、
是否有
分布式
版本控制
系统
(git、bazaar、mercurial、darcs等)?可以处理比可用RAM更大的文件?
浏览 0
提问于2008-09-16
得票数 14
回答已采纳
2
回答
如何
通过卡夫卡传输
大文件
?
、
在monolith中,潜在的大型文件
存储
在数据库中,我希望与微服务共享这些信息(包括文件内容)。因此,我会
存储
消息块,订购并加入它们,并
存储
结果。我注意到卡夫卡溪流。
浏览 0
提问于2019-06-09
得票数 5
回答已采纳
1
回答
如何
构建媒体流服务器
、
、
我们的一些要求: 这里的情况和你们中的一些人可能经历过的有些不同专业
系统
管理和开发人员的成本比在
存储
解决方案领域与硬件或软件供应商签订合同要便宜得多。我们扩大规模的方式是购买廉价的商品硬件,并(很可能)使用各种开放源码软件自己构建基础设施。我们正在研究各种用于
存储
的
分布式
文件
系统
,例如MogileFS、GlusterFS、HDF
浏览 3
提问于2011-02-20
得票数 6
1
回答
如果
分布式
哈希表的一个节点出现故障,这些值会变得不可用吗?
、
、
、
、
我正在阅读有关
分布式
哈希表的资料,但我很难找到当一个节点发生故障时对
分布式
哈希表的值有何影响的信息。 据我所知,如果没有数据冗余(散列表值),单个节点的故障只会使该节点中
存储
的值不可用。但是,如果我想使用DHT作为任何
系统
的
存储
,我希望该
系统
能够随时依赖所有
存储
的可用性,对吧?也许数据冗余在这里被外包为一个独立的问题,但这将意味着
分布式
哈希表的去中心化方面引入了额外的故障点,这似乎是
分布式
哈希表的一个巨大的缺点。那么,如果负责这些值的
浏览 13
提问于2020-09-10
得票数 2
1
回答
任何支持恒定时间克隆的
分布式
文件
系统
、
、
lustre,或google文件
系统
(,GFS)将文件分割成某种块,并将它们保存到不同的节点中。因此,它们可以获得可伸缩性、
分布式
通信量。 尽管有很多文件
系统
支持恒定时间的克隆。但是我找不到任何支持恒定时间克隆的
分布式
文件
系统
。Nexenta
存储
看起来像是通过“命名空间nfs”来支持这些特性。
浏览 7
提问于2012-02-22
得票数 0
4
回答
MongoDB数据库中的数据是
如何
存储
在磁盘上的?
、
我知道MongoDB接受和检索作为JSON/BSON对象的记录,但是它实际上是
如何
将这些文件
存储
在磁盘上的呢?它们是作为单个*.json文件的集合
存储
还是作为一个
大文件
存储
?我对后者有一种预感,因为MongoDB文档指出,它在装有ext4/xfs的
系统
上工作得最好,后者更擅长处理
大文件
。有人能证实吗?
浏览 0
提问于2010-11-09
得票数 70
回答已采纳
1
回答
Freebase是键值
存储
吗?
、
、
freebase
存储
系统
是
如何
工作的?它是否使用像Cassandra或MongoDB这样的
分布式
键值
存储
?我一直在寻找关于这个细节的文档..
浏览 1
提问于2012-09-10
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
MongodbGFS存储大文件
设计一个大文件存储系统
分布式存储:IPFS/Filecoin是如何帮你存储数据的!
如何更容易地使用IPFS进行存储?你该了解一下Git大文件存储
分布式存储系统及其特点
热门
标签
更多标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
活动推荐
运营活动
广告
关闭
领券