首页
学习
活动
专区
圈层
工具
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    存储09-glusterfs&ceph&minio

    glusterfs、ceph、minio在开源界,属于比较流行应用较广的三个分布式存储系统。现在重点介绍下,这三个分布式系统的架构以及和raid的类比,让大家把存储明明白白的搞透彻。...2.ceph ?...和raid2.0的对比 1)ceph-pool对应raid2.0里的lun 2)ceph-pg对应raid2.0里的chunkgroup 3)ceph里默认的4M块对应raid2.0里的chunk 4)...ceph-osd对应raid2.0里的磁盘 ceph-pool可以利用集群底层几乎所有的磁盘,raid2.0的lun也可以利用底层几乎所有的磁盘。...备注:以上只是简单的对应,并非严格意义上的对应 ceph坏盘后有自动恢复机制(ceph在pool和osd之间映入了一层逻辑pg),故ceph-osd对应的磁盘通常是单盘,而不像glusterfs那样需要优化做

    7.6K32

    对象存储:基于docker-compose 快速部署 MinIO

    for Kubernetes — MinIO Object Storage for Kubernetes 二、MinIO 与 Ceph 对比 MinIO和Ceph都是流行的开源存储解决方案,它们在对象存储领域有不同的特点和适用场景...MinIO专注于提供简单、轻量级的对象存储服务,适用于小型到中等规模的部署。 Ceph:Ceph是一个分布式存储系统,由对象存储、块存储和文件系统组成。...Ceph:Ceph提供强一致性,即写入操作在返回成功后,数据即刻就达到一致性。这对于需要强一致性保证的应用场景非常重要,如数据库和事务处理。...Ceph:Ceph 的部署和管理相对复杂,涉及多个组件和配置。它需要更多的时间和专业知识来设置和维护,需要熟悉Ceph的架构和配置。...选择MinIO还是Ceph取决于具体的需求和场景。如果你需要一个简单、易用、高性能的对象存储解决方案,并与S3兼容,那么MinIO是一个不错的选择。

    2.1K10

    有了MinIO,你还会用FastDFS么?

    最近看到ReadHat在搞Ceph的培训,而且是收费的,真的是吓了一跳。难道真要搞这么复杂这么强大的存储方案么?有了MinIO,我知道我永远和Ceph无缘了。 再说FastDFS。...在了解了MinIO之后,终于可以扔掉FastDFS了,真心高兴。 MinIO是apache项目,有着贵族血统,骄傲不失风范。它拥有着较高的性能,而且100%兼容s3。 什么意思呢?...很多商业公司背地里拿MinIO做开发,改吧改吧界面,最后说是自己做的,结果把掉一层皮后,发现就是MinIO。 ?...Minio主要为人工智能、机器学习而设计,并适用于其他大数据负载。从架构与功能方面考虑,Minio是一个比较好的开源对象存储解决方案。 ? 说到这里你或许能够猜到,这家伙是用go写的。...文件服务很多,比如ceph、swift、hbase、hdfs、glusterfs,甚至是mongo等,相比较而言,Minio可以说是最好用的了。其实,Minio的作者,就是glusterfs的创始人。

    4K30

    盘点分布式文件存储系统____分布式文件存储系统简介

    对java支持良好,其他语言一般 Ceph 企业级的存储需求,通常分为块存储、文件存储和对象存储,而Ceph能够同时满足这三种需求。...为什么需要MinIO?...MinIO 和其他OSS存储解决方案各有什么优缺点? 这里主要针对Ceph、Minio、FastDFS 热门的存储解决方案进行比较。...Ceph 优点 成熟 红帽继子,ceph创始人已经加入红帽 国内有所谓的ceph中国社区,私人机构,不活跃,文档有滞后,而且没有更新的迹象。...分布式Minio至少需要4个硬盘,使用分布式Minio自动引入了纠删码功能。 一致性:Minio在分布式和单机模式下,所有读写操作都严格遵守read-after-write一致性模型。

    6.2K10

    Ceph的市场分析以及核心组件介绍

    Ceph市场分析竞争对手:GlusterFS:GlusterFS是一个开源分布式文件系统,与Ceph类似,提供分布式存储解决方案。GlusterFS在可伸缩性和易用性方面与Ceph竞争。...Minio:Minio: 是一个开源对象存储服务器,旨在提供高性能和易用性。Ceph与Minio在可靠性和可伸缩性方面竞争。...Ceph的分布式存储特性使其成为科研机构的首选。行业应用情况:云存储:Ceph被广泛应用于云存储领域,云服务提供商使用Ceph来实现其对象存储和分布式块存储服务。...Ceph Monitor:Ceph Monitor是Ceph集群的管理节点,负责监控整个集群的状态和健康情况,并提供元数据服务。...Ceph OSD:Ceph OSD是Ceph集群的存储节点,负责管理存储设备和提供对象存储服务。每个Ceph OSD实例负责管理一部分数据对象,并负责数据的复制、恢复、均衡等功能。

    54631

    2025版:基于 KubeSphere v4 的 Kubernetes 生产环境部署架构设计及成本分析

    Ceph:提供跨节点、分布式、多副本、高可用的存储解决方案,持久化存储方案选型说明:存储方案优点缺点说明Ceph分布式存储、高可用性、高扩展性、支持多副本运维复杂、故障处理难度大、需要专业技能曾经经历过...如果不使用 Ceph 可以删除持久化存储节点对象存储使用 Minio,考虑到集群最小磁盘数要求,所以选择 4 节点方案一:适合生产环境 ,每个存储角色按建议副本数配置节点数量和磁盘容量。...集群最小四个节点 对象存储节点minio-3 4 16 40 1000 192.168.9.123Minio 集群最小四个节点 对象存储节点minio-4 4 16...+1000+1000192.168.9.101部署Ceph、ElasticSearch、Minio存储节点minio-24 16 40 1000+1000+1000192.168.9.102...部署Ceph、ElasticSearch、Minio存储节点minio-34 16 40 1000+1000+1000192.168.9.103部署Ceph、ElasticSearch、Minio

    40100

    使用 MinIO Gateway、MinIO Client 适配腾讯云COS

    MinIO对象存储:MinIO 是一款高性能、分布式的对象存储系统. 它是一款软件产品, 可以100%的运行在标准硬件。即X86等低成本机器也能够很好的运行MinIO。...它支持文件系统级别的操作并且兼容 AWS S3协议 的云存储服务(包括 AWS Signature v2 和 v4) MinIO Gateway:MinIO S3 Gateway 将 MinIO 功能(...2.MinIO 架构 2.1 MinIO 典型业务架构图 image.png 2.2 MinIO Gateway 架构图 MimIO Gateway.png 3.适配腾讯云COS 3.1 为什么需要单独编译来适配腾讯云...Gateway 如何适配腾讯云COS 首先执行如下命令下载 MinIO 源码 URL https://github.com/minio/minio git clone https://github.com...Gateway For Cos UNIX 二进制可执行文件 https://cos.iclay.cn/Software/Linux/minio/minio-for-cos 3.3 MinIO Client

    8.3K193

    【存储】2022 年的 4 个开源对象存储平台

    2.Ceph Ceph 是对象存储、块存储和文件系统的开源平台。它提供与 Amazon 的 S3 REST API 和 OpenStack 的 API Swift 完全兼容的对象存储功能。...Ceph 的对象存储允许您使用本地语言绑定和 Ceph 提供的其他技术轻松访问数据对象。如果您想转变公司的 IT 基础架构及其管理大量非结构化数据的能力,这是一个很好的解决方案。...他们还有一些软件库,使用 Java、C、C++、Python、PHP 和其他几个编写的软件能够使用原生 API 的强大功能访问 Ceph 的对象存储系统。 3....MinIO MinIO 是一款开源云存储软件,提供高性能分布式对象存储,专为大规模数据基础设施而设计。...MinIO 服务器存储所有类型的非结构化数据,例如照片、视频、日志文件等。它也可在开源 Apache V2 许可下使用,许多最强大的大数据和机器学习应用程序都使用 MinIO S3 对象存储。

    11.9K10

    DeepSeek开源周 Day05:从3FS盘点分布式文件存储系统

    MinIO MinIO 是一个基于Apache License v2.0开源协议的对象存储服务。...虽然Ceph很强大,但是学习成本高、安装运维复杂。Ceph用C++编写,存储容量可轻松达到PB级别。...分布式文件系统对比 功能分类如下: 适合做通用文件系统的有:Ceph、MooseFS、MinIO; 适合做中小文件存储的文件系统有:Ceph、FastDFS、MinIO、SeaweedFS;...适合做大文件存储的文件系统有:HDFS、MinIO、Ceph、GridFS; 轻量级文件系统有:FastDFS、MinIO、SeaweedFS; 简单易用,用户活跃的文件系统有:HDFS、...FastDFS、MinIO; 综上:Ceph目前不够成熟稳定,官方也明确指出不要把Ceph用在生产环境中,暂不考虑; 经初步筛选剩下的文件系统有:HDFS、FastDFS、MinIO、GridFS。

    75610

    Ceph监控Ceph-dash安装

    Ceph的监控有很多啊,calamari或inkscope等,我开始尝试安装这些的时候,都失败了,后来Ceph-dash走入了我的眼帘,Ceph-dash根据官方描述,我个人觉得是最简单安装的了,但是安装过程中出现的不好使用的情况...版本:0.80.7 进入正题: 首先下载ceph-dash,如果不好用,就到 https://github.com/Crapworks/ceph-dash下载 下载完毕后,按照官网给的提示安装,步骤如下...clone this repository place it on one of your ceph monitor nodes run ceph-dash.py point your browser...to http://ceph-monitor:5000/ enjoy!...因为ceph-dash是Python写的,我没有成功是缺少了ceph的一些额外的软件包:Flask,安装完成Flask之后,再运行ceph-dash应该就OK了,如果你还是不OK,那么我也没办法了,因为我就遇到的是这个错误

    54110
    领券