腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

文章/答案/技术大牛

发布

综合排序丨最热优先丨最新优先

国产信创分布式对象存储系统 RustFS 开源

介绍 RustFS 是一款简单、高效、分布式的对象存储。同时，也是一种高效、开源、自由的对象存储解决方案。它 100% 兼容 S3 协议，使用 Apache2 许可证发行的开源软件。它是由全世界优秀的工程师参与并贡献的一款对于商用友好的分布式对象存储产品，RustFS 可以平替非常多非友好开源协议的对象存储产品。特征 S3 兼容: 100% 兼容 S3 协议，优秀的兼容性与大数据、数据湖、备份软件、图像处理软件、工业生产软件兼容；分布式: RustFS 是一个分布式的对象存储，因此，RustFS 可以满足各种需求；商用友好: RustFS 是 100% 的开源软件，并且使用 Apache v2.0 许可证发型，因此，RustFS 是商用友好的；快速: Rust 这一门开发语言的性能无限接近于 C 语言的速度通过云存储插件进行测试上传文件到rustfs服务端。

2025-07-10

2.5K0

标签:

什么是对象存储？对象存储的原理是什么？有哪些开源的、非开源的对象存储服务？

开源对象存储服务开源对象存储服务是指基于开源技术，完全或部分开发源代码的、提供对象存储服务的存储系统。以下是一些常见的开源对象存储服务：CephCeph 是一个广泛应用、高可用性、可扩展的分布式存储系统。它提供对象、块和文件三种类型的存储，支持 RESTful 和 S3 访问协议。它可以与 Kubernetes、Docker 等工具集成，支持 HDFS、GlusterFS 等其他存储后端。图片非开源对象存储服务非开源对象存储服务是指商业或私有公司提供的对象存储服务。以下是一些常见的非开源对象存储服务：阿里云对象存储（OSS）阿里云对象存储（OSS）是一种高度可靠、高可扩展和成本效益高的公有云对象存储服务。它具有全球唯一ID、多副本数据冗余、访问加速等优点。结论对象存储是处理和存储海量数据的优秀方法，可以提供高可靠性、可扩展性和高性能的存储解决方案。开源和非开源对象存储服务都可以满足客户的需求。

网络技术联盟站

2023-05-04

24.9K0

标签:

国产开源对象存储进阶：S3 Table打通Iceberg数据湖最佳实践

在分布式对象存储领域，以往大量依赖海外开源方案、商用闭源存储的架构，逐渐面临授权风险、无法二次定制、技术链路不透明等诸多问题。在AI数据湖全面普及的当下，如何搭建一套国产开源对象存储架构，既能满足ApacheIceberg数据湖的生产级适配能力，又能实现低成本、低开销、可自主迭代，成为技术架构选型的核心难题。 RustFS作为新一代纯国产开源对象存储，从架构设计之初就贴合国产化、轻量化、AI场景化三大核心需求，本次S3Table能力开源，更是针对性解决了国产存储适配Iceberg数据湖能力不足的行业痛点。 S3Table的开源，让国产开源存储首次具备了轻量化、完整适配AI数据湖的专业能力。六、总结国产开源对象存储的迭代，已经从“单纯替代海外产品”进入“场景化技术升级”的新阶段。

2026-06-14

5351

标签:

分布式存储

高性能对象存储

【存储】2022 年的 4 个开源对象存储平台

这就是为什么在本文中，我们将告诉您四个有用的开源对象存储平台，它们包含强大的功能，使它们成为 2022年的重大投资。 1.LakeFS LakeFS 是一种开源数据环境工具，可让您管理基于对象存储的数据湖。这些数据湖是存储库，您可以在其中转储所有结构化和非结构化类型的数据。 2.Ceph Ceph 是对象存储、块存储和文件系统的开源平台。它提供与 Amazon 的 S3 REST API 和 OpenStack 的 API Swift 完全兼容的对象存储功能。 MinIO MinIO 是一款开源云存储软件，提供高性能分布式对象存储，专为大规模数据基础设施而设计。 4.OpenIO OpenIO 是一种开源对象存储解决方案，用于管理和保护大量非结构化数据。它允许您构建和操作具有弹性且安全的大规模存储基础架构。

架构师研究会

2022-03-08

13.6K1

标签:

开源分布式对象存储-MinIO 顶

在过去的一段时间，我们将这部分数据存储在公有云的对象存储服务上，但随着业务的快速发展，我们需要存储一些身份信息用于审核和实名相关的数据，这部分数据较为敏感，因此对于敏感数据的存储我们选择了使用兼容S3协议的开源分布式对象存储但其实，Minio这款开源的分布式对象存储服务在国外已经相当受欢迎，并且国内也有多中小型互联网公司使用它来作为对象存储服务。有意思的是当年在开源的分布式存储方案中，比较有名的就是GlusterFS和Ceph。所以，在后来GlusterFS后来被收购后，据说创始团队又开源了一个分布式存储软件，就是这个用Golang编写的小而美的对象存储Minio. Minio介绍 MinIO是一个用Golang开发的基于Apache License v2.0开源协议的对象存储服务。

2020-02-18

5.2K3

标签:

基于对象存储隧道的远控工具开源啦

简介使用介绍： Q&A 对象存储介绍:对象存储服务是云厂商提供的一种海量、安全、低成本、高可靠的云存储服务，适合存放任意类型的文件。容量和处理能力弹性扩展，多种存储类型供选择，全面优化存储成本。简介 Lucian（中文名卢锡安）是一款开源的跨平台网站管理工具不同于市面上其他远控工具，虽然支持各项协议的远控如dns、https、tcp、smtp层出不穷，但是一、各种对Cobra Strike 这款新工具的特点在于：基础http协议基于云厂家内部的对象存储，绕过对外连接的安全检测机制对象存储支持全球网络，速度快，在使用内部的endpoint时可以无对外流量产生使用云bucket作为数据和命令的跳板作为中转 lucian文件无文件后缀要求，内容为已经正确配置对象存储上线地址自动化执行随机间隔心跳和响应命令的功能，启动上线 ? 在对象存储侧显示已经成功上线安全测试工程师配置相应的对象存储地址 ? 问：对象存储ak、sk需要什么权限？答：需要对bucket下的对象的读写权限，为了避免泄露内置的ak、sk，自己搭建bucket的可以设置为公共读写。

安全乐观主义

2020-10-27

1.3K0

标签:

网站渗透测试

腾讯云测试服务

对象存储智能分层存储

摘要对象存储的智能分层技术是 2026 年云存储成本优化的热门话题。它周期性地监测每个对象的访问次数,在持续一段时间没有数据访问时,自动将数据转移至存储成本更低的层级;如果数据重新被访问,则自动恢复到高频访问层,保障数据读取性能。 4.3 便捷易用只需为数据指定对象存储类型为 INTELLIGENT_TIERING,即可应用智能分层特性。天然适配 COS 的 API、SDK、工具以及生态应用,无需额外开发。智能分层可以在保证访问体验的同时,自动控制存储成本。腾讯云对象存储 COS 智能分层存储,让数据冷热分层不再需要人工干预,帮助企业以更低成本管理海量数据。了解更多关于腾讯云对象存储 COS 的产品信息,请访问腾讯云对象存储 COS 产品页。

2026-09-03

2950

标签:

内存涨价时代，RustFS如何重塑国产AI分布式对象存储架构

在这样的行业背景下，基于Rust开发的国产开源对象存储RustFS，凭借原生低内存架构，搭配即将开源的S3Table能力，为分布式对象存储适配AI数据场景提供了全新的重构思路，也成为现阶段非常优质的国产一、内存涨价，正在倒逼存储架构换代过去我们搭建传统对象存储，普遍不抠内存开销。原因很简单：前几年内存价格低廉，业务量增长快，运维团队更看重稳定性、迭代速度，不会过度关注单节点资源占用。传统Go、C++编写的开源存储系统，普遍存在常驻内存高、元数据缓存冗余、静态内存预分配等问题。对接ApacheIceberg数据湖之后，频繁的元数据扫描、快照生成、分区遍历，会进一步放大内存开销。单节点空载内存仅百MB级别，基础开销直接拉开传统存储一个量级。其次，S3Table专属AI缓存模型。本次即将开源的S3Table组件，针对ApacheIceberg数据湖做了专属缓存策略优化。作为轻量化开源对象存储代表，国产开源对象存储RustFS凭借底层架构优势，配合全新S3Table能力，刚好踩中行业架构转型节点，为国产AI数据湖基础设施，提供了一套更轻、更省、更稳的全新架构选型。

2026-06-11

4221

标签:

分布式存储

高性能PHP框架webman集成开源MinIO对象存储服务

本文导读：如何利用Docker技术搭建一个专有的Minio服务对象存储系统，如何通过高性能的PHP框架Webman与开源的MinIO对象存储插件，实现对MinIO对象存储的高效管理。 Minio MinIO 是一个基于Apache License v2.0开源协议的对象存储服务。核心概念存储空间（Bucket）存储空间（Bucket）是用户用于存储对象（Object）的容器，所有的对象都必须隶属于某个存储空间。存储空间具有各种配置属性，包括地域、访问权限、存储类型等。存储空间的名称必须是全局唯一的。存储空间创建成功后，名称将无法修改。对象（Object）对象（Object）是Minio存储数据的基本单元，也被称为Minio的文件。对象元数据是一组键值对，表示了对象的一些属性，例如文件类型、编码方式等信息，同时用户也可以在元数据中存储一些自定义的信息。对象的生命周期是从上传成功到被删除为止。

2024-11-21

1.5K0

标签:

对象存储入门

2．对象存储的关键特性与价值对象存储是一种基于对象的存储设备，具备智能、自我管理能力，通过Web服务协议（如REST、SOAP）实现对象的读/写和存储资源的访问。对象存储数据组织示意图如图10.3所示。对象存储对外提供更抽象的对象接口，而不是SCSI或文件接口。对象存储系统通常在一个横向扩展（或网格硬件）架构上构建一个全局的命名空间，这使得对象存储非常适用在云计算环境中使用。某些对象存储系统还可以支持升级、扩容过程中的业务零中断。 4）归档和分级存储对象存储通过与归档软件、分级存储软件结合，将在线系统中的数据无缝归档/分级存储到对象存储，释放在线系统存储资源。 5．S3 对象存储最典型的是Amazon S3。Amazon S3将数据作为对象存储在称为“存储桶”的资源中。用户可以在一个存储桶中尽可能多地存储对象，并写入、读取和删除存储桶中的对象。

大数据和云计算技术

2018-03-08

9.8K0

标签: