开发者社区

文档建议反馈控制台

文章/答案/技术大牛

发布

社区首页 >专栏 >【Ceph】Minio Browser浏览ceph对象文件

【Ceph】Minio Browser浏览ceph对象文件

作者头像

runzhliu

发布于 2021-03-02 08:14:11

发布于 2021-03-02 08:14:11

1.4K0

举报

文章被收录于专栏：容器计算容器计算

MiniO Browser 可以对接支持 S3 协议的 Ceph RGW，因为用 s3cmd 这些工具去管理对象文件还是比较麻烦，而且不够直观的，Minio Browser 正好提供了一套 UI 来访问、上传对象文件，创建桶和分享文件这些功能，还是相当实用的，如果不想自己开发基于 Ceph RGW 的对象文件页面管理，那么可以直接用 MiniO Browser。

本文参与腾讯云自媒体同步曝光计划，分享自作者个人站点/博客。

原始发表：2021/02/13 ，如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自作者个人站点/博客前往查看

如有侵权，请联系 cloudcommunity@tencent.com 删除。

本文参与腾讯云自媒体同步曝光计划，欢迎热爱写作的你一起参与！

评论

登录后参与评论

暂无评论

编辑精选文章

换一批

万字详解高可用架构设计

Go 开发者必备：Protocol Buffers 入门指南

10分钟带你彻底搞懂分布式链路跟踪

多租户的 4 种常用方案

亿级月活的社交 APP，陌陌如何做到 3 分钟定位故障？

60页PPT全解：DeepSeek系列论文技术要点整理

有了MinIO，你还会用FastDFS么？

node.js linux sdk go ide

最近看到ReadHat在搞Ceph的培训，而且是收费的，真的是吓了一跳。难道真要搞这么复杂这么强大的存储方案么？有了MinIO，我知道我永远和Ceph无缘了。

xjjdog

2020/08/04

4.1K0

有了MinIO，你还会用FastDFS么？

分布式文件系统 Minio

磁盘对象集群数据分布式

Minio 是一个基于 Apache License v2.0 开源协议的对象存储服务。它兼容 AWS S3 云存储服务接口，非常适合存储大容量非结构化的数据，如图片、视频、日志文件、备份数据等，而一个对象文件可以是任意大小，从几 kb 到最大 5T 不等。

陳斯托洛夫斯記

2024/08/07

1.7K0

Ceph对象存储安装部署及验证

分布式对象存储 python 云直播

今天来玩下Ceph的对象存储，在开始之前呢，先扯会闲篇，我觉得生活中处处是非结构化数据，最简单的举例，下面两个行业，一个是直播，一个是摄影。

DevinGeng

2019/04/09

2.3K0

Ceph对象存储安装部署及验证

智能安防监控

- 图虽然很复杂，但如果理解了几个基本操作的含义就很好读下来了，这里是三个操作的伪代码，take和emit很好理解，select主要是遍历当前bucket，如果出现重复、失败或者超载就跳过，其中稍微复杂的“first n”部分是一旦遇到失败，第一种情况是直接使用多备份，第二种情况是使用erasing code基本可以忽略。看着下面的图就更好理解具体的算法了

ZHaos

2019/02/27

2.4K0

对象存储，了解一下

对象存储，通常指 S3 (Simple Storage Service) 服务，由AWS提供公有云服务，而 Ceph 也可以提供兼容 S3 协议的对象存储服务，使用起来跟 AWS 的 S3 体验几乎一样。环境介绍访问域名： tstack-s3.oa.com 后端物理环境： [ 64G/8Core/11TB*4/10GE*2 ] * 5台 Ceph 版本： Jewel 10.2.7 RGW 网关： 1个/台，共5个，HAProxy+KeepAlived 实现负载均衡。测试秘钥： access_k

腾讯云TStack

2018/10/12

4K0

ceph-对象存储

分布式对象存储 swift ios api

作为文件系统的磁盘，操作系统不能直接访问对象存储。相反，它只能通过应用程序级别的API访问。ceph是一种分布式对象存储系统，通过ceph对象网关提供对象存储接口，也称为RADOS网关（RGW）接口，它构建在ceph RADOS层之上。RGW使用librgw（RADOS Gateway library）和librados，允许应用程序与ceph对象存储建立连接。RGW为应用程序提供了一个RESTful S3/swift兼容的接口，用于在ceph集群中以对象的形式存储数据。ceph还支持多租户对象存储，可以通过RESTful API访问。此外，RGW还支持ceph管理API，可以使用本机API调用来管理ceph存储集群。

yuezhimi

2020/09/30

4K0

Ceph 12.2.0 正式版本发布，代号 Luminous

Ceph 是一个可扩展的分布式存储系统，性能卓越，安全可靠。 Ceph 12.2.0 正式版已发布。这是Luminous v12.2.x长期稳定版本的第一个版本。在Kraken（v11.2.z）和 Jewel（v10.2.z）后我们做了很多重大修改，而且升级过程并不简单哦。请仔细阅读版本说明。

Debian中国

2018/12/20

2K0

Ceph客户端的异步IO机制以及常用的接口

Ceph客户端的异步IO机制使用了多个线程来执行IO操作并提高存储性能。下面是它的工作流程和如何提高性能的几个方面：

一凡sir

2023/12/24

5060

Ceph客户端的异步IO机制以及常用的接口

Ceph RGW配置Nginx代理出现S3Error: 403 (Forbidden)

nginx github git 开源 html

因为 RGW 的默认 web server 用的是 civetweb，又因为 civetweb 的日志比较简单，没法统计用户通过 S3 读写数据的详细的性能数据，所以就考虑在 RGW 前通过 Nginx 来做本地代理，然后解析 Nginx 的日志，来获取请求状态，数据量和请求的返回时间等信息。然而一段猛操作之后，发现用户原来通过 s3cmd 2.0.1 能够请求成功的请求全都变成403了，因此本地安装 s3cmd 来测试一下发下还真是 S3Error: 403 (Forbidden)，给 s3cmd 加个 debug 选项 -d，错误如下图。

runzhliu

2020/08/06

2.7K0

Ceph Swift Api 配置与使用（三）

在 ceph 的使用上，互联网大规模的文件场景下， fs 并不能满足生产的使用要求， rados 本地化操作也不便于服务的接入与使用, 这里我们就要采用 Ceph Swift Api 来实现文件的存储管理。

Lansonli

2022/04/11

9570

Ceph Swift Api 配置与使用（三）

Github 29K Star的开源对象存储方案——Minio入门宝典

分布式对象存储存储数据湖数据库

对象存储不是什么新技术了，但是从来都没有被替代掉。为什么？在这个大数据发展迅速地时代，数据已经不单单是简单的文本数据了，每天有大量的图片，视频数据产生，在短视频火爆的今天，这个数量还在增加。有数据表明，当今世界产生的数据，有80%是非关系型的。那么，对于图片，视频等数据的分析可以说是大数据与人工智能的未来发展方向之一。

用户6070864

2021/10/26

11.8K1

Github 29K Star的开源对象存储方案——Minio入门宝典

Kubernetes 集群基于 Rook 的 Ceph 存储之块设备、文件系统、对象存储

容器对象存储分布式 node.js kubernetes

要使用基于 Rook 的 Ceph 存储中的块设备、文件系统以及对象存储，必须保证已通过 Rook 完成 Ceph 存储集群的搭建，并且保证 Ceph 存储集群处于 active + clean 状态。这里搭建过程可以参考上一篇 Kubernetes 集群基于 Rook 搭建 Ceph 分布式存储系统文章，讲解的很详细。Kubernetes 集群搭建亦可参照上一篇文章，版本为 1.12.1，这里均忽略搭建过程，下边通过示例分别演示下如何使用这块设备、文件系统、对象存储方案。

哎_小羊

2019/05/25

4.9K1

【android系统】使用s3来上传下载文件

打包 http 容器 android

我们的安卓容器需要使用 s3 来进行一些文件的上传和下载，因为 s3cmd 是 Python 写的，所以想运行 s3cmd，估计是不行的，如果需要使用静态编译的 s3 客户端程序，随手在 github 上搜了一个 s3-cli，这个项目是用 Go 写的，所以只要在本地编译的时候加上 static 就可以了。

runzhliu

2020/08/05

1.4K0

云原生 | 从零开始，Minio 高性能分布式对象存储快速入手指南

存储分布式对象存储高性能云原生

描述: 对象存储（Object Storage）是一种存储数据的计算机体系结构，它以对象的形式存储和管理数据。与传统的文件系统和块存储不同，对象存储将数据作为对象存储在分布式的存储集群中，每个对象都有一个唯一的标识符（通常是一个URL），并且可以通过这个标识符来访问和检索数据。

全栈工程师修炼指南

2023/10/31

10.2K1

云原生 | 从零开始，Minio 高性能分布式对象存储快速入手指南

【CEPH-初识篇】ceph详细介绍、搭建集群及使用，带你认识新大陆

分布式编程算法文件存储存储 node.js

Ceph在一个统一的系统中独特地提供对象、块和文件存储。Ceph 高度可靠、易于管理且免费。Ceph 的强大功能可以改变您公司的 IT 基础架构和管理大量数据的能力。Ceph 提供了非凡的可扩展性——数以千计的客户端访问 PB 到 EB 的数据。ceph存储集群相互通信以动态复制和重新分配数据。

秋意零

2022/06/04

14.1K0

【CEPH-初识篇】ceph详细介绍、搭建集群及使用，带你认识新大陆

ceph对象存储折腾记原

###前言一直想弄对象存储，以前弄过一次，不是很理解region是个什么东西，后来时间和工作上的原因没有再折腾，这两天闲了下来，再次折腾了一次。我是参考的ceph的中文翻译文挡进行的部署和测试。传送门,文档里面介绍的和ceph本身的版本存在脱节的现象，可能初次接触的人会因为服务启动的问题摸不着头脑。 ###关于部署安装ceph必要的软件包，配置好公共密钥和ceph mon的配置，这里我不再谈了。对象存储额外需要安装的包是：ceph-radosgw和ceph-common 安装完毕你的系统上应该至少存在三个命令：rados 、 radosgw 、 radosgw-admin 其中整个对象网关服务就是由radosgw来启动的，radosgw-admin负责管理对象资源（用户，权限，bucket），rados基本算一个比较简单的s3客户端（？我这里可能理解不是很精确） ####配置 ceph.conf

domain0

2018/08/02

6610

Ceph RADOS Gateway安装

存储对象存储 gateway 对象数据

对象存储以独立的对象的形式管理数据，而不是传统的文件层次结构或块存储的形式。每个对象包括数据、元数据和唯一标识符。元数据是描述数据的信息，比如创建日期、类型和其他相关信息。

没有故事的陈师傅

2023/08/09

6700

Ceph RADOS Gateway安装

MinIO对象存储

容器存储对象存储服务数据

MinIO 是一个基于Apache License v2.0开源协议的对象存储服务。它兼容亚马逊S3云存储服务接口，非常适合于存储大容量非结构化的数据，例如图片、视频、日志文件、备份数据和容器/虚拟机镜像等，而一个对象文件可以是任意大小，从几kb到最大5T不等。

别团等shy哥发育

2023/03/30

7.6K0

【s3cmd】文件名一个空格带来的烦恼

正常使用的 Ceph RGW，还有正常使用的 s3cmd，突然今天碰到一个用户反馈说，在使用 s3cmd get 时候出现大量的404，也就是下载对象 Object 的时候发现对象不存在。

runzhliu

2020/07/24

1K0

对象存储基础概念

存储数据库 sql 文件存储对象存储

对象存储诞生之初谈到为什么要有对象存储，必须聊聊对象存储诞生之前的两大存储模型：块存储和文件存储。块存储主要是将存储介质的空间整个映射给主机使用的，主机如果需要对这些空间进行读写IO操作，需要先进行分区和格式化处理，形成可以被操作系统识别的逻辑命名空间，之后主机才能通过操作系统对这些存储介质进行读写操作。常见的块存储有磁盘，SSD，NAS、SAN等，这些物理设备都或多或少存在物理上的极限，比如存储空间、性能等都存在物理极限。文件存储立足于物理存储介质之上，是操作系统对数据管理操作的抽象，这些抽象最终汇

用户1260683

2018/03/26

5.8K0

相关推荐

有了MinIO，你还会用FastDFS么？

更多 >