Ceph Reef(18.2.X)的对象存储网关(rgw)组件搭建
作者:尹正杰版权声明:原创作品,谢绝转载!否则将追究法律责任。 一.对象存储系统概述 1.对象存储网关概述 Ceph对象网关可以将数据存储在用于存储来自cephfs客户端或ceph rbd客户端的数据的同一ceph存储集群中。 object是对象存储系统中数据存储的基本单位,每个Object时数据...
带你读《存储漫谈:Ceph原理与实践》——3.2.1 对象存储和 S3
3.2 对象存储 RGW 3.2.1 对象存储和 S3 1. 什么是对象存储 对象存储,也称为基于对象的存储,是一种采用扁平化数据组织的新型存储方式。对象存储主要用于处理海量半结构化或者非结构化数据,常用于备份归档、静态网站托管、视频存储以及无纸化办公、网盘等场景。同时,根据具体应用场景和业务使用形态,对象存储可进一步细分为多种不同存储类别,如标准...
带你读《存储漫谈:Ceph原理与实践》——3.2.2 RGW 架构
3.2.2 RGW 架构 对象存储 S3 为 AWS 早在 2006 年推出的 IaaS 服务,如今对象存储已经成为整个互联网行业非结构化数据存储的底座。Ceph 中的 RGW 服务实现了对 AWS S3 接口的兼容,Ceph RGW 经过 10 余年的发展,如今已经成为对 AWS S3 特性兼容最全面的开源实现。任何对对象存储实现感兴趣的人都能从了解 Ceph RGW 中受...
带你读《存储漫谈:Ceph原理与实践》——3.2.3 I/O 路径
3.2.3 I/O 路径 RGW 是 RADOS Gateway,顾名思义是 RADOS 对象存储系统上层的一个网关服务,根据网关的功能定义,网关负责完成不同协议的转换和对接。在 Ceph 场景中,RGW即完成类似的功能:接收用户 S3/Swift 接口规则的数据存取请求,然后将其转化为后端RADOS 能够处理的操作。 RGW 的请求处理经历了 3 个阶段: ...
带你读《存储漫谈:Ceph原理与实践》——3.2.4 元数据 / 数据布局
3.2.4 元数据 / 数据布局 前面提到过,Ceph RGW 将数据组织分为 3 种类型:Metadata、bucket index 及 data。Metadata 是 对 象 的 元 数 据, 包 含 user、bucket、bucket.instance、OTP 等 信 息;bucket index 是对象的索引,严格意义上,也可以将其归类到元数据范畴内;data 是对象...
带你读《存储漫谈:Ceph原理与实践》——3.2.5 元数据 / 数据同步
3.2.5 元数据 / 数据同步 Ceph RGW 的多数据中心(Multisite)机制用于实现多个 Ceph 对象存储集群之间的元数据、数据同步。 1. 元数据同步 (1)多数据中心简介 Ceph 的多数据中心有如下几个概念:Realm、Zone Group、Zone,如图 3-31 所示。 ...
带你读《存储漫谈:Ceph原理与实践》——3.2.6 未来展望
3.2.6 未来展望 1. RGW 优势 Ceph 的 RGW 在不断引入新功能的情况下,经历几次大规模的重构,整个架构设计分层清晰、责任明确,保证了整个 RGW 的可演进。RGW 当前的架构也充分考虑了非功能性的需求。 RGW 通过引入 beast HTTP 服务器前端以及使用 librados 异步 API,逐渐向读写路径异步化的方向演进。 在可观...
带你读《存储漫谈Ceph原理与实践》第三章接入层3.2对象存储RGW(六)
3.2.6 未来展望 1. RGW优势 Ceph的 RGW 在不断引入新功能的情况下,经历几次大规模的重构,整个架构设计分层清晰、责任明确,保证了整个RGW的可演进。RGW 当前的架构也充分考虑了非功能性的需求。RGW通过引入 beastHTTP服务器前端以及使用 librados异步 API,逐渐向读写路径异步化的方向演进....
带你读《存储漫谈Ceph原理与实践》第三章接入层3.2对象存储RGW(五)
3.2.5 元数据/数据同步CephRGW的多数据中心(Multisite)机制用于实现多个 Ceph 对象存储集群之间的元数据、数据同步。1. 元数据同步 (1)多数据中心简介Ceph 的多数据中心有如下几个概念:Realm、ZoneGroup、Zone,如图 3-31所示。 图 3-31....
《存储漫谈Ceph原理与实践》第三章接入层3.2对象存储RGW(四)
2. RGWData RGW对象数据存储在 {zone}.rgw.buckets.data池里,一个 RGW对象包含一个或多个 RADOS对象。当 RGW收到写请求时,会基于 rgw_obj_stripe_size配置的值(默认为4MB)将数据切分为 stripe,并基于 rgw_max_chunk_size配置(默认为 4MB)将这些stripes划分为更小的 chunk....
本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。
对象存储OSS
对象存储 OSS 是一款安全、稳定、高性价比、高性能的云存储服务,可以帮助各行业的客户在互联网应用、大数据分析、机器学习、数据归档等各种使用场景存储任意数量的数据,以及进行任意位置的访问,同时通过丰富的数据处理能力更便捷地使用数据。
+关注