带你读《存储漫谈Ceph原理与实践》第二章Ceph 架构2.2 Ceph 数据寻址（一）
在从方案演进及变迁的较为宏观角度对比了分布式存储系统的有中心架构与无中心架构寻址方式之后，本小节将深入Ceph 存储系统的数据寻址方案，进行详细介绍。在 PB 级数据存储和成百上千台存储服务器纳管的需求背景下，大规模分布式存储系统必须做到数据和负载的均衡分布，以此来提高资源利用率，最大化系统的性能输出，同 时要处理好系统的扩展和硬件失效问题。Ceph设计....
带你读《存储漫谈Ceph原理与实践》第二章Ceph 架构2.1数据寻址方案
本章探讨分布式存储系统的数据寻址方式，从数据寻址以及 I/O 流程入手，逐步揭开Ceph存储系统的神秘面纱。 2.1 数据寻址方案 存储系统的核心功能是数据的存取，实现这一目标的前提是正确、高效的数据寻址策略，即存储系统首要解决的问题是数据写到哪里去，数据从哪里读出。经过学术界和工业界多年的探索和实践，数据寻址的方式基本被归结为两大类，分别 是查表....
带你读《存储漫谈Ceph原理与实践》第一章分布式存储概述1.1存储系统的架构演进（二）
1.1.2 分布式存储系统分布式存储最早由谷歌提出，其目的是通过廉价的商用服务器来提供海量、弹性可扩展的数据存储系统。它将数据分散地存储到多台存储服务器上（服务器分布在企业的各个角落），并将这些分散的存储资源构成虚拟的存储设备。图 1-5 展示了分布式存储系统的工作模式。分布式存储架构通常由 3个部分组成：客户端、元数据服务器以及数据服务器。客户端负责发送读写请求、缓存文件元数据和文件数据；元数....
带你读《存储漫谈Ceph原理与实践》第一章分布式存储概述1.1存储系统的架构演进（一）
云计算与大数据技术的发展，推动存储系统架构的持续演进，存储系统从最原始的基 于主机的架构逐步向网络化、虚拟化方向发展，存储系统更加关注性能、效率、灵活性、 安全性的提升，而这些特性都需要好的存储架构来满足。粗略分类，存储架构的演进可以划分为以下两个阶段。第一阶段：从离散化到集中化的演进（从DAS到SAN/NAS）。互联网发展初期，存储需求相对简单，数据规模较小，存储系....
基于 MySQL + Tablestore 分层存储架构的大规模订单系统实践-架构篇
作者 | 弘楠来源 | 阿里技术公众号一 背景订单系统存在于各行各业，如电商订单、银行流水、运营商话费账单等，是一个非常广泛、通用的系统。对于这类系统，在过去十几年发展中已经形成了经典的做法。但是随着互联网的发展，以及各企业对数据的重视，需要存储和持久化的订单量越来越大，数据的重视程度与数据规模的膨胀带来了新的挑战。首先，订单量对于数据的存储、持久化、访问带来了挑战，这不仅增加了开发面对的困难.....
基于 MySQL + Tablestore 分层存储架构的大规模订单系统实践-架构篇
背景订单系统存在于各行各业，如电商订单、银行流水、运营商话费账单等，是一个非常广泛、通用的系统。对于这类系统，在过去十几年发展中已经形成了经典的做法。但是随着互联网的发展，以及各企业对数据的重视，需要存储和持久化的订单量越来越大，数据的重视程度与数据规模的膨胀带来了新的挑战。首先，订单量对于数据的存...
基于 MySQL + Tablestore 分层存储架构的大规模订单系统实践-数据同步 DTS 篇
前言 前文架构篇，可以看到 MySQL + Tablestore 非常适合大规模订单系统这一类需求场景。那么，我们首先要做的是，利用 CDC(Change Data Capture) 技术将订单数据实时从 MySQL 同步到 Tablestore 中。对于订单系统的数据...
基于 MySQL + Tablestore 分层存储架构的大规模订单系统实践-数据同步 Canal 篇
前言 在基于 MySQL + Tablestore 分层存储架构的大规模订单系统中，利用 CDC 技术将 MySQL 数据同步到 Tablestore 是不可缺少的一步。前文已经详细讲述了如何使用 DTS 向 Tablestore 同步数据。对于中小规模的数据库，或者个人开发者，还可以使用 Canal 从 MySQL 向 Tablestore 同步数据。Canal 部署简单，易于运维，...
基于 MySQL + Tablestore 分层存储架构的大规模订单系统实践-订单搜索篇
背景在大规模订单系统中，存在以下常见需求：查询某店铺过去一段时间成交额查询某品牌商品在过去一周内的成交额查询在某店铺购物的客户列表……因此，开发者对于数据库在非主键查询、多列的自由组合查询等复杂查询需求上会有比较高的要求。传统的订单系统会使用 Elasticsearch 或者 Solr 来实现这一需求，但伴随而来的是更高的系统复杂度和更加昂...
基于 MySQL + Tablestore 分层存储架构的大规模订单系统实践-SQL 查询和分析
前言前面我们介绍了基于 MySQL + Tablestore 分层架构的订单系统。订单数据储存进入 Tablestore 后，用户可以使用 SDK 中的 API 访问数据，也可以继续使用 SQL 访问 Tablestore 中的数据。Tablestore&nb...
本页面内关键词为智能算法引擎基于机器学习所生成，如有任何问题，可在页面下方点击"联系我们"与我们沟通。
架构更多存储相关
金融级分布式架构
SOFAStack™（Scalable Open Financial Architecture Stack）是一套用于快速构建金融级分布式架构的中间件，也是在金融场景里锤炼出来的最佳实践。
+关注