基于 MySQL + Tablestore 分层存储架构的大规模订单系统实践-基于 DLA 的联邦查询
前言在订单系统中，基于订单数据对客户和商家商品进行画像分析是一种常见的需求。常见的分析需求有：基于主键、分区键数据的条件组合检索，例如获取某用户最近 30 的订单列表。根据非主键列、分区键的条件组合检索工作，例如查询过去一天异常订单列表、查询过去一天成交额最大的10 笔订单。聚合统计类需求，比如统计某店铺过去一个月各商品销售额...
基于 MySQL + Tablestore 分层存储架构的大规模订单系统实践-数据处理ETL篇
前言大数据计算服务 MaxCompute（原名 ODPS）是一种快速、完全托管的EB级数据仓库解决方案。随着数据收集手段不断丰富，行业数据大量积累，数据规模已增长到了传统软件行业无法承载的海量数据（TB、PB、EB）级别。MaxCompute 致力于批量结构化数据的存储和计算，提供海量数据仓库的解决...
基于 MySQL + Tablestore 分层存储架构的大规模订单系统实践-历史数据分析篇
前言在大规模订单系统中，离线的数据分析必不可少。工程师和运营人员使用批处理工具如 Spark 对历史数据进行计算分析，其计算结果可以用于用户画像、产品推荐等多个场景。传统的 MySQL 分库分表架构是无法应对这种需求的，一般会引入 Hive 对数据进行归档存储，然后利用 Hive 来对接 Spark ...
基于 MySQL + Tablestore 分层存储架构的大规模订单系统实践-数据流计算篇
背景 在订单系统中，利用 Spark streamimg 或者 Flink 对接数据流并进行数据分析是一种常见请求。常见的场景如下： 大促开始后，实时显示当前总成交金额。 大促开始后，实时画出成交量走势图。 …… MySQL 若需要支持此类场景，需要开发应用，解析 binlog 中的数据，对接中间件，开发成本运维成本都会...
钉钉专属存储的几种部署架构
专属存储功能是专属钉钉的一项增值功能，支持将企业的钉盘数据、即时消息发送的文件、审批的附件等存储到企业指定的OSS空间中，支持的存储介质包括公共云OSS、专有云OSS、MiniOSS。其中MiniOSS具有较高的性价比而被广泛采用，在我们在上次的文章中介绍了为MiniOSS选择证书的一些注意事项，这次就聊一聊MiniOSS在钉钉专属存储应用场景下常用的三种部署架构：一、防火墙直接映射这是最简单的....
PolarDB-X 存储架构之“基于Paxos的最佳生产实践”
作者：七锋背景MySQL数据库从诞生以来就以其简单开放、易用、开源为其主打的特点，成为不少开发者首选的数据库系统。阿里在09年开始提出去IOE的口号，也选择基于开源MySQL进行深度发展，结合TDDL的技术完成了去IOE的工作，这也是早期的PolarDB-X发展的技术栈。2014年开始，随着业务高速的增长，以及“异地多活”的新需求驱动，基于MySQL的一致性协议技术X-Paxos在阿里集团得到了....
数据湖存储架构选型
本文内容来自由阿里云计算平台事业部与阿里云开发者社区联合主办的大数据+AI meetup 2020第二站·上海讲师郑锴的分享《数据湖存储架构选型》 一、数据湖是个潮流 简单来讲，数据湖的理念就是说从一个企业的视角来讲，把整个数据集中的统一的存储在一起，主要通过 BI 和 AI 的手段来计算分析原始的数据。数据的类型不光是结构化、半结构化的，还包括音视频，这样的一些材料。 我们为什么要基于数据...
Nebula 架构剖析系列（一）图数据库的存储设计
摘要 在讨论某个数据库时，存储 ( Storage ) 和计算 ( Query Engine ) 通常是讨论的热点，也是爱好者们了解某个数据库不可或缺的部分。每个数据库都有其独有的存储、计算方式，今天就和图图来学习下图数据库 Nebula Graph 的存储部分。 Nebula 的 Storage 包含两个部分， 一是 meta 相关的存储， 我们称之为 Meta Service ，另一...
本页面内关键词为智能算法引擎基于机器学习所生成，如有任何问题，可在页面下方点击"联系我们"与我们沟通。
架构更多存储相关
金融级分布式架构
SOFAStack™（Scalable Open Financial Architecture Stack）是一套用于快速构建金融级分布式架构的中间件，也是在金融场景里锤炼出来的最佳实践。
+关注