文章 2021-08-30 来自:开发者社区

基于 MySQL + Tablestore 分层存储架构的大规模订单系统实践-数据处理ETL篇

前言大数据计算服务 MaxCompute(原名 ODPS)是一种快速、完全托管的EB级数据仓库解决方案。随着数据收集手段不断丰富,行业数据大量积累,数据规模已增长到了传统软件行业无法承载的海量数据(TB、PB、EB)级别。MaxCompute 致力于批量结构化数据的存储和计算,提供海量数据仓库的解决...

基于 MySQL + Tablestore 分层存储架构的大规模订单系统实践-数据处理ETL篇
文章 2021-08-30 来自:开发者社区

基于 MySQL + Tablestore 分层存储架构的大规模订单系统实践-历史数据分析篇

前言在大规模订单系统中,离线的数据分析必不可少。工程师和运营人员使用批处理工具如 Spark 对历史数据进行计算分析,其计算结果可以用于用户画像、产品推荐等多个场景。传统的 MySQL 分库分表架构是无法应对这种需求的,一般会引入 Hive 对数据进行归档存储,然后利用 Hive 来对接 Spark ...

基于 MySQL + Tablestore 分层存储架构的大规模订单系统实践-历史数据分析篇
文章 2021-08-30 来自:开发者社区

基于 MySQL + Tablestore 分层存储架构的大规模订单系统实践-数据流计算篇

背景 在订单系统中,利用 Spark streamimg 或者 Flink 对接数据流并进行数据分析是一种常见请求。常见的场景如下: 大促开始后,实时显示当前总成交金额。 大促开始后,实时画出成交量走势图。 …… MySQL 若需要支持此类场景,需要开发应用,解析 binlog 中的数据,对接中间件,开发成本运维成本都会...

基于 MySQL + Tablestore 分层存储架构的大规模订单系统实践-数据流计算篇
文章 2021-07-20 来自:开发者社区

RDS MySQL 云原生架构实践

一、阿里云RDS MySQL简介(一)简介阿里云RDS MySQL是阿里云数据库产品核心产品,也是全球最受欢迎的开源数据库之一。阿里云RDS MySQL在集团内支撑核心电商交易以及数十个不同BU的业务。另一方面在公共云作为一款商业化PaaS产品,支撑阿里巴巴之外的各个公司的业务体系。同时也作为一款专有云的产品,输出到不同企业平台。可以用三个词来形容阿里云RDS MySQL。第一个是我们的用户群体....

RDS MySQL 云原生架构实践
问答 2020-05-11 来自:开发者社区

JDBC MySql连接池实践可避免连接池耗尽

我在GlassFish上有一个Java-JSF Web应用程序,我想在其中使用连接池。因此,我创建了一个有application范围的Bean,可与Connection其他Bean的实例一起使用: public class DatabaseBean { private DataSource myDataSource; public DatabaseBean() { try { ...

文章 2020-05-05 来自:开发者社区

应用开发实践之关系型数据库(以MySql为例)小结

应用开发实践之关系型数据库(以MySql为例)小结 本文主要是对目前工作中使用到的DB相关知识点的总结,应用开发了解到以下深度基本足以应对日常需求,再深入下去更偏向于DB本身的理论、调优和运维实践。不在本文重点关注讨论的内容(可能会提到一些): 具体的DQL、DML、DDL、DCL等语法基础性的概念,如主键、索引、存储过程(注:阿里巴巴规范中禁止使用存储过程)等联合查询,我个人不太喜欢在应用中写....

文章 2020-02-14 来自:开发者社区

MySQL 的主从复制实践

简介 MySQL 的主从复制又叫 Replication、AB 复制。至少需要两个 MySQL 服务(可以是同一台机器,也可以是不同机器之间进行)。 比如A服务器做主服务器,B服务器做从服务器,在A服务器上进行数据的更新,通过 binlog 日志记录同步到B服务器上,并重新执行同步过来的 binlog 数据,从而达到两台服务器数据一致。 MySQL 数据库的主从复制方案,与使用 scp/rsy.....

MySQL 的主从复制实践
问答 2019-12-17 来自:开发者社区

各位大佬,在一个 Job 计算过程中,查询 MySQL 来补全额外数据,是一个好的实践嘛?还是说流处

各位大佬,在一个 Job 计算过程中,查询 MySQL 来补全额外数据,是一个好的实践嘛?还是说流处理过程中应该尽量避免查询额外的数据? 本问题来自阿里云开发者社区的【11大垂直技术领域开发者社群】。 点击这里欢迎加入感兴趣的技术领域群。

文章 2019-11-12 来自:开发者社区

MySQL/RDS数据如何同步到MaxCompute之实践讲解

摘要:大数据计算服务(MaxCompute,原名ODPS)是阿里云提供的一种快速、完全托管的EB级数据仓库解决方案。本文章中阿里云MaxCompute公有云技术支持人员刘力夺通过一个实验向大家介绍了阿里云关系型数据库产品RDS中的MySQL数据如何同步到MaxCompute,帮助用户大体了解MaxCompute产品以及其数据同步过程。 直播视频回顾:MySQL/RDS数据如何同步到MaxComp....

文章 2019-11-01 来自:开发者社区

阿里云InfluxDB®采集监控MySQL实践

目前阿里云InfluxDB®已经集成TIG(Telegraf/InfluxDB/Grafana)生态,正在开展首月一元购活动。MySQL采用TIG Stack监控架构如下,本文主要指导如何采集MySQL指标到阿里云InfluxDB®,通过Grafana仪表盘分析采集数据并展示。 数据采集 阿里云InfluxDB®的数据采集分为两种:阿里云InfluxDB®数据采集服务与自建Telegraf数据采....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。