MySQL和阿里云RDS应用和实践宝典-云栖社区-阿里云
了解详情 故障排查 Oracle迁移到MySQL性能下降的注意点 Oracle在OLAP的应用场景中可以利用并行处理技术来运行非常复杂的SQL查询。了解详情 MySQL 5.5版本注意大内存导致DDL变慢的问题 用户在测试不同规格的时候发现...
云数据库ApsaraDB_产品总览
同时拥有最高性价比的企业级数据库 了解更多产品信息>>HybridDB（PostgreSQL）分布式MPP并行处理OLAP数据仓库 支持GIS地理数据分析、行/列存储，业界流行的BI及ETL工具可快速对接 了解更多产品信息>>HybridDB（MySQL...
专题合集-云栖社区-阿里云
MySQL和阿里云RDS应用和实践宝典 MySQL大神的性能优化、故障排查、最佳实践秘籍。阿里云数据库专家玄惭的“武功”全记录。性能优化 故障排查 最佳实践 问题分析 阿里云首批MVP详解 阿里云宣布启动最有价值技术专家...
专有云解决方案_阿里云
提供了全套的容灾切换、故障迁移、在线扩容、性能优化的数据库解决方案。https://www.aliyun.com/product/kvstore?spm=5176.55326.416540.44.bZEt5z DTS 数据传输支持关系型数据库、NoSQL、大数据(OLAP)等数据源间...
Elasticsearch技术团队-云栖社区-阿里云
云栖社区 系统软件 数据存储与数据库 系统研发与运维 大数据 安全 监控 性能优化 加密 性能监控 个性化推荐 集群 aliyun Elasticsearch ELK【X-Pack解读】阿里云Elasticsearch X-Pack 机器学习组件功能详解 作者:...
2016云栖大会北京-大会议程-阿里云
PostgreSQL号称世界上最高级的开源数据库，关系数据库中的“瑞士军刀”，Greenplum则是基于PG的MPP产品，OLAP场景的“小钢炮”。如今这两头大象在阿里云ApsaraDB阵营扎根。阿里云针对这两个数据库在云上的数据库安全...
MySQL性能优化总结
七、MySQL数据库Schema设计的性能优化 高效的模型设计 适度冗余-让Query尽两减少Join 大字段垂直分拆-summary表优化 大表水平分拆-基于类型的分拆优化 统计表-准实时优化 合适的数据类型 时间存储格式总类并不是太多...
MySQL性能优化总结（转）
七、MySQL数据库Schema设计的性能优化 高效的模型设计 适度冗余-让Query尽两减少Join 大字段垂直分拆-summary表优化 大表水平分拆-基于类型的分拆优化 统计表-准实时优化 合适的数据类型 时间存储格式总类并不是太多...
Oracle迁移到MySQL性能下降的注意点
记忆最为深刻的子查询，当初的版本是MySQL5.1，这个版本对子查询的优化较差，导致了很多从Oracle迁移到MySQL的系统出现过性能问题，所以后面的开发规范中规定前台交易系统不要有复杂的表join。接下来我将列举一些...
美图秀秀DBA谈MySQL运维及优化
目录 MySQL的优势和劣势 数据库规范化 Sharding拆分 数据库备份 性能优化 从每个月的db engines排名可以看到，关系数据库依然占主导地位，nosql的种类和可选择空间更大，总共283种数据库，里面大多数也是NoSQL。如何...
PostgreSQL 场景与性能测试之 21-(OLTP+OLAP)排序、建...
标签 PostgreSQL,HTAP,OLTP,OLAP,场景与性能测试 背景 PostgreSQL是一个历史悠久的数据库，历史可以追溯到1973年，最早由2014计算机图灵奖得主，关系数据库的鼻祖Michael_Stonebraker&操刀设计，PostgreSQL具备与...
HTAP数据库 PostgreSQL 场景与性能测试之 20-(OLAP)...
标签 PostgreSQL,HTAP,OLTP,OLAP,场景与性能测试 背景 PostgreSQL是一个历史悠久的数据库，历史可以追溯到1973年，最早由2014计算机图灵奖得主，关系数据库的鼻祖Michael_Stonebraker&操刀设计，PostgreSQL具备与...
解读阿里云数据库团队如何打通OLAP和OLTP任督二脉
HybridDB还支持行列混合存储，列存性能在OLAP分析时相比行存储可达100倍性能提升，为数据挖掘提供强大的性能基础。同时基于OSS的数据并行导入模式，可以实现每分钟100,000,000（1亿）行以上的数据导入性能。HybridDB...
【沉淀】实例迁移、Insert和写入性能——数倍，甚至数...
MySQL是一款分布式HTAP数据库产品，用户无需维护复杂的外部组件进行性能扩展，因为在一个数据库内，它同时支持OLTP和OLAP业务——支持在线扩容，提供MySQL的使用生态。之所以开发这样的数据库，主要是为阿里内部业务...
在MySQL和PostgreSQL之外，为什么阿里要研发HybridDB...
已有的两个主流开源数据库，MySQL和PostgreSQL都是针对OLTP环境的，在OLAP在线分析需求下它们的性能明显不足。特别是MySQL在大规模分析操作时多表Join的性能是当前互联网用户的一大痛点。在OLAP发展的早期，其操作并...
TokuDB·引擎特性·HybridDB for MySQL高压缩引擎...
MySQL兼容MySQL的语法及函数，并且增加了对Oracle常用分析函数的支持，100%完全兼容TPC-H和TPC-DS测试标准，从而降低了用户的开发、迁移和维护成本。TokuDB是TokuTek公司（已被 Percona收购）研发的新引擎，支持事务...
TokuDB·引擎特性·HybridDB for MySQL高压缩引擎...
MySQL兼容MySQL的语法及函数，并且增加了对Oracle常用分析函数的支持，100%完全兼容TPC-H和TPC-DS测试标准，从而降低了用户的开发、迁移和维护成本。TokuDB是TokuTek公司（已被 Percona收购）研发的新引擎，支持事务...
让人敬佩的白发程序员——MySQL/MariaDB之父Monty阿里...
AB原厂工程师而具备的更强的开发能力和对MySQL源码更好的理解，例如在高并发场景下，MariaDB通过简单的代码优化，就远远超过了MySQL 5.7及其复杂的修改所获得的收益。以及MariaDB实现了真正的完全并行的备库多线程...
MySQL向左，PostgreSQL向右：平安科技在金融应用的...
在加入平安之前，就职于Oracle香港高级客户服务部门，为中国、香港以及澳门客户提供数据库架构设计，数据库性能优化等高级服务。加入平安后，负责数据库技术引入，数据库产品选型，数据库架构设计，数据库规范制定，...
【福利】MySQL vs Postgre SQL:5个你最关注的非技术...
MariaDB 为了避免Oracle公司拥有MySQL后，停滞对MySQL的开发，MySQL核心研发工程师Monty与其开发团队在MySQL 5.5版本后，独立出MariaDB分支，并且随后变更版本号为10.x系列版本，与MySQL官方不再同步代码与特性。其...
如何支撑HTAP场景——HybridDB for MySQL系统架构和...
我们线上观察得知，MySQL性能最合适的情况下是30-50个并发连接，ALDP并发连接可以高达几千、上万。传统数据库问题会限制它在大数据领域的能力发挥，因此借鉴了分库分表中间件，就是把这些数据切开，每个数据利用业务...
新浪爱彩票DBA总监：为什么你的MySQL跑得很慢？
复杂SQL的优化，也是DBA很重要的一个活，需要通过监控的手段找出这些复杂SQL、慢SQL、烂SQL，然后给出优化建议到程序员(DBA要进行性能对比测试)，让程序员改造下代码，才能让系统真正畅快并行地跑起来，像不堵车的...
从商用到开源：DB2迁移至MySQL的最佳实践
包含DB2与MySQL兼容性测试，MySQL性能测试，MySQL基于OLPT的测试等等。迁移过程 1、应用设计与改造。2、MySQL高可用设计与部署 3、MySQL备份与恢复设计 4、迁移中的重点问题和注意事项 迁移优化 1、性能测试 2、系统...
HTAP数据库——HybirdDB for MySQL产品和典型方案介绍
MySQL就是性能加强、功能和MySQL完全一样的分布式数据库，当然用户原来基于MySQL开发的应用、一些基于其它报表工具做的报表都可以无缝移植到HybirdDB产品上来。强劲的并行处理& 用户在使用HybirdDB产品能力时具备TB...
MySQL 5.6的72个新特性（译）
你可以在任何手工导入导出buffer_pool，比如在性能测试时或者在执行复杂的OLAP查询后。◦ 四，分区 24.最大分区数量提高到8192，这包括所有的分区和子分区。25.使用ALTER TABLE…EXCHANGE PARTITION 可以在未分区表...
京东MySQL数据库Docker化最佳实践（附PPT）
DBA一职，负责数据库架构设计、数据库性能优化等日常运维工作，参与过分布式数据库项目、多中心交易项目等。2013~2016连续4年作为MySQL数据库618、11.11项目DBA负责人，负责相应备战工作，为大促平稳护航。演讲大纲...
MySQL存储引擎之Spider内核深度解析
Spider是为MySQL/MariaDB开发的一个特殊引擎，具有内嵌分片功能。现在它已经被集成到MariaDB10.0及以上版本中，作为MariaDB的一个新的主要特性。Spider的主要功能是将数据分散到多个后端节点，它的作用类似于一个...
海量高性能列式数据库HiStore技术架构解析
专门针对OLAP应用程序进行设计和优化,在常规X86服务器上,HiStore可以在百亿数据场景下进行高性能,多维度自由组合 的adhoc查询. 相对比常规事务引擎,其查询速度提升了数倍甚至数十倍。此外HiStore完全兼容MySQL通讯...
历程剖析：阿里云自研HTAP数据库的技术发展之路
阿里云高级数据库技术专家队皓庭分享了高度兼容MySQL，并且能免去传统数仓ETL过程实现数据分析，同时支持高并发、大吞吐量的在线事务处理的PB级数据存储数据库是如何实现的，帮助大家了解了同时支持海量数据在线事务...
数据库案例集锦-开发者的《如来神掌》
1、《PostgreSQL 模糊查询最佳实践》2、《中文模糊查询性能优化 by PostgreSQL trgm》3、《聊一聊双十一背后的技术- 毫秒分词算啥,试试正则和相似度》4、《PostgreSQL 百亿数据 秒级响应 正则及模糊查询》5、...
PostgreSQL 10+PostGIS+Sharding(pg_pathman)+MySQL...
标签 PostgreSQL,Linux,CentOS 背景 新用户部署PostgreSQL以及空间数据库插件PostGIS的指南。内网环境RPM打包(可选项)如果是内网环境，可以将包全部下载到本地再用rpm安装。安装epel和postgresql yum rpm两个包后再...
TiDB 助力一面数据实现消费领域的决策分析平台
水平扩展能力弱，性能和稳定性容易产生问题，在数据量和访问量增长到一定阶段将无法满足常见的 OLAP 场景分析需求。技术团队通过诊断系统性能问题，认识到现有数据库已经成为瓶颈。Cassandra：Cassandra 对磁盘 IO ...
HTAP数据库 PostgreSQL 场景与性能测试之 30-(OLTP)...
标签 PostgreSQL,HTAP,OLTP,OLAP,场景与性能测试 背景 PostgreSQL是一个历史悠久的数据库，历史可以追溯到1973年，最早由2014计算机图灵奖得主，关系数据库的鼻祖Michael_Stonebraker&操刀设计，PostgreSQL具备与...
星瑞格：从阿里HybridDB看数据库选择的新方向
专家认为，大数据时代MySQL和PostgreSQL已经无法支撑海量数据多维度的OLAP分析处理技术，并且，已有的两个主流开源数据库MySQL和PostgreSQL主要针对的是OLTP环境，在OLAP在线分析需求下的性能明显不足。尤其是MySQL...
阿里10年分布式技术沉淀：阿里高可用体系核心缔造者、...
在阿里巴巴业务飞速发展的驱动下，相对于开源MySQL，AliSQL在性能优化、功能增强、可运维性提升等方面都做了大量改进。2016年我们在Percona Live上完成分享后，Percona首席布道师Colin Charles听完后大加赞赏。而从...
TiDB 2016 回顾与 2017 的一些想法
的发布标志着接口和功能的稳定，至少今年技术上的主要目标是进一步的性能优化，更高的兼容性以及更好的用户部署和使用体验，新功能开发和大规模的重构应该是不会发生的。在性能优化上的一些想法，其实分两个比较大的...
用好HugePage，告别Linux性能故障
由于服务器进程的代码是Oracle公司开发的，所以Oracle公司完全相信这些进程或代码是安全的，因此这些进程可以直接操作数据文件和SGA内存，这些进程接受用户进程发送的指令，并完成相关的操作，并根据需要来给用户...
用好HugePage，告别Linux性能故障
由于服务器进程的代码是Oracle公司开发的，所以Oracle公司完全相信这些进程或代码是安全的，因此这些进程可以直接操作数据文件和SGA内存，这些进程接受用户进程发送的指令，并完成相关的操作，并根据需要来给用户...
细说分布式数据库的过去、现在与未来
RC3版本中，对MySQL兼容性、SQL优化器、系统稳定性、性能做了大量的工作。对于OLTP场景，重点优化写入性能。另外提供了权限管理功能，用户可以按照MySQL的权限管理方式控制数据访问权限。对于OLAP场景，也对优化器做...
HTAP数据库 PostgreSQL 场景与性能测试之 17-(OLTP)数...
标签 PostgreSQL,HTAP,OLTP,OLAP,场景与性能测试 背景 PostgreSQL是一个历史悠久的数据库，历史可以追溯到1973年，最早由2014计算机图灵奖得主，关系数据库的鼻祖Michael_Stonebraker&操刀设计，PostgreSQL具备与...
微观、宏观、精准 多视角估算数据库性能(选型、做预算...
标签 PostgreSQL,PPAS,Greenplum,HybridDB for PostgreSQL,性能,估算,pgbench 统计细信息,explain算法,统计信息导入导出 背景 在提预算时必不可少的环境是评估需要多少硬件。通常会要求业务方提供一些数据，例如用户...
一篇文章，掌握所有开源数据库的现状
另外，相对于MySQL 5.7以前的版本，PostgreSQL 的 SQL 优化器比 MySQL 强大很多，几乎所有稍微复杂的查询PostgreSQL 的表现都优于 MySQL。从近几年的趋势上来看，PostgreSQL 的势头也很强劲，我认为 PostgreSQL 的...
首届阿里巴巴中间件技术峰会资料回顾
在阿里巴巴业务飞速发展的驱动下，相对于开源MySQL，AliSQL在性能优化、功能增强、可运维性提升等方面都做了大量改进。2016年我们在Percona Live上完成分享后，Percona首席布道师Colin Charles听完后大加赞赏。而从...
一篇文章，掌握所有开源数据库的现状
而且从代码质量上来看，PostgreSQL 的代码质量是优于 MySQL 的，另外 PostgreSQL 的 SQL 优化器比 MySQL 强大很多，几乎所有稍微复杂的查询(当然，我没有对比 MySQL 5.7，也可能这个信息 outdated 了)PostgreSQL 的...
一篇文章，掌握所有开源数据库的现状
PostgreSQL 的 SQL 优化器比 MySQL 强大很多，几乎所有稍微复杂的查询(当然，我没有对比 MySQL 5.7，也可能这个信息 outdated 了)PostgreSQL 的表现都优于 MySQL。从近几年的趋势上来看，PostgreSQL 的势头也很强劲...
PetaData·架构体系·PetaData第二代低成本存储体系
在分布式层，PetaData利用了分库分表的思想来支持数据sharding，数据被切分到若干数据库分库上，在MySQL的物理迁移和多主复制基础上开发了快速扩容。数据分区 数据分区是大数据的普遍策略，PetaData的数据入口Proxy...
【深度长文】循序渐进解读Oracle AWR性能分析报告
而对于蜡烛较少或是没有蜡烛的系统，性能优化就如同黑暗中的舞者。那如何解读AWR的数据呢？Oracle本身提供了一些报告，方便进行查看、分析。下面就针对最为常见的一种报告——《AWR数据库报告》进行说明。希望通过这...
开源数据库企业应用的探索与实践——云栖技术之旅第1...
在本次沙龙上，阿里资深开发工程师范孝剑（花名康贤）带来了PostgreSQL优化器原理相关的分享。SQL处理过程如下：& 在PG数据库中，对于DDL语句无需进行优化，到utility模块处理，对于DML语句需要到优化器中处理，一个...
如何打造千万级Feed流系统？阿里数据库技术解读
并在METASCAN等方面做了诸多性能优化，相比开源版本有质的提升。阿里云HybridDB for PostgreSQL有以下特点：实时分析 支持SQL语法进行分布式GIS地理信息数据类型实时分析，协助物联网、互联网实现LBS位置服务统计；...
细说分布式数据库的过去、现在与未来
RC3版本中，对MySQL兼容性、SQL优化器、系统稳定性、性能做了大量的工作。对于OLTP场景，重点优化写入性能。另外提供了权限管理功能，用户可以按照MySQL的权限管理方式控制数据访问权限。对于OLAP场景，也对优化器做...
云数据库产品及架构设计背后的考量
比如表结构设计的不合理需要进行优化，一些SQL存在性能问题需要优化，以及某些设计在业务发展的过程中已经不合时宜需要优化，所有的这些优化都是DBA应该去做的。而DBA也是最容易发展成为企业核心架构师的一群人，...
Percona Live 2016 PPT整理
Sunny Brain介绍了MySQL5.7在InnoDB层做的一些性能优化和新的特性 性能优化:*事务：事务对象池；优化读写事务链表扫描为Memcpy；移除只读事务链表；Cache Read view;隐式锁转换优化以减少大锁持有时间;事务优先级；...
15个nosql数据库
对实时查询进行优化 高性能 Thrift网关 通过在server端扫描及过滤实现对查询操作预判 支持 XML,Protobuf,和binary的HTTP 基于 Jruby（JIRB）的shell 对配置改变和较小的升级都会重新回滚 不会出现单点故障 堪比...
15个nosql数据库
对实时查询进行优化 高性能 Thrift网关 通过在server端扫描及过滤实现对查询操作预判 支持 XML,Protobuf,和binary的HTTP 基于 Jruby（JIRB）的shell 对配置改变和较小的升级都会重新回滚 不会出现单点故障 堪比...
15个nosql数据库
对实时查询进行优化 高性能 Thrift网关 通过在server端扫描及过滤实现对查询操作预判 支持 XML,Protobuf,和binary的HTTP 基于 Jruby（JIRB）的shell 对配置改变和较小的升级都会重新回滚 不会出现单点故障 堪比...
解析日活从0到千万的数据库架构演进，揭秘阿里自研...
演讲内容*：玄惭在阿里的7年也陪伴了“双11”7年，本次分享他在“双11”前后对于超高并发条件下，是如何对数据库进行性能优化和运维的。听众收益*：通过本次议题，了解在超高并发情况下如何对数据库进行弹性扩容、...
PgSQL·最佳实践·双十一数据运营平台订单Feed数据...
并在METASCAN等方面做了诸多性能优化，相比开源版本有质的提升。阿里云HybridDB for PostgreSQL有以下特点：实时分析 支持SQL语法进行分布式GIS地理信息数据类型实时分析，协助物联网、互联网实现LBS位置服务统计；...
【云周刊】第134期：阿里云发布ECS企业级产品家族 19...
—— OLTP与OLAP一站式解决方案 LSF-SCNN：一种基于CNN的短文本表达模型及相似度计算的全新优化模型 私人定制——使用深度学习Keras和TensorFlow打造一款音乐推荐系统 全面连接困何处，卷积网络见解深（深度学习入门...
数据库选型十八摸 之 PostgreSQL-致 架构师、开发者
对于开发人员来说是一件很头疼的事情，因为不知道该对哪些字段创建索引，或者干脆对所有字段都建立索引，给数据库带来较大的性能和维护的问题。PostgreSQL中有两个技术(gin,bloom索引)，可以完美的解决这类业务场景...
PgSQL·最佳实践·双十一数据运营平台订单Feed数据...
并在METASCAN等方面做了诸多性能优化，相比开源版本有质的提升。阿里云HybridDB for PostgreSQL有以下特点：实时分析 支持SQL语法进行分布式GIS地理信息数据类型实时分析，协助物联网、互联网实现LBS位置服务统计；...
阿里云数据库Greenplum版发布啦
Greenplum强劲的OLAP分析能力及高性能数据库列存，为多维分析提供性能的有效保障，从百GB到百TB性能平滑扩展，并支持复杂SQL查询。[screenshot]...
[转载]聊聊Greenplum的那些事
发现其优点是OLTP非常快，TPS非常高（轻松搞定几十万），但一到复杂多表关联性能就立马下降，即使其具有内存计算的功能也无能为力，就其因估计还是受到mysql在这方面限制。2）扩展性方面，Postgresql比mysql也要出色...
开源数据库企业应用实践 PostgreSQL专场培训，名额...
周金可：主要分享的是GreenPlum在听云大数据实时分析的实践，会从分享一下我们具体应用场景GreenPlum选型，以及迁移至GreenPlum架构后与原来MySQL架构的性能对比。Postgresql发展还是挺迅速的，而且国内越来越多的...
阿里云数据库，破解大型网站架构设计中的数据存储难题
除此之外还提供了源码级定制，数据库团队在开源领域吸收了中国顶尖的内核级开发人员来维护源码级的版本，目前使用的MySQL版本也都是去年开源的AliSQL的版本，其相比于原生MySQL内核性能提升了70%，而像MongoDB和...
史上最全“大数据”学习资源整理
Apache Flink：具有高性能的执行时间和自动程序优化;Apache Gora：内存中的数据模型和持久性框架;Apache Hama：BSP(整体同步并行)计算框架;Apache MapReduce 在集群上使用并行、分布式算法处理大数据集的编程模型;...
首席DBA用SQL洪荒之力，造一把通向数据库的钥匙
这里我们看到的MySQL的优化器的工作过程，大致经历了如下处理：词法分析、语法分析、语义检查 预处理阶段(查询改写等) 查询优化阶段(可详细划分为逻辑优化、物理优化两部分)查询优化器优化依据，来自于代价估算器...
OceanBase 1.0 分布式技术架构
如图6，第一个优化就是合并性能的优化，传统数据库把数据分成很多页面，我们也借鉴了传统数据库的思想，把数据分成很多2MB为单位的宏块。执行合并时，如果只有一部分数据修改，那么，只需要合并那些修改过的宏块，而...
Kylin-百度地图的实践
实践中，我们会将某个产品需求分为多个页面进行开发，每个页面查询主要基于事实表建的cube，每个页面对应多张维度表和1张事实表，维度表放在MySQL端，由数据仓库端统一管理，事实表计算后存放在HDFS中，事实表中不...
《企业大数据系统构建实战：技术、架构、实施与应用》...
并需要覆盖产品从需求设计、测试到交付上线的整个生命周期，在此过程中不仅要负责数据库管理系统的搭建和运维，更要参与到前期的数据库设计、中期的数据库测试和后期的数据库容量管理和性能优化。当企业数据仓库中的...
《机器人操作系统ROS原理与应用》——2.1 大数据组织...
并需要覆盖产品从需求设计、测试到交付上线的整个生命周期，在此过程中不仅要负责数据库管理系统的搭建和运维，更要参与到前期的数据库设计、中期的数据库测试和后期的数据库容量管理和性能优化。当企业数据仓库中的...
《企业大数据系统构建实战：技术、架构、实施与应用》...
并需要覆盖产品从需求设计、测试到交付上线的整个生命周期，在此过程中不仅要负责数据库管理系统的搭建和运维，更要参与到前期的数据库设计、中期的数据库测试和后期的数据库容量管理和性能优化。当企业数据仓库中的...
大数据的那些事儿
Apache Flink：具有高性能的执行时间和自动程序优化；Apache Gora：内存中的数据模型和持久性框架；Apache Hama：BSP（整体同步并行）计算框架；Apache MapReduce：在集群上使用并行、分布式算法处理大数据集的编程...
技术与时代并行丨DBAplus Newsletter（2017年2月）
但长期来看不管是DBA的培养，开发者的培养，MySQL庞大的社区基础是其发展的后劲所在，而且MySQL的野心一定不只于一个简单的RDBMS，从Document store这样的动作来看，应该也是感觉到了MongoDB等NoSQL的压力，希望能...
Qcon解读之NewSQL的兴起与云化
MongoDB，阿里云MongoDB除了支持上述提到的功能之外，还支持如SQL审计等功能，而且在社区开源版本的基础上做了很多性能优化相关的工作，这个团队技术实力也是非常强大, MongoDB在中国一共有9位MongoDB Certified ...
开源IndexR:如何对上千亿的数据进行秒级探索式分析
效率等各种优化方式来提高计算层和存储层的数据交换效率，从而提升整体性能。同时，IndexR 可以接收实时数据，并对上层提供统一的数据接口。数据一旦到达 IndexR 系统即可立刻进行数据分析。架构剖析 基于 IndexR ...
工作负载就绪|买服务器可不是因为它酷酷的
12c、MySQL及MongoDB等数据库，专门针对数据库结构化数据工作负载优化，借助Fusion-io的闪存技术，19U的这一系统，“与其他的配置相比，查询时间极短，同时可提供100万次的IOPs，并能够把延迟降低96%”；在高性能...
一篇文读懂19款数据分析软件，解救选择困难症！
例如Hive利用MapReduce作为计算引擎，Presto自己开发计算引擎，Druid使用自己开发索引和计算引擎等，都是为了一个目标：处理更多数据，获取更高性能。三、数据分析软件的分类&为了全面了解分类数据分析软件，我们...
专访阿里云工程师范孝剑：ApsaraDB for PostgreSQL将...
范孝剑：主要任务集中在权限管理、安全漏洞修复、稳定性增强、功能增强、性能优化等。其中的一个挑战是解决OOM(out of memory)问题，PG发生OOM不仅影响用户的体验而且还会带来系统的不稳定性，但是这个问题一直没有...
2016美国Qcon解读：传统与新兴领域的融合——NewSQL的...
MongoDB，阿里云MongoDB除了支持上述提到的功能之外，还支持如SQL审计等功能，而且在社区开源版本的基础上做了很多性能优化相关的工作，这个团队技术实力也是非常强大，MongoDB在中国一共有9位MongoDB Certified ...
小麦苗BLOG文章索引
小麦苗BLOG文章索引 自从2014年7月1号开始写blog...http://blog.itpub.net/26736162/viewspace-2142424/ 933 MySQL大表优化方案 http://blog.itpub.net/26736162/viewspace-2142421/ 932 SQL Server事务隔离级别详解 ...
小麦苗BLOG文章索引
小麦苗BLOG文章索引 自从2014年7月1号开始写blog...http://blog.itpub.net/26736162/viewspace-2142424/ 933 MySQL大表优化方案 http://blog.itpub.net/26736162/viewspace-2142421/ 932 SQL Server事务隔离级别详解 ...
迁云架构实践
高性能：高端存储的I/O能力很强，基于PC服务器的RDS能否提供同样甚至更高的I/O处理能力，MySQL和Oracle对SQL的处理性能是否相同。扩展性：业务逻辑如何拆分，如何服务化，数据分多少库分多少表，什么维度分，后期二...
云深也知处，P2P金融、物流如何冲上云霄？
架构改造：阿里云帮助客户进行技术改造方案的设计，提供上云产品问题的支持等服务，我们与开发商、业主一起把现有系统进行架构设计改造方案的输出，系统改造的责任方为应用开发商，阿里云扮演咨询角色。功能测试：...
分库分表的几种常见玩法及如何解决跨库查询等问题
某种意义上也能避免“跨页”的问题（MySQL、MSSQL底层都是通过“数据页”来存储的，“跨页”问题可能会造成额外的性能开销，这里不展开，感兴趣的朋友可以自行查阅相关资料进行研究）。拆分字段的操作建议在数据库...
NoSQL&NewSQL家族：后起之秀及RethinkDB的告别
的几个主要改进：&SQL 优化器改进，进一步下推更多算子，提升 MPP 性能 基于 myloader/mydumper 的数据导入提速 提升稳定性，完善了过载保护机制 与 Kubernetes 整合，实现在 K8S 上的数据库编排部署，以及一键部署...
【云周刊】第131期：如何送货最省钱？...
挑战MySQL慢SQL性能优化极限！只要参加挑战，即有机会获得 阿里云纪念版T恤！每周人气最高者，还可获得 王坚博士的《在线》！挑战成绩最优者，不仅能拿酷炫机械键盘，褚霸还要请你喝茶！是时候证明自己了！COME ON~...
百度开源的71款项目
为优化前端开发而生，提供前后端开发分离、自动性能优化、模块化开发机制等功能。39.protobuf的Java开发包 jprotobuf jprotobuf是针对Java程序开发一套简易类库，目的是简化java语言对protobuf类库的使用，使用...
15个nosql数据库
对实时查询进行优化 高性能 Thrift网关 通过在server端扫描及过滤实现对查询操作预判 支持 XML,Protobuf,和binary的HTTP 基于 Jruby（JIRB）的shell 对配置改变和较小的升级都会重新回滚 不会出现单点故障 堪比...
一文读懂大数据计算框架与平台
这几年交互式分析技术发展迅速，目前这一领域知名的平台有十余个，包括Google开发的Dremel和PowerDrill，Facebook开发的Presto， Hadoop服务商Cloudera和HortonWorks分别开发的Impala和Stinger，以及Apache项目Hive...
【独家】一文读懂大数据计算框架与平台
这几年交互式分析技术发展迅速，目前这一领域知名的平台有十余个，包括Google开发的Dremel和PowerDrill，Facebook开发的Presto， Hadoop服务商Cloudera和HortonWorks分别开发的Impala和Stinger，以及Apache项目Hive...
《图数据库（第2版）》——1.2 图领域概览
相应地，它们也对事务性能进行了优化，在设计时通常考虑了事务完整性和操作可用性。在研究图数据库技术时，有两个特性需要多加考虑。底层存储 一些图数据库使用原生图存储，这类存储是优化过的，并且是专门为了存储...
《图数据库》——1.2 图领域概览
相应地，它们也对事务性能进行了优化，在设计时通常考虑了事务完整性和操作可用性。在研究图数据库技术时，有两个特性需要多加考虑。底层存储 一些图数据库使用原生图存储，这类存储是优化过的，并且是专门为了存储...
2016阿里云121款产品和解决方案全向图（9月制）
在线扩容、备份回滚、性能优化等解决方案。3.云数据库Redis版：是兼容开源Redis协议的 Key-Value 类型在线存储服务。4.云数据库Memcache：是在线缓存服务,为热点数据的访问提供高速响应 5.PB级云数据库PetaData（邀...
大数据，数据分析，机器学习，架构等相关系统名称名词...
360,Web平台部基础架构团队开发维护的一个基于MySQL协议的数据中间层项目。它是在mysql-proxy 0.8.2版本的基础上，对其进行了优化，增加了一些新的功能特性。360内部使用Atlas运行的mysql业务，每天承载的读写请求数...
【SQL】Oracle SQL monitor
SQL的性能问题，而是为了加快DBA优化数据仓库类SQL的效率，这些SQL是偏OLAP系统的，特点是并发量低、运行时间久、SQL复杂度高。满足以下条件的任意SQL都会被SQL MONITORING监控到：如果串行执行的SQL，消耗的CPU时间...
五四青年最热爱：史上最全的“大数据”学习资源（下）
ProxySQL：MySQL的高性能代理；TokuDB：用于MySQL和&MariaDB的存储引擎；WebScaleSQL：运行MySQL时面临类似挑战的几家公司，它们的工程师之间的合作。PostgreSQL的分支和演化&Yahoo Everest&-multi-peta-byte ...
大数据数据库技术简介与分类分析
对非结构，半结构化数据的支持使得在很多特定场景下的开发非常简单，对于对SQL弱依赖的业务，NoSQL的引入不但降低了本身的成本而且增加了系统的扩展性和性能。其优势主要体现在： 大多NoSQL设计遵从最终一致性，因此...
2016年初大数据、云计算的漫谈
对于第一种，可能的实现方案基本是底层用mysql等传统数据库作为存储，上层有DAG等决策调度，做到能跨机join。不过目前明确是OLAP不仅仅就是SQL，也许这个事情能解决一部分的需求，但是不可能完全替代传统的hadoop的...
一文掌握云数据库现状与前沿技术
是一个在数据量不太大的情况下(有容量上限)，对简单查询的读性能优化的方案，另外兼容性比中间件的方案好得多。但是缺点是对于大数据量，复杂查询的支持还是比较弱，另外对于写入性能 Aurora 其实没有做太多优化(单...
2016阿里云93款产品全向图（6月制）
在线扩容、备份回滚、性能优化等解决方案。3.云数据库Redis版：是兼容开源Redis协议的 Key-Value 类型在线存储服务。4.云数据库Memcache：是在线缓存服务,为热点数据的访问提供高速响应 5.PB级云数据库PetaData（邀...
- 产品推荐
- 这些文档可能帮助您