云原生数据湖分析（文档停止维护）
云原生数据湖分析（Data Lake Analytics，简称DLA）是无服务器（Serverless）化的数据湖分析服务，支持按需与保留资源使用，打造最具性价比的数据湖分析平台；提供一站式的数据湖分析与计算服务，支持 ETL、机器学习、流、交互式分析，可以...
应用场景
数据存储：长期保存车辆轨迹信息以及车辆状态信息，需要单表规模极大以及高性价比存储。实时地理围栏：实时数据的地理围栏报警，需要支持对接实时计算进行实时数据统计分析。海量车辆管理：海量车辆的诸多状态信息的数据管理与查询分析，...
SelectDB节点
背景信息 SelectDB是基于Apache Doris打造的新一代多云原生实时数据仓库，聚焦于满足企业级大数据实时分析需求，为您提供极致性价比、简单易用的数据分析服务。更多介绍，请参见 SelectDB。前提条件 已创建业务流程。数据开发（DataStudio...
ECS实例说明
大数据型 使用本地SATA盘作存储数据，存储性价比高，是大数据量（TB级别的数据量）场景下的推荐机型。说明 Hadoop、Data Science、Dataflow和Druid类型的集群支持Core节点；Zookeeper和Kafka类型的集群不支持Core节点。本地SSD型 使用本地...
EMR Workbench
阿里云EMR Workbench是一个综合性的大数据分析和开发环境，作为阿里云E-MapReduce的一部分，它提供了EMR Notebook和EMR Workflow两个核心功能。通过EMR Workbench，您可以轻松进行数据开发，以及交互式数据分析，并设计复杂的数据处理工作...
构建数据仓库
满足一套存储，两种计算（实时计算和离线计算）的高性价比组合。产品组合：DataHub+实时计算Flink+交互式分析+MaxCompute+DataWorks+Quick BI/DataV 场景说明：数据采集：通过DataWorks（批量）、DataHub（实时）进行统一数据采集接入。...
持久内存型
最终数据存储持久化要求高的场景 游戏场景直接采用持久存储型实例作为最终的数据存储，相较于使用Redis+MySQL的架构场景，可获得更简洁的架构，更高的性能和性价比，且数据更加可靠。实例规格 持久内存型规格 相关文档 Tair命令支持与限制 ...
近实时数仓概述
大数据平台普遍采用离线、实时、流三种引擎组合的方式以满足用户实时性和高性价比的需求。但是很多业务场景并不要求延时秒级更新可见或者行级更新，更多的需求是分钟级或者小时级的近实时数据处理叠加海量数据批处理场景，MaxCompute在原有...
PolarDB MySQL版选型指南
选型参考 标准版（5.7/8.0.1/8.0.2）企业版/集群版 多主集群（库表）（仅8.0.1）X86 倚天ARM（仅8.0.1）X86 云盘 PS 应用场景 单节点架构：个人学习、测试、初创企业 多节点架构：大量流量高峰读请求和数据智能分析需求的大中型企业的生产...
阿里云存储服务
适用于各种社交、分享类的图片、音视频应用、大型网站、大数据分析等业务场景。低频访问存储 提供高持久性、较低存储成本的对象存储服务。有最小计量单位（64 KB）和最低存储时间（30天）要求。支持数据实时访问，访问数据时会产生数据取回...
应用场景
通过弹性伸缩支持更合理的资源配比，减少非高峰期的保有资源，优化成本，提高性价比。该场景可实现：在离线一体化 支持数据实时增删改、具备在线分析和ETL计算一体化，实现大数据与数据库的融合。通过资源组隔离让在离线计算任务不相互影响...
物联网存储介绍
基于物联网场景中多源异构数据存储、高并发吞吐、海量数据高性价比存储、多维度数据处理与分析等需求，表格存储推出了一站式物联网存储IoTstore解决方案，为物联网设备元数据、消息数据、时序轨迹等海量数据提供存储、查询、检索、分析、...
AnalyticDB for MySQL助力Flowerplus业务高速发展
由此可见，Flowerplus对大数据分析的实时性要求较高，而传统的MySQL数据库无法满足这一需求。复杂数据查询性能 使用传统MySQL数据库对订单、商品流量、采购、业务转化率以及商品售罄报警等分析时速度较慢，数据达到千万级或者亿级时，复杂...
集群版-单副本
相比于双副本集群版，提供了更高的性价比。经典 版集群架构实例默认采用代理（proxy）模式，支持通过一个统一的连接地址（域名）访问Redis集群，客户端的请求通过代理服务器转发到各数据分片，代理服务器、数据分片和配置服务器均不提供...
发展历程
连年获得TPCx-BB 30 TB规模和TPC-DS 10 TB规模，性能与性价比双料冠军 2019年 连年获得TPCx-BB 30TB规模和TPC-DS 10TB规模，性能与性价比双料冠军。2019大数据“星河（Galaxy）”奖，最佳大数据产品奖（TOP10）。2018年 MaxCompute的多个...
分析外部OSS上的数据
使用列存索引功能读取OSS上的外表数据能很好的实现上述需求，优势如下：OSS作为云原生的存储方案有着非常高的性价比；列存索引功能能够提供超高的计算速度和计算的灵活性；开放的数据存储格式（如ORC、Parquet）有着广泛的兼容性以及高压缩...
电商行业：从4小时到15分钟，一次分布式数据库的丝滑...
近年来，电商平台商品信息持续增加，海量商品导致消费者发现和找到商品的效率低下，识货从用户视角出发，不断整合行业渠道供给，降低发现和筛选的成本，帮助用户更高效地购买到最具性价比的产品。识货的活跃用户数突破5000万，GMV已突破100...
图扑案例
阿里 云原生多模数据库 Lindorm 针对工业物联网数据高并发写入，实时存取等特点，创新性地融合时序、索引、宽表等多模引擎能力，为存储、分析低价值密度、高通量、高实时性的工业物联网监控数据提供了高性价比的最优解决方案，大幅度降低了...
应用场景
大数据 大数据具有数据规模大、数据类型多样、生成速度快、价值巨大但密度低的特点，如何高性价比存储海量持续增长的数据以及快速从海量数据中获取有价值的信息成为大数据领域的关注重点。表格存储 数据湖架构能有效的解决大数据领域面临的...
【新功能/规格】RDS PostgreSQL支持PostgreSQL 17
为什么选择使用RDS PostgreSQL 17 RDS PostgreSQL完全兼容社区版PostgreSQL，采用云原生架构，经过软硬件协调优化，为用户提供稳定可靠的高性价比数据库服务。同时，凭借丰富的插件扩展，RDS PostgreSQL能够支持各领域的场景化业务需求。...
X-Engine简介
在LSM存储结构中，如果把访问频率高的数据尽可能放在较高的层次上，存放在快速存储设备中（例如NVM、DRAM），而把访问频率低的数据放在较低层次中，存放在廉价慢速存储设备中。这就是X-Engine的冷热分层概念。合并数据 Compaction操作不断...
客户案例
南京银行 公司介绍 南京银行成立于 1996 年 2 月 8 日，是一家具有由国有股份、中资法人股份、外资股份及众多个人股份共同组成独立法人...同时，每个节点都可以部署在廉价的 PC 服务器上，因此，系统成本上的性价比是 RAC 解决方案的数十倍。
账单数据订阅及查询分析
在 成本分析 更多分析工具 单击 大数据分析 卡片中的 查看详情，进入大数据分析页面。开通分析工具。根据界面指引，开通MaxCompute及DataWorks，并完成相关授权及分析环境的准备工作。具体如下：选择开通分析工具的地域。所选地域需已开通...
分析预警
背景信息 分析预警支持从多个角度对当前数据进行分析，通过该功能可以直观了解数据的变化趋势和异常点。分析预警目前支持辅助线、趋势线、预测、异常检测、波动原因和聚类六种分析方式。重要 趋势线、预测、异常检测、波动原因和聚类分析仅...
产品简介
产品优势 高性价比 依托于数据湖分析DLA的Serverless无服务器化架构，用户在使用DLA Ganos时无需基础设施和管理成本，不需要单独维护Spark实例，只需要申请虚拟集群后即可随时随用、按需付费。零启动时间，透明升级、QoS弹性服务等。数据库...
新功能发布记录
OceanBase 数据库 MySQL 租户至 Kafka 的数据同步项目支持将 OceanBase 数据以 Avro 序列化格式输出 kafka，扩展用户对接下游大数据生态的方式。数据格式说明 新增支持 8 个 OpenAPI 接口，主要覆盖 RDS PostgreSQL 数据源、加减表、传输...
产品优势
全托管的Databricks数据洞察大数据分析平台，可以让您从繁杂的环境运维、内核优化等工作中解脱出来，专注于开发Spark作业本身。本文介绍Databricks数据洞察的产品优势。高效稳定 产品内核使用Databricks商业版的Runtime和Delta Lake。与...
简介
架构说明：原始数据采用OSS高性价比存储，冷热分离。影像数据库采用SQL+NoSQL构建时空序列影像，容量无上限，存储与计算分离，极致弹性。原生提供基于“分块”理念的数据存储和组织方式，保留原始像元信息，有效支撑各类分析计算场景。与...
基于Delta lake的一站式数据湖构建与分析实战
数据湖能够将这些不同来源、不同格式的数据集中存储管理在高性价比的存储如 OSS等对象存储中，并对外提供统一的数据目录，支持多种计算分析方式，有效解决了企业中面临的数据孤岛问题，同时大大降低了企业存储和使用数据的成本。...
TPC-H
经过严苛的大规模分析性能和ACID事务测试，AnalyticDB PostgreSQL版 刷新TPC-H 30 TB性能榜单，超越当前有效纪录成为全球第一，性能、性价比全球领先，成为中国首次荣登榜单的产品。TPC-H Benchmark由商业分析行为Ad-hoc查询和并发数据修改...
产品整体介绍
云原生数据仓库AnalyticDB PostgreSQL版 提供PB级数据实时交互式分析、ETL/ELT、BI报表展示功能，支持数据高吞吐实时写入与批量导入，提供ACID保证和标准事务隔离级别，采用MPP全并行架构，是一款具有高性价比的云原生数仓产品，提供基于...
场景教程
MaxCompute Hologres EMR Spark 数据分析 大数据AI公共数据集分析 本教程通过DataWorks，联合云原生大数据计算服务MaxCompute，使用大数据AI公共数据集（淘宝、飞猪、阿里音乐、Github、TPC等公共数据），指导您如何快速进行大数据分析，...
概述
MaxCompute Hologres EMR Spark 数据分析 大数据AI公共数据集分析 本教程通过DataWorks，联合云原生大数据计算服务MaxCompute，使用大数据AI公共数据集（淘宝、飞猪、阿里音乐、Github、TPC等公共数据），指导您如何快速进行大数据分析，...
常见问题
数据湖后端存储使用OSS，用户使用数据湖构建面向大数据分析和机器学习场景可以获得集中式权限管理和统一的元数据视图，更容易对接云上大数据和分析产品。什么情况下我需要使用数据湖构建？在云上有数据分析和机器学习需求，希望构建云上的...
测试结果
1 TB测试数据下DLA Spark+OSS与自建Hadoop+Spark集群性能对比结果 集群类型 运行Terasort基准测试集耗时（h）费用价格（元）DLA Spark+OSS 0.701 577.42 自建Hadoop+Spark 0.733 10543.04 通过上述耗时和价格对比结果可以看出，作业性能上...
选择付费方式
对周期性高密度计算作业使用包年包月模式，对非周期性的大规模数据处理作业使用按量计费模式。按量计费模式下可以不存储数据，通过读取其它账号下的表获取数据，从而可以节省数据存储费用。不同账号下跨表计算需要通过授权来实现，详细请...
标准版-单副本
单副本架构具有明显的价格优势，性价比较高。警告 单副本架构不能保障数据可用性和服务连续性，选用前请务必确认风险，不建议您在生产环境中使用该架构的实例。云数据库Redis版服务等级协议不适用于单副本架构的实例。由于该架构只有一个...
E-MapReduce弹性低成本离线大数据分析
离线大数据分析概述 主流的三大分布式计算框架系统分别为Hadoop、Spark和Storm：Hadoop可以运用在很多商业应用系统，可以轻松集成结构化、半结构化以及非结构化数据集。Spark采用了内存计算，允许数据载入内存作反复查询，融合数据仓库、流...
什么是Quick BI
Quick BI——阿里云旗下产品，大数据的高效分析与展现平台。通过对数据源的连接，和数据集的创建，可对数据进行即时分析与查询。并通过电子表格或仪表板功能，以拖拽的方式进行数据的可视化呈现。2020年2月12日,国际知名调研机构Gartner...
OpenStore智能存储引擎介绍
适用场景 阿里云Elasticsearch自研Openstore存储引擎，适用于有海量数据写入及长期存储需求，数据查询QPS较低且查询时延容忍度相对较高的日志检索、指标分析等场景。智能混合存储引擎适用于业务上对于数据有实时更新的需求，数据没有严格的...
- 产品推荐
- 这些文档可能帮助您