2021年
全新推出基础版实例，大幅降低客户的数据存储成本及建仓门槛，致力于解决小微企业及个人建仓门槛高，中大企业数据存储成本大的问题。【通知】AnalyticDB PostgreSQL版发布基础版实例 基础版实例 创建实例 2021年05月 类别 功能 功能描述 ...
E-MapReduce本地盘实例大规模数据集测试
本文介绍如何使用阿里云E-MapReduce搭建本地盘机型集群节点，并进行大数据基准性能测试。应用范围 需要使用阿里云E-MapReduce+本地盘进行大数据业务前进行性能测试的用户。需要将线下自建大数据集群迁移到阿里云云上E-MapReduce+本地盘进行...
云数据库Memcache版适合存储多大的数据？
在云数据库Memcache版中，Key支持的最大长度为250字节（Byte），Key+Value的最大长度是4,194,291字节。如果Key+Value的长度大于等于4,194,292字节会提示错误：object too large for cache。使用过大的对象会占用较大带宽，导致QPS下降，...
JindoData概述
JindoData是阿里云开源大数据团队自研的数据湖存储加速套件，面向大数据和AI生态，为阿里云和业界主要数据湖存储系统提供全方位访问加速解决方案。JindoData套件基于统一架构和内核实现，主要包括JindoFS存储系统（原JindoFS Block模式）、...
配置自定义Topic数据存储
通过数据存储的时序数据存储规则功能，可将指定的自定义Topic数据流转到时序数据存储空间进行存储。本文介绍配置自定义Topic数据到时序数据存储空间的完整操作步骤。前提条件 当前实例为标准型或尊享型企业版实例，并已购买需要的时序数据...
发布几何数据
通过GeoServer发布Ganos中的几何...添加数据源 打开GeoServer，选择 数据存储。单击 添加新的数据存储，选择 PostGIS。填写Ganos数据库的连接信息。REST API 几何数据发布后，GeoServer提供给用户调用、访问的REST API，详情请参见 官网文档。
2023-04-26
查看使用文档 冷数据存储支持配置数据归档 数据服务中冷数据存储的部分较久远数据暂时没有分析需求时，可配置数据归档，数据归档存储后，可以降低数据存储成本。支持在控制台上开启归档任务、设置归档周期和查看归档记录，归档后的数据可以...
数据分层存储概述
热存储是一种可扩展、高可用的数据存储方案，用于存储经常被访问的数据。日志服务支持将数据从标准存储转移到热存储中，以便您在需要时快速访问和检索数据。支持数据实时访问，提供高性能的日志查询和分析功能，适用于数据高频查询分析等...
发布几何数据
通过GeoServer发布Ganos中的几何...添加数据源 打开GeoServer，选择 数据存储。单击 添加新的数据存储，选择 PostGIS。填写Ganos数据库的连接信息。REST API 几何数据发布后，GeoServer提供给用户调用、访问的REST API，详情请参见 官网文档。
产品优势
本文介绍了 表格存储 的优势，包括多模型数据存储、多元化数据索引、多计算生态接入、访问安全性等。多模型数据存储 表格存储 支持宽表（WideColumn）模型、时序（TimeSeries）模型、消息（Timeline）等多种数据存储模型，能实现多种类型...
何时使用Range-Hash分区
Range-Hash分区对于存储历史数据的大表很常见，并且经常与其他大表连接。对于这些类型的表（典型的数据仓库系统)，组合Range-Hash分区提供了在Range级别进行分区修剪的优势，并有机会在Hash级别执行并行的全分区或部分分区连接。对于特定的...
管理离线数据归档
数据服务中离线数据存储的部分较久远数据暂时没有分析需求时，可配置数据归档。数据归档存储后，可降低数据存储成本。本文介绍数据归档的使用和计费说明，及开启、更改和撤销归档的具体操作。前提条件 已开启设备数据备份。具体操作，请...
通过实时计算订阅数据
参数 说明 数据存储类型 DataHub数据存储。EndPoint 通过 DataHub访问域名 获取。Project DataHub的项目名称，可在 DataHub控制台 中获取。使用同样的方式注册RDS数据存储，参数说明如下。参数 说明 Instance RDS的实例ID，可在RDS实例的 ...
时序分析存储概述
低成本数据存储 冷热数据分层存储，采用不同的存储介质 对于时序的热数据采用 表格存储 行列混合的宽表存储，对于时序全量历史数据采用列存储。高数据压缩率存储 列存储能更好地利用数据重复性，结合RLE、DICTIONARY、DELTA、BIT-PACKING等...
计费概览
华北1（青岛）、华南3（广州）、华北3（张家口）、中国（香港）和新加坡地域的数据库实例仅支持将数据存储时长小于等于30天的旧版SQL洞察和审计迁移到新版。如果旧版SQL洞察和审计的数据存储时长大于30天，可以 修改SQL洞察和审计数据存储...
数据接入概述
物联网数据服务的数据解析、数据存储、数据指标等功能都需依赖已接入的数据源。设备数据源 设备数据源包含了设备上报的自定义Topic数据和物模型数据。默认情况下设备数据仅保留30天，通过配置数据源，可对数据进行备份，以便更长时间地存储...
数据可视化工具
DataV可用于展示表格存储数据表或者二级索引表中的数据，一般用于构建复杂的大数据处理分析展现的企业应用系统。对接DataV Grafana Grafana是一款开源的可视化和分析平台，支持Prometheus、Graphite、OpenTSDB、InfluxDB、Elasticsearch、...
Napatech案例
Napatech公司的用户可以将数据包采集和分析的能力提升至200G，然而上层软件产生的流量数据包元数据也爆增，给后台数据库（比如开源的HBase/ElasticSearch）的存储和索引能力带来极大的挑战。增加过多的节点会带来极大的成本开销及管理复杂...
金融大数据
阿里云大数据数据仓库解决方案经历了阿里巴巴集团内部的实战验证，完全基于自主研发，且在不断优化、完善，以成熟产品的形式向金融行业客户赋能。大数据数据仓库融合了丰富的计算引擎，能够满足离线计算、实时计算、流计算、图计算等不同的...
什么是DataWorks
DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎，为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。从2009年起，DataWorks不断沉淀阿里巴巴大数据建设方法论，支撑数据中台建设，同时与...
什么是云数据库HBase
云数据库HBase是低成本、高扩展、云智能的大数据NoSQL，兼容标准HBase访问协议，提供低成本存储、高扩展吞吐、智能数据处理等核心能力，是为淘宝推荐、花呗风控、广告投放、监控大屏、菜鸟物流轨迹、支付宝账单、手淘消息等众多阿里巴巴...
迁移工具
使用DataWorks/DataX、表格存储的通道服务等迁移工具，在不影响业务的情况下您可以实现表格存储数据的全量迁移、增量迁移或者实时同步。本文介绍如何选择迁移工具。迁移工具选择 迁移数据时，请根据实际业务选择合适的迁移工具。表格存储...
概述
数据同步过程中，数据源中的数据存储在目标数据仓库OSS中，搭建数据仓库过程中不会对数据源端的业务系统产生任何压力。通过DLA控制台配置建仓任务，支持自定义设置定时数据投递。极致的计算能力，充分发挥DLA的计算能力，通过DLA的大内存、...
新功能发布记录
本文介绍了云数据库RDS MySQL的产品功能和对应的文档动态。说明 RDS内核版本更新说明，请参见 RDS MySQL内核（AliSQL）小版本Release Notes。2023年 11月 类别 功能名称 功能描述 发布时间 相关文档 优化 集群系列实例 支持集群系列实例各...
聚合支付方案
阿里云从业务扩展性、数据流动性、服务高可用三方面入手，通过多款云数据库产品为利楚扫呗制定聚合支付方案，解决利楚扫呗在业务扩展期遇到的数据存储空间不足、读写性能下降以及大数据分析空缺等问题。业务痛点 武汉利楚商务服务有限公司...
JindoFS介绍和使用
两种模式都把数据存储在OSS上，同时根据本地缓存空间剩余情况确定是否在本地也放置一份以用于缓存加速。两种模式的本质区别在于，块存储模式可以管理目录和文件元数据，文件是分成多个块存储在OSS上，所以写到OSS上的是一个一个的文件块，...
如何查看数据库实例DAS专业版已使用的数据存储空间
本文主要介绍如何查看数据库实例DAS专业版已使用的数据存储空间。详细信息 您可以通过以下两种方式查看：在 SQL洞察和审计 页面查看：登录 DAS控制台 在左侧导航栏单击 实例监控，进入 实例监控 页。在 实例监控 页，单击目标实例名称进入...
车联网数据存储处理方案
根据对车联网的业务特征的分析给出了为什么Lindorm作为一个数据存储为什么是车联网业务的合适选择。方案总览 Lindorm是一款适用于任何规模、多种模型的云原生数据库服务，支持海量数据的低成本存储处理和弹性按需付费，提供宽表、时序、...
应用场景
应用场景 1.实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线，您可以实时接入APP、WEB、...数仓是大数据的基础，实时化的数仓能够让BI、报表、推荐（用户标签产出）等多种业务收益，大数据系统总体向实时化迈进。
EFC加速NAS或CPFS文件访问
当使用MEM时，path所指定的缓存数据存储目录需要设置为内存文件系统（例如tmpfs）。path EFC缓存系统Worker的缓存数据存储目录。建议使用/dev/shm。quota 单个Worker组件提供的最大缓存容量。可以根据计算节点内存配置和数据集大小进行调整...
企业云监控的监控数据存储方案说明
当您创建指标仓库时，需要选择监控数据的存储方案。在企业云监控中，指标仓库中监控数据的存储方案如下：日志服务存储 监控数据存储在当前账号的...云监控存储 监控数据存储在云监控提供的私有存储空间中，仅可以通过云监控控制台访问和使用。
数据存储冷热分离
AnalyticDB MySQL版 弹性模式集群版（新版）（3.1.3.3及以上版本）支持表或分区级别的数据存储冷热分离策略。前提条件 AnalyticDB MySQL版 集群需要同时满足以下条件：集群系列需为 弹性模式集群版（新版）。集群内核版本需为3.1.3.3或以上...
数据分析整体趋势
据Gartner统计，到2025年实时数据占比达30%，其中非结构数据占比达80%，同时数据存储云上规模达45%，而云上数据库规模可达75%。从数仓分析市场增长来看，据Global Market Insights分析，2019-2025全球年复合增长超过12%，中国则大于15%，...
实现开发生产等多套环境隔离
很多企业用户在大数据的研发流程中有创建并隔离多套环境的需求，如创建并完全隔离开发、测试、生产环境，即各环境的数据物理存储地址、任务运行集群、大数据作业脚本均隔离，并对操作人员有严格的权限管控，如仅运维团队可使用生产环境，...
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
基于AnalyticDB实现城市公交系统智能化
预计未来每年的平均数据存储、计算、分析和查询需求将达到PB级以上。解决方案 针对接近PB级乘车数据和物联网平台数据的存储、计算、分析与查询需求，启迪公交通过多款阿里云数据库产品实现北京市公交系统的智能化。方案解读： 启迪公交采用...
基于混合负载的查询优化
新一代云原生数据仓库AnalyticDB MySQL版提供一站式的数仓服务。混合计算引擎 提供Interactive与Batch计算模式，同时提供低延迟实时分析能力与大数据的高吞吐批计算能力，分别满足交互式查询与复杂离线计算场景。Interactive模式：采用MPP...
查看实时运行数据
本文介绍如何查看时序数据存储IOPS和存储空间的实时使用情况及对应的监控图表，设置相关报警规则。操作步骤 登录 物联网平台控制台。在 实例概览 页面，找到对应的企业版实例，单击实例 ID 或备注名称进入 实例详情 页面。在左侧导航栏，...
功能概述
数据湖投递可以全量备份或实时投递数据到数据湖OSS中存储，以满足更低成本的历史数据存储，以及更大规模的离线和准实时数据分析需求。数据湖投递 快速入门 使用SDK 数据可视化 支持对接数据可视化工具DataV或者Grafana。通过对接数据可视化...
基于MaxCompute进行大数据BI分析
您可以通过阿里云MaxCompute、云数据库RDS MySQL、DataWorks等产品进行数据分析，且可以通过Quick BI进行可视化展示。概述 本实践以电商行业为例，通过MaxCompute、DataWorks对业务数据和日志数据进行ETL处理，并同步至分析型数据库MySQL...
- 产品推荐
- 这些文档可能帮助您