冷热数据分层存储

为了降低数据存储成本、提高查询性能和系统资源利用率。云数据库ClickHouse 提供了冷热数据分层存储的功能。您可以根据查询频率将数据存储在不同类型的磁盘中。本文介绍如何开启冷热数据分层存储功能和设置分层存储策略。前提条件 云数据库...

实例选型和集群规划

行存储与列存储 云原生数据仓库AnalyticDB PostgreSQL版在表数据存储格式支持行存储和列存储,二者在不同使用场景下各有优劣势,直接关系到实例的性能和存储空间。用户在创建表时,支持指定数据存储格式,即支持按行组织存储,也支持按列...

常见问题

基因行业:基因测序、交付、诊断等基因下游业务的数据存储需求,结合云强大的计算能力,可以实现大数据的存储+计算+分析方案。OSS适合存储什么?OSS适合存储论坛网站与软件应用中的附件、高清图片、音视频、备份文件等,以及各种App...

环境准备

适用于海量账单、IM 消息、物联网、车联网、风控、推荐等场景中的结构化数据存储,提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。更多信息,请参见 什么是表格存储。表格存储通道服务(Tunnel Service)是...

功能特性

数据存储 功能集 功能 功能描述 参考文档 元数据存储 宽表模型 宽表模型(WideColumn)是类Bigtable/HBase模型,可应用于元数据、大数据等多种场景。宽表模型通过数据表存储数据,单表支持PB级数据存储和千万QPS。数据表具有Schema-Free、...

数据分析整体趋势

据Gartner统计,到2025年实时数据占比达30%,其中非结构数据占比达80%,同时数据存储规模达45%,而云数据库规模可达75%。从数仓分析市场增长来看,据Global Market Insights分析,2019-2025全球年复合增长超过12%,中国则大于15%,...

添加数据

空间数据提供对矢量、栅格、矢量瓦片、栅格瓦片、三维模型、倾斜摄影、BIM、点云等数据的添加,支持通过上传文件和对象存储两种通用的方式添加数据。本文主要介绍如何添加各类空间数据。前提条件 已在云存储上存储数据文件。背景信息 ...

如何基于LSM-tree架构实现一写多读

两个引擎各自接收写入请求,数据和日志均存储在底层的分布式存储上,其中idb文件表示的是InnoDB的数据文件,sst文件表示的是X-Engine的数据文件。这里最主要的点在于InnoDB与XEngine共享一份redo日志,X-Engine写入时,将wal日志嵌入到...

高压缩引擎(X-Engine)介绍

随着业务发展,数据库系统中会积累大量访问频率很低甚至为0的数据,这些数据的积累容易导致如下问题:历史数据和最新数据存储在同一数据库系统中,导致磁盘空间不足。大量数据共享数据库系统的内存、缓存空间、磁盘IOPS等,导致性能问题。...

产品简介

湖管理,将为您提供对湖内数据存储的分析及优化建议,加强对数据生命周期管理,优化使用成本,方便您进行数据运维管理。应用场景 数据分析场景,通过元数据发现、数据探索能力,可以快速的对OSS内结构化、半结构化数据进行分析、探索。结合...

数据归档概述

数据把控能力 较强,数据归档并存储在DMS中,您无需关注数据存储的具体位置。较强,数据归档在用户开通的阿里云OSS。较弱,数据归档在DBS内置OSS。归档链路文档 数据归档至专属存储 数据归档至AnalyticDB MySQL 3.0 数据归档至Lindorm ...

Serverless存储

实时数据存储在热存储(SSD),保证超低延时的写入和查询性能,可提供行级数据实时性。全量数据以微分区(Micro Partitions)的形式存储,大幅度优化传统数仓中出现的IO放大和写放大的问题,提供高吞吐的读写能力。同时,利用OSS和PANGU...

离线集成支持的数据

离线集成支持的数据源 数据源 读取 写入 大数据存储型数据源 MaxCompute 支持 支持 Hologres 支持 支持 Impala 支持 支持 StarRocks 支持 支持 Hudi 支持 支持 Doris 支持 支持 GreenPlum 支持 支持 文件数据源 FTP 支持 支持 OSS 支持 ...

如何选择备份方式

数据库备份DBS 支持逻辑备份和物理备份两种备份方式,为数据库提供连续数据保护、低成本的备份服务,您...数据库备份DBS 支持将备份数据存储于用户OSS或DBS内置存储中,请参见 内置存储与用户OSS。如需创建DBS备份实例,请参见 创建备份计划。

逻辑备份、物理备份与快照

本文介绍逻辑备份、物理备份与快照的区别,以及使用 数据库备份DBS 控制台创建备份计划时如何选择备份...数据库备份DBS 支持将备份数据存储于用户OSS或DBS内置存储中,请参见 内置存储与用户OSS。如需创建DBS备份实例,请参见 创建备份计划。

功能特性

功能集 功能 功能描述 参考文档 DBFS特性 原子写 支持DIRECT IO的原子写,需按4K,8K,16K对齐-共享读写 一份数据可共享式多点挂载并进行读写,读写可线性扩展-存储加密 通过对数据库文件存储实施加密,可以确保数据库文件存储上的所有数据...

购买数据安全中心

OSS存储容量 指定需要 DSC 防护的OSS数据存储容量。可选范围:1,000~10,000,000 GB。日志存储 指定需额外购买的存储审计日志的存储空间容量。仅支持已选择 企业版 的用户选择该选项,基础版 不支持。可选范围:0~500 TB。您购买数据安全...

时序分析存储概述

灵活分层的TTL设置 在同一张时序表,时序数据存储和时序分析存储采用不同的数据生命周期。使用限制 更多信息,请参见 时序模型限制。注意事项 时序分析存储功能将从2023年12月20日正式开始收费。目前支持使用时序分析存储功能的地域有...

安全基线检查

数据存储安全 数据存储应采取加密等安全措施,保障数据的保密性和完整性。该策略检查数据库是否开启加密功能。数据传输加密 数据传输活动应采取加密等安全措施,保障数据传输过程的安全性。该策略检查数据库在传输过程中是否开启了加密传输...

数据集成支持的数据

离线集成支持的数据源 数据源 读取 写入 大数据存储型数据源 MaxCompute 支持 支持 Hive 支持 支持 Hologres 支持 支持 IMPALA 支持 支持 TDH Inceptor 支持 支持 Kudu 支持 支持 StarRocks 支持 支持 Hudi 支持 支持 Doris 支持 支持 ...

产品介绍

随着数据库压力和数据存储量的增加,可以升级实例规格。业务回到低峰时,可以降低实例规格。实现按需动态调配,并让用户可更为灵活地规划底层硬件资源。Oracle兼容 基于阿里巴巴成功经验的Oracle兼容性,兼容研发人员及DBA使用最多的Oracle...

DBS沙箱功能概览

背景信息 在海量数据场景下,传统数据库备份服务面临两大越来越严重的困难:存储成本:为了保障数据恢复点目标(Recovery Point Objective,RPO),周期性的全量和增量备份产生大量重复数据,导致存储成本过高。使用成本:您必须待数据完成...

EMR+DLF数据湖解决方案

节省存储成本 您可以通过生命周期管理对数据湖中的数据库、数据表配置数据管理规则,可以基于分区/表创建时间、分区/表最近修改时间、分区值三种规则类型,对数据定期进行OSS存储类型转换,从而节省数据存储成本。具体操作和说明参考 生命...

应用场景

通过选择HBase和OSS-HDFS,您可以将HBase的数据存储到湖,并根据您的选择将HBase的WAL日志继续写入集群本地HDFS或OSS-HDFS。采用这种计算与存储分离的架构,可以减轻集群的存储压力。一旦您的数据保存到湖,恢复HBase集群将变得更加...

应用场景

存储成本低:重复数据删除技术大幅降低您的备份数据存储成本。存储虚拟化技术:不依赖用户生产实例,将直接使用云资源的沙箱实例,且在沙箱中的读写不会影响到源数据库。异地备份 互联网金融、银行、保险等行业的数据库除同城备份外,...

创建备份计划

说明 数据量较大时,建议您购买DBS提供的 备份实例存储包,用于抵扣后续备份计划的 存储费用,该费用仅在数据存储在 DBS内置存储 时收取。更多存储包的选购建议,请参见本文 常见问题。如需了解备份计划后续可能产生的费用问题等,请参见 ...

X-Engine简介

因为目标是面向大规模的海量数据存储,提供高并发事务处理能力和降低存储成本,在大部分大数据量场景下,数据被访问的机会是不均等的,访问频繁的热数据实际占比很少,X-Engine根据数据访问频度的不同将数据划分为多个层次,针对每个层次...

什么是数据库备份DBS

内置存储与用户OSS:DBS提供数据库的备份恢复能力,备份数据保存在云存储上,云存储支持内置存储、用户OSS。更多详情,请参见 内置存储与用户OSS。支持的数据库 请参见 支持的数据库引擎与功能。常见问题和故障处理 使用DBS时遇到的各类...

产品计费

免费试用默认为您开通3个数据库实例和1,000 GB的OSS数据存储容量(即支持防护的OSS数据量)。计费项 DSC 计费项 计费项 规格 基础版 企业版 数据库实例数 说明 支持管理RDS实例、PolarDB、MaxCompute项目等类型的云产品。1~20个实例 200元/...

简介

典型案例&架构 航海船舶大数据平台 场景:全球AIS船舶实时位置数据,每天上亿条轨迹写入,要求轨迹时空/时序查询秒级响应,具体包括:监管区域实时地理围栏判断。轨迹区域回放(指定区域+指定时间段)。轨迹回放(指定时间段查询)。架构...

常见问题

A:相较于传统数据库,云原生数据库PolarDB 支持百TB级别海量数据存储,提供高可用和高可靠保障、快速弹性升降级、无锁备份等功能,详情请参见 产品优势。Q:PolarDB 是什么时候发布?什么时候开始商用?A:2017年9月发布公测,2018年3月...

Delta Lake概述

Delta数据湖方案如下:在大数据存储层之提供了数据管理层,该数据管理层等同于数据库中的元数据管理,其元数据随着数据一起存放并对用户可见(例如 图 1 所示)。Delta基于元数据管理引入了ACID,解决了因数据导入失败而产生脏数据和数据...

列存索引技术架构介绍

IBM在2013年发布的10.5版本(Kepler)中,增加了DB2 BLU Acceleration组件,通过列式数据存储配合内存计算以及DataSkipping技术,大幅提升分析场景的性能。三家领先的商用数据库厂商,均同时采用了行列混合存储结合内存计算的技术路线。列...

Oracle逻辑备份

功能概述 功能 说明 异地备份 支持将Oracle实例备份到异地的云存储,并支持恢复到云上数据库和源端机房的单机实例。长期归档 支持保留时长10年,备份集自动转移到归档存储。备份限速 有效降低备份对数据库性能影响。压缩存储 支持Oracle...

产品优势

支持防护常见的结构化数据、非结构化数据和大数据产品,例如对象存储OSS、云数据库RDS、MaxCompute等。智能化 运用大数据和机器学习能力,通过智能化的算法,对敏感数据和高风险活动,例如数据异常访问和潜在的泄露风险进行有效识别和监控...

PolarDB Serverless实现了哪些突破

在国际数据库顶级会议2021 ACM SIGMOD,一篇标题为《PolarDB Serverless:A Cloud Native Database for Disaggregated Data Centers》的论文,介绍了阿里云自研数据库 PolarDB 基于计算存储分离,实现的最新Serverless技术架构研究进展。...

NAS存储卷概述

它提供了简单的可扩展文件存储以供与ECS配合使用,多个ECS实例可以同时访问NAS文件系统,并且存储容量会随着您添加和删除文件而自动弹性增长和收缩,为在多个实例或服务器运行产生的工作负载和应用程序提供通用数据源。存储规格 NAS提供...

概述

大部分阿里云用户以CSV格式将数据存储在OSS,若要提高数据扫描性能,需要借助第三方工具对文件进行格式转换,然后将转换后的数据上传至OSS,整个过程比较繁琐。为减轻用户工作量,您可以直接使用DLA来转换文件格式。假设将1.2GB的数据以...

什么是MaxCompute

MaxCompute是适用于数据分析场景的企业级SaaS(Software as a Service)模式云数据仓库,以Serverless架构提供快速、全托管的在线数据仓库服务,消除了传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您可以经济并高效...

产品系列

标准版(历史库)随着业务发展,当您的数据库系统中积累了大量访问频率低却仍需要保持的数据,为节约成本,可选择购买标准版(历史库),将长期不使用的数据迁移至以文件形式存储的廉价存储设备。标准版(历史库)具有如下特点:大容量...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
对象存储 数据库备份 云数据库 RDS 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用