产品架构
在数据库分层架构中，使用Tablestore配合MySQL来完成应用系统的业务需求，利用MySQL的事务能力来处理对事务强需求的写操作与部分读操作，利用Tablestore的数据检索能力和大数据存储来实现数据存储、查询与分析。分布式结构化数据存储架构 ...
大数据专家服务
Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家...，赋能技术团队具备大数据平台建设、架构设计、AI算法建模以及运维保障能力...
Cloudera CDP 企业数据云平台
企业数据云平台Cloudera Data Platform（简称阿里云CDP），是阿里云和Cloudera联合打造阿里云上的大数据平台。
东软案例
移动端到云端业务全链路海量运维大数据存储。指标、日志等多源异构监控数据融合分析。99.99%数据可用性的高可靠低成本存储。客户感言 利用阿里云新一代云原生多模数据库Lindorm“灵动”引擎驱动的政府、企业数字信息系统智能运维解决方案，...
企业级HBase介绍
2019杭州云栖大会Topic-基于企业级HBase的大数据存储处理视频地址请点击 注：选择 9.27AM-NoSQL数据库专场视频时间为01:54:20至02:23:11
云盘三副本技术
您对云盘的读写最终都会被映射为对阿里云数据存储平台上的文件的读写。阿里云提供了一个扁平的线性存储空间，在内部会对线性地址进行切片，一个分片称为一个Chunk（中文含义为块）。每一个Chunk，阿里云都会复制成三个副本，并将这些副本...
开源大数据平台E-MapReduce
开源大数据平台E-MapReduce（Elastic MapReduce）是运行在阿里云平台上的一种大数据处理的系统解决方案。
智能数据建设与治理 Dataphin
Dataphin是集产品、技术、方法论于一体的智能大数据平台建设引擎，为您提供数据引入、规范定义、建模研发、资产管理、数据服务等全链路智能数据构建及管理服务。
概述
但由于运行环境不一样，边缘端与云端支持的数据存储大部分是不相同的。类型 描述 源表 流式数据存储，驱动流数据分析的运行。每个流数据分析任务必须提供至少一个流式数据存储。边缘端支持的类型如下所示。EdgeBus：边缘端消息总线（边缘端...
与Spark集成分析
Analytics，DLA）系统设计开发的，面向时空大数据存储与计算的数据引擎产品。基于DLA无服务器化（Serverless）数据湖分析服务与内置的Spark计算引擎，DLA Ganos提供了不同级别的数据分析模型，最基础的是GeometryRDD模型，用来实现Ganos...
产品简介
深度巡检：基于阿里云大数据产品，提供深层次的诊断与咨询建议，如实例参数配置调优、计算/存储资源优化、稳定性风险排查与解决策略等服务，从而提升大数据平台的稳定性与使用率。预案演练：帮助客户在阿里云大数据平台上进行核心业务无损...
与Spark集成分析
Analytics，DLA）系统设计开发的，面向时空大数据存储与计算的数据引擎产品。基于DLA无服务器化（Serverless）数据湖分析服务与内置的Spark计算引擎，DLA Ganos提供了不同级别的数据分析模型，最基础的是GeometryRDD模型，用来实现Ganos...
大数据平台迁移咨询服务
现状调研采用调查表、访谈、工具等方式获取现有大数据平台的架构、任务调度、系统集成、数据存储及关联等信息评估数据平台的现状乙方提交《大数据平台调研报告》并汇报，双方确认报告内容 方案设计选择合适的大数据产品结合最佳实践设计云...
产品概述
专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题，历经各届天猫双十一及阿里云各行业客户业务的考验，助力企业加速完成业务数字化转型 PolarDB-X 1.0核心能力采用标准关系型数据库技术实现，配合完善的管控...
通用数据开发
说明 上图中，虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示：数据产生：业务系统每天会产生大量结构化的数据，存储在业务系统所对应的数据库中，包括MySQL、Oracle和RDS等类型。数据收集与存储：您需要同步...
应用场景
大数据存储与分析 传统的数据分析场景下，用户需要把数据从在线数据库（Operational Database）复制到离线数据仓库（Data Warehouse）上之后再进行数据分析，这需要海量数据的多次复制、传输、加载和存储等多方面工作。HybridDB for MySQL...
Hologres Segment格式下线通知
Hologres在早期版本提供了列存表的Segment存储格式，但从V0.10版本开始，Segment存储格式全面升级为AliORC，该存储格式能够进一步压缩数据存储大小，降低存储成本。ORC格式从Hologres V0.10版本开始使用，历经多个版本生产考验，目前已处于...
DataWorks交流钉钉群
从2009年飞天大数据平台写下第一行代码开始，DataWorks历经10年发展，形成一套成熟的产品功能体系，满足企业数据中台搭建需求。在阿里巴巴内部，每天有数万数据、算法开发工程师正在使用DataWorks。扫描下方二维码或电脑端点击这里 加入...
OSS-HDFS服务概述
作为云原生数据湖基础，OSS-HDFS在满足EB级数据分析、亿级文件管理服务、TB级吞吐量的同时，全面融合大数据存储生态，除提供对象存储扁平命名空间之外，还提供了分层命名空间服务。分层命名空间支持将对象组织到一个目录层次结构中进行管理...
支持的数据源
HANA支持支持OceanBase支持支持Teradata支持支持Impala支持支持Vertica支持支持达梦(DM)支持支持大数据存储MaxCompute支持支持Hive支持支持Hologres支持支持ClickHouse支持支持TDH Inceptor支持支持Kudu不支持支持文件存储HDFS支持支持FTP...
存储管理
存储空间全部存满后，堡垒机会删除最早的审计会话数据。建议您根据业务需求，为审计会话数据设置合理的保存时长。查看存储状态 登录云盾堡垒机控制台。在左侧导航栏，单击系统设置。在系统设置页面，单击存储管理页签。在存储状态区域，...
引擎简介
与多模引擎共享存储，LindormDFS支撑，充分利用了对象存储的低成本与高可靠、块存储的高性能等优势，并通过高低速分层存储、副本共享去重、智能冷热转存等技术，面向用户提供弹性低成本、100%HDFS协议兼容的云原生大数据存储能力，可使用...
通过大数据平台搭建设备监控大屏
本文介绍如何对接物联网平台和阿里云大数据平台，以实现设备数据分析、统计、计算和可视化实时展示。前提条件开通、购买相关阿里云产品实例和计算资源。使用阿里云大数据平台处理物联网平台设备相关数据，涉及多个阿里云产品，包括云数据库...
客服工作台
客服工作台依托大数据平台，凭借数据挖掘，搜索，语音转文本，自然语音处理，机器学习等前沿技术，打造一套完整的智能服务体系。最终达到：\n\n以智能自助服务逐渐取代大部分人工服务；\n以智能引导和智能决策、机器人辅助人工服务；\n让...
大数据型
大数据存储密集型实例规格族d3s大数据计算密集型实例规格族d3c大数据计算密集型实例规格族d2c大数据存储密集型实例规格族d2s大数据网络增强型实例规格族d1ne其他在售（如果售罄，建议使用推荐规格族） 大数据型实例规格族d1大数据型实例...
准备数据源和计算源
Dataphin支持对接的数据源包括大数据存储型数据源、文件数据源、消息队列数据源、关系型数据源和NoSQL数据源，各模块支持对接的数据源类型请参见Dataphin支持的数据源。确定了业务数据源类型后，您需要创建对应类型的数据源使其与Dataphin...
OpenStore存储引擎介绍
开启OpenStore自定义冷热存储，冷数据存储至OpenStore时shard副本数默认为0，数据的可靠性将由底层存储保证。重要 如果将OpenStore自定义冷热存储的索引副本数设置为1，索引将处于yellow状态，因此不建议手动设置副本，保持默认值即可。...
Napatech案例
Lindorm支持海量数据的低成本存储、快速批量导入和实时访问，具备高效的增量及全量数据通道，可轻松与各类大数据平台集成，完成数据的大规模离线分析。基于Lindorm的解决方案，用户在采用到100Gbps+流量产生的大量数据包元数据直接通过...
什么是阿里云Cloudera CDP
企业数据云平台Cloudera Data Platform（简称阿里云CDP），是阿里云和Cloudera联合打造阿里云上的大数据平台。Cloudera CDP企业数据云平台Cloudera企业数据云是社区版CDH的全新商业化升级产品，是阿里云和Cloudera联合打造阿里云上的大数据...
E-MapReduce本地盘实例大规模数据集测试
大数据基准测试用于公平、客观评测不同大数据产品/平台的功能和性能，对用户选择合适的大数据平台产品具有重要的参考价值，TPC-DS逐渐成为了业界公认的大数据系统测试基准。本文以阿里云E-MapReduce+D1本地盘方案模拟TPC-DS测试的演示方案...
更改列存表的数据存储格式
V0.10版本开始，Hologres创建的列存表数据存储格式升级为AliORC，该存储格式能够进一步压缩数据存储大小，降低存储成本。本文将会为您介绍在Hologres中如何更改列存表的数据存储格式。使用限制 在Hologres中更改列存表的数据存储格式，具体...
金融大数据
大数据仓库调用外部数据和数据集市的信息，通过数据获取层、数据模型层、数据加工层、数据应用层和分析集市的层层筛选、分析、加工，由大数据服务接口向内部源数据输出适用于多种用户场景的有效数据。大数据仓库功能特点：高效整合金融企业...
Dataphin支持的数据源
Dataphin支持对接的数据源包括大数据存储型数据源、文件数据源、消息队列数据源、关系型数据源和NoSQL数据源，各模块支持对接的数据源类型说明如下。如果您需要在Dataphin中连接某数据源，则需要先在数仓规划中的数据源模块创建该数据源。...
Delta Lake概述
通常的数据湖方案是选取大数据存储引擎构建数据湖（例如，阿里云对象存储OSS产品或云下HDFS），然后将产生的各种类型数据存储在该存储引擎中。在使用数据时，通过Spark或Presto对接数据分析引擎并进行数据解析。但该套方案存在如下问题： ...
概述
大数据存储与计算：MaxCompute离线数仓（必选）、Hologres实时分析型数仓（可选）、E-MapReduce开源大数据平台（可选），您可根据需要开通MaxCompute、Hologres或E-MapReduce。数据开发与调度：DataWorks数据开发（必选）、DataWorks运维...
购买云网关轻应用实例
每个设备授权的数据存储选择每个设备授权的数据存储大小，最小为0GB，最大为50GB。说明 默认每个设备授权赠送500M数据存储，可用作设备数据分析使用，如不使用数据分析功能则无需增加，购买后支持升配但不支持降配。设备授权数量在设备授权...
减灾与应急时空解决方案与案例
完全架构于云上，总体采用数据存储层、业务服务层和应用层三层架构。底层采用云原生关系型数据库PolarDB PG兼容版+ Ganos时空数据库引擎形成坚实底座，中间层采用GeoServer进行空间数据服务发布。支持直接导入面向对象存储OSS上存储的各类...
应用场景
大数据场景：海量数据存储与分析 Lindorm支持海量数据的低成本存储、快速批量导入和实时访问，具备高效的增量及全量数据通道，可轻松与Spark、MaxCompute等大数据平台集成，完成数据的大规模离线分析。优势 低成本：高压缩比，数据冷热分离...
典型场景
基于湖构建数据平台，支持BI、挖掘等业务对象存储OSS可以作为湖存储，DLA基于OSS构建一站式的大数据平台。具体包括构建数据湖、数据ETL、交互式查询、机器学习等功能。构建数据湖 实时数据湖：支持DB的CDC与消息数据（如Kafka）入湖，构建...
电子合同：深圳法大大网络科技有限公司
PolarDB采用存储和计算分离的架构，提供分钟级的配置升降级、秒级的故障恢复、全局数据一致性和免费的数据备份容灾服务，既融合了商业数据库稳定可靠、高性能、可扩展的特征，又具有开源云数据库简单开放、自我迭代的优势。本文介绍深圳法...
