MaxCompute

大数据计算服务(MaxCompute,原名ODPS)是一种快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型,能够更快速的解决用户海量数据计算问题,有效降低企业成本,并保障数据...

数据变化监控

我们一谈到数据分析,总离不开大数据,但要发挥大数据分析的真正价值并没有想象的那些容易,DMS倡导:不要等到把数据搞大了才分析。数据管理DMS推出数据变化功能,通过对RDS内核定制,高性能采集每个实例、数据库及表的行数变化,并通过...

应用场景

实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统通过数据总线,您可以实时接入APP、WEB、IoT和数据库等产生的异构数据,统一管理,并投递到下游的分析、归档等系统,构建清晰的数据流,让您更好的释放数据的价值。...

产品简介

统一数据湖存储阿里云数据湖构建使用阿里云对象存储(Object Storage Service,OSS)作为云上数据湖的统一存储,在云上可以使用多种计算引擎面向不同的大数据计算场景,开源大数据E-MapReduce,实时计算,MaxCompute交互式分析(Hologres)...

添加数据

本文为您介绍如何在DataV中创建一个完整数据集。前提条件 已经添加RDS for MySQL、RDS for PostgreSQL和兼容MySQL数据数据源,具体请参见添加适配数据源。登录DataV控制台。选择我的数据页签,在左侧列表中单击数据集管理。在数据集管理...

概述

创建好的外部表可以像普通的MaxCompute表一样使用部分场景),充分利用MaxCompute SQL的强大计算功能。说明 使用外部表功能时,外部表的数据不会复制一份存在MaxCompute上并产生存储费用。外部表支持全量搜索。Tunnel功能及Tunnel SDK...

应用场景

带有计数器的库存系统云数据库 RDS 与云数据库 Memcache 版搭配使用。RDS 存储具体数据信息,数据库字段中存储具体计数信息。云数据库 Memcache 版来进行计数的读取,RDS 存储计数信息。数据分析业务云数据库 Memcache 版搭配大数据计算...

概述

解决方案 T+1全量同步一键建仓是指通过DLA控制台配置数据源(RDS、PolarDB for MySQL、MongoDB数据源、ECS自建数据数据)和目标OSS数据仓库,系统按照您设定的数据同步时间自动、无缝的帮您把数据源中的数据同步到目标数据仓库OSS中,...

数据

数据库备份场景下,有4个概念:数据库磁盘空间、数据文件空间、备份数据量、存储数据量。数据量 说明 数据库磁盘空间 由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲空间组成。说明 RDS中为:购买时选择的存储...

数据分析整体趋势

技术发展趋势 商业数据库起步于二十世纪八十年代,主要代表为Oracle,SQL Server,DB2等结构化数据在线处理的关系型数据库,而以MySQL,PostgreSQL为代表的开源关系型数据库也在二十世纪九十年代得到了发展。近些年来,随着业务数据量的...

支持的数据

AnalyticDB MySQL版提供多种数据导入方案,可满足不同场景下的数据导入需求。数据源 导入数据方式 数据库 RDS MySQL DTS:从RDS MySQL同步到云原生数据仓库AnalyticDB MySQL。INSERT外表:通过外表将RDS MySQL数据导入至AnalyticDB MySQL。...

数据迁移

本文为您介绍数据迁移的最佳实践,包含将其他业务平台的业务数据或日志数据迁移至MaxCompute,或将MaxCompute的数据迁移至其它业务平台。背景信息 传统关系型数据库不适合处理海量数据,如果您的数据存放在传统的关系型数据库且数据量庞大...

应用场景

数据审计 智能解析数据库及大数据的通信流量,细粒度审计数据访问行为,通过对数据源全量行为的审计溯源、危险攻击的实时告警、风险语句的智能预警,为您最敏感的数据库资产做好最安全的监控保障。个人信息合规 可精准区分和保护个人数据,...

Dataphin支持的数据

使用Dataphin前,您需要选择符合业务场景需求的数据库或数据仓库作为数据源,用于读取原始数据和写入数据建设过程中的数据。Dataphin集成了丰富的数据引擎,支持对接如MaxCompute、Hive等数据仓库,也支持对接企业传统数据库,如MySQL、...

自媒体:易撰

所属行业:自媒体 网站地址:易撰 客户介绍 长沙营智信息技术有限公司是专业的新媒体大数据服务商,其旗下知名品牌易撰,基于新媒体大数据挖掘技术及NLP算法分析,为各内容创客、广告主提供全面、科学、精准的大数据分析服务以及大数据架构...

应用场景

互联网类应用 Cassandra能够支持并发低延时的访问需求,具备高可用和弹性扩容能力,适合日志、消息、feed流、订单、账单、网站等各种大数据量的互联网在线应用场景。多活 Cassandra原生支持多DC部署方式,实现更好的可用性和容灾能力。云...

什么是Dataphin

Dataphin是阿里巴巴集团OneData数据治理方法论内部实践的云化输出,一站式提供数据采、建、管、全生命周期的大数据能力,以助力企业显著提升数据治理水平,构建质量可靠、消费便捷、生产安全经济的企业级数据中台。Dataphin提供多种计算...

索引优化

并且对于BI报表类查询,通常会返回很大的数据集,使用索引在这种场景并不一定有加速查询的效果。在使用AnalyticDB PostgreSQL时,首先应该尝试在没有增加任何索引的情况下执行您的查询。索引通常都是更适合于TP场景的,只返回一条记录或者...

常见问题

数据湖后端存储使用OSS,用户使用数据湖构建面向大数据分析和机器学习场景可以获得集中式权限管理和统一的元数据视图,更容易对接云上大数据和分析产品。什么情况下我需要使用数据湖构建?在云上有数据分析和机器学习需求,希望构建云上的...

产品优势

支持最常见的云上数据库和非数据库类型的数据存储服务,包括对象存储(OSS)、关系型数据库(RDS)、分布式数据库(DRDS)、云原生数据库(PolarDB)、表格存储(OTS)、ECS自建数据库和大数据服务(MaxCompute)。智能化 运用大数据和机器...

概述

数据服务作为统一的数据服务出口,实现了数据的统一市场化管理,有效地降低数据开放门槛的同时,保障了数据开放的安全。背景信息 Dataphin数据服务旨在为企业搭建统一的数据服务总线,帮助企业提升数据资产的价值,同时保证了数据的可靠性...

引擎简介

Lindorm Ganos是阿里云推出的一款管理空间几何数据、时空轨迹的时空大数据引擎系统。系统兼容开源GeoMesa、GeoServer等生态,内置了高效的时空索引算法、空间拓扑几何算法等,结合阿里云Lindorm宽表引擎强大的分布式存储能力以及DAL Spark...

面临的业务挑战

用户希望使用的是“开箱即方案,而不是陷入到高昂的学习成本、繁复的技术细节之中。用户渴望拥有一个简单易用的平台。此外,大数据平台的组合方案在细粒度的访问权限控制、高可靠性方面,特别对于金融等行业客户的数据容灾、高可用的...

东软案例

如下图所示,阿里Lindorm数据库在赋能政企数字运维团队更强大的运维大数据分析能力的同时,幅度提升了政府、企业数字系统性能和在线服务的客户数字体验,降低了低价值密度监控数据存储管理成本。图 1.阿里云Lindorm数据库驱动的IT运维...

客户案例

MaxCompute已被广泛应用于各领域处理云上大数据,帮助众多企业解决了海量数据分析问题,同时降低企业运维成本,企业人员可更专注于业务开发。本文为您介绍MaxCompute的精选客户案例。MaxCompute的全量客户案例信息,请参见行业客户案例。...

资产安全概述

应用场景 基于Dataphin实现数据安全保护的一些典型的场景:场景1:业务数据中敏感数据保护您可以使用资产安全的敏感数据识别和保护功能,脱敏明文敏感数据,保证业务数据安全。例如,姓名张三脱敏后*三。场景2:开发环境数仓建设敏感数据从...

数据编排概述

数据管理DMS数据编排是一种低代码开发数据加工任务的工具,您可以组合各类任务节点,形成数据流,通过周期调度运行达到数据加工、数据同步的目的。应用场景 DMS数据编排提供了批量处理数据的功能,可应用于以下场景:说明 数据编排功能持续...

概述

MaxCompute流式数据通道服务提供了以流式的方式把数据写入MaxCompute的能力,使用与原批量数据通道服务不同的一套全新的API及后端服务。流式服务在API上极简化了分布式服务的开发成本,同时解决了批量数据通道在高并发、高QPS(Queries-...

LOB 数据接口

数据接口使用标准的 JDBC 方法(如 getString 和 setBytes)读取和写入 LOB 数据使用数据接口更易于编码且速度更快,但与标准 java.sql.Blob、java.sql.Clob 和 java.sql.NClob 接口不同,它不提供随机访问功能,并且访问数据量不能超出 ...

简介

优势介绍 公有云原生架构的空间、时空、遥感一体化NoSQL大数据引擎产品,开箱即。PB级存储、高并发写入、百亿级时空查询秒级响应。支持数据冷热分离存储和数据高效压缩算法,海量数据存储成本低。与云上Spark无缝集成,快速搭建空间...

数据页面管理

本文介绍数据页面中各个数据功能的使用方法。数据页面分为两模块,包括我的数据分组和数据管理页面。我的数据分组 在我的数据分组页面中,您可以对不同的数据类型分成不同的组。您可以实现如下多个功能:功能 说明 新增分组 单击我的数据...

数据订阅操作指导

数据订阅功能可以帮助您获取数据库的实时增量数据,适用于缓存更新策略、业务异步解耦、异构数据源的数据实时同步和复杂ETL的数据实时同步等多种业务场景。本文介绍数据订阅功能的具体使用流程,帮助您快速掌握创建、监控、管理数据订阅...

技术发展趋势

近些年来,数据在国民经济各个领域扮演着愈发重要的作用,其使用特点较之以往也发生了诸多变化,其趋势主要有几个方面。规模爆炸性增长 随着8K、5G、IoT、大数据、AI等系列技术的发展,数据量迎来了爆发式增长。IDC在《Data Age 2025》的...

概览

AnalyticDB PostgreSQL版提供多种数据迁移方案,可满足不同的数据同步或迁移的业务需求,您可以在不影响业务的情况下,平滑地与各种类型的数据库实例进行迁移或数据同步。迁移数据到AnalyticDB PostgreSQL版 迁移类型 文档 简介 数据写入 ...

数据集成导出数据

当您需要将MaxCompute中的数据导出至其他数据源执行后续数据处理操作时,您可以使用数据集成功能导出数据。本文为您介绍如何将MaxCompute的数据导出至其他数据源。背景信息 数据集成的导出方式有如下两种:向导模式:创建离线同步节点后,...

技术架构选型

本教程中使用阿里云大数据产品MaxCompute配合DataWorks,完成整体的数据建模和研发流程。完整的技术架构图如下图所示。其中,DataWorks的数据集成负责完成数据的采集和基本的ETL。MaxCompute作为整个大数据开发过程中的离线计算引擎。...

设置资产数据

本文介绍DataV设置资产数据源的方法,以及设置数据源页面的内容,包括数据源、数据过滤器以及数据响应结果等。配置资产数据源 登录DataV控制台。在我的可视化页面,单击您创建的可视化应用项目上方的编辑按钮。在画布编辑器页面,单击图层...

数据集成导入数据

当您需要将其他数据源的数据导入MaxCompute中执行后续数据处理操作时,您可以使用数据集成功能导入数据。本文为您介绍如何将其他数据源的数据导入MaxCompute。背景信息 数据集成的导入方式分为离线导入和实时导入两种:离线导入您可以通过...

亿海蓝-航运大数据的可视化案例

——亿海蓝CTO客户简介亿海蓝是国内领先的航运大数据公司,做为国内最大的AIS数据服务运营商,发展目标是通过大数据技术推动全球航运物流与互联网的融合,加速航运产业转型升级。亿海蓝目前已为全球上百万行业用户提供数据服务,客户涵盖...

数据订阅(新版)

数据订阅功能旨在帮助用户获取自建MySQL、RDS MySQL、Oracle的实时增量数据,您可以根据自身业务需求自由消费增量数据,例如缓存更新策略、业务异步解耦、异构数据数据实时同步及含复杂ETL的数据实时同步等多种业务场景。原有的数据订阅...
< 1 2 3 4 ... 200 >
跳转至: GO

新品推荐

你可能感兴趣

热门推荐

新人福利专场 阿里云试用中心 企业支持计划 飞天会员助力企业低成本上云 智能财税30天免费试用 云解析DNS新用户首购低至36元/年起 ECS限时升级特惠6.5折