云市场商品全量迁移至新类目通知
智能网页数据采集 杭州快忆科技有限公司 AI与大数据计算 数据计算分析与数据湖/企业应用 数据智能/cmgj018822 远传U客—云客服 杭州远传新业科技有限公司 AI与大数据计算 数据开发与应用/企业应用 客户管理/云市场的发展及建设离不开服务商...
普通集成
视觉智能开放平台-目标检测 图像搜索 大模型服务平台百炼 域名与网站 企业服务 大数据搜索与分析 日志服务 大数据计算 云原生大数据计算服务 大数据（数加）Data Lake Analytics Databricks数据洞察 Elasticsearch Quick BI 实时数仓 ...
云原生大数据计算服务 MaxCompute
云原生大数据计算服务(MaxCompute)是一种快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型，能够更快速的解决用户海量数据计算问题，有效降低企业成本，并保障数据安全。
MaxCompute服务关联角色
服务关联角色（ServiceLinkedRole，简称SLR）是一种可信实体为阿里云服务的RAM角色，可解决跨云服务的...说明 删除AliyunServiceRoleForMaxComputeIdentityMgmt服务关联角色，MaxCompute将不能访问其他大数据计算平台其他云产品，需谨慎操作。
金融大数据
业务架构 架构说明：基于阿里云大数据平台强大的计算能力（离线数据处理、交互式OLAP分析能力、实时流处理）以及分布式可视化算法平台PAI，有机集成了批量和实时多模式计算能力，支持实时信用评分和风险预警。实时决策引擎，通过DTBoost...
云产品事件触发器概述
事件总线EventBridge 不是单一的事件源，而是作为阿里云官方事件源的事件中心，支持包括弹性计算、存储服务、数据库、容器、大数据处理、可观测性服务及中间件服务在内的几乎所有阿里云官方事件源。事件总线EventBridge 支持阿里云官方事件...
如何选择LDFS规格
LDFS与开源HDFS保持100%通信协议兼容，使用开源客户端可直接访问，无缝接入所有开源大数据生态与云计算生态。存储规格选择 当您选择LindormDFS作为大数据、数据湖的底层存储时，推荐您选用 容量型云存储 类型。Lindorm存储以预留空间方式...
CLI集成示例
本文以调用 云原生大数据计算服务 MaxCompute ListProjects 接口获取 MaxCompute 项目列表为例，为您介绍使用阿里云CLI调用 MaxCompute OpenAPI的操作步骤。前置概念 阿里云CLI（Alibaba Cloud Command Line Interface）是基于OpenAPI构建...
云原生大数据计算服务 MaxCompute系统权限策略参考
本文描述云原生大数据计算服务 MaxCompute支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里...
MaxFrame概述
为满足用户在Python生态中日益增长的高效大数据处理和AI开发需求，MaxCompute提供了基于Python编程接口的分布式计算框架MaxFrame，可直接使用云原生大数据服务MaxCompute海量计算资源进行分布式执行，同时与MaxCompute Notebook、镜像管理...
MaxCompute账单用量明细分析
说明 一次标准版SQL计算费用=计算输入数据量×SQL复杂度×单价（0.3元/GB）一次SpotSQL计算费用=计算输入数据量×SQL复杂度×单价（0.1元/GB）通过Excel分析：分析 用量明细 中数据分类为 ComputationSql 的数据。对SQL作业费用进行排序，...
阿里云电子政务云产品全家福
阿里云电子政务云平台提供弹性计算类、网络、数据库、存储、大数据、中间件、IoT等品类丰富的产品及高标准的安全合规服务，用以支撑多种政务类业务场景，例如：城市大脑，合规应用平台等。截至文档发布时间，阿里云电子政务云共计上线95款...
什么是MaxCompute
MaxCompute提供离线和实时的数据接入，支持大规模数据计算及查询加速能力，为您提供面向多种计算场景的数据仓库解决方案及分析建模服务。MaxCompute还为您提供完善的数据导入方案以及多种经典的分布式计算模型，您可以不必关心分布式计算和...
概述
弹性计算场景 如前所述，弹性是云原生数据库的PolarDB的核心能力之一，自动扩、缩容功能提供了对短查询类业务非常友好的弹性能力，但之前并不适用于复杂分析类业务，因为对于大查询场景，单条查询仍无法通过增加节点实现提速。而现在开启...
限制说明
数据大小 云数据库 Memcache 版支持的单条缓存数据的 Key 最大不超过 1 KB，Value 最大不超过 1 MB，过大的数据不适合存储。事务支持 云数据库 Memcache 版不支持事务，有事务性要求的数据不适合写入，而应该直接写入数据库。使用场景 当...
使用须知
Tunnel 您可以使用Tunnel服务向MaxCompute批量上传离线数据或从MaxCompute下载离线数据。Java SDK 向开发者提供的Java接口。Python SDK 向开发者提供的Python接口。如果您是项目Owner或管理员 如果您是一个项目的Owner（创建和使用项目）或...
公告
2023年12月28日-MaxCompute升级公共云Endpoint 尊敬的MaxCompute用户：感谢您对云原生大数据计算服务MaxCompute的支持，MaxCompute将于北京时间2024年1月4日对华北2（北京）、华东2（上海）、华东1（杭州）、华南1（深圳）、华北3（张家口...
整体架构
AnalyticDB for MySQL 融合了分布式、弹性计算与云计算的优势，对规模性、易用性、可靠性和安全性等方面进行了大规模的改进，充分满足不同场景实时数据仓库的需求。支持更大规模的并发访问、更快读写能力以及更智能的混合查询负载管理等，...
新功能发布记录
类别 功能名称 功能描述 发布时间 相关文档 新增 无感数据集成（Zero-ETL）云数据库RDS提供无感数据集成（Zero-ETL）功能，用于将RDS数据同步至数据仓库（AnalyticDB PostgreSQL），您无需搭建或维护数据同步链路，且数据同步链路不收费，...
简单上传示例
Tunnel SDK是MaxCompute提供的离线批量数据通道服务，主要提供大批量离线数据上传和下载。典型的表数据上传流程 创建表，如果是分区表先创建分区。创建TableTunnel。创建UploadSession。创建RecordWriter，写入Record。提交上传。示例 ...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
计算设置概述
使用StarRocks作为元仓计算引擎进行元仓初始化 Lindorm（计算引擎）Lindorm是阿里云的一个云原生多模数据库产品，其计算引擎模式可以支持离线大数据应用。设置Dataphin的计算引擎为Lindorm（计算引擎）实时计算引擎 阿里云实时计算Flink ...
新功能发布记录
12-25 长期保留备份 新增 数据库代理 RDS MySQL高可用系列云盘实例的数据库代理新增连接保持功能，支持RDS实例发生主动切换时，保持用户通过代理地址访问数据库的应用程序与代理的连接不断开，进一步提升产品可用性。12-15 设置连接保持 ...
2020年
2020-07-29 全部区域 数据类型版本说明 创建MaxCompute项目 Python UDF支持更多数据类型 Python 2 UDF和Python 3 UDF支持的数据类型增加DECIMAL、数据类型2.0的DECIMAL、复杂数据类型（ARRAY、MAP和STRUCT）和复杂数据类型嵌套。...
基于Flink的资讯场景实时数仓
云消息队列 Kafka 版 云消息队列 Kafka 版 是阿里云基于Apache Kafka构建的高吞吐量、高可扩展性的分布式消息队列服务，广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等，是大数据生态中不可或缺的产品之一，阿里云提供全...
使用SQL模式创建数据服务API
数据服务API是一种API类型，由云计算资源中的数据通过参数配置生成，生成的API便于后续调用，减少资源操作成本。SQL模式创建数据服务API适用于多表关联、复杂筛选过滤的查询，通过编写SQL代码的方式完成API封装。本文介绍如何用SQL模式创建...
功能简介
数据查询为用户提供对云计算资源中物理表基本情况的概览能力，帮助用户直观了解物理表基础信息、字段内容分布等情况，建立对数据表的宏观理解，为建立数据标准、定义数据模型、定义数据加工逻辑等工作提供基础依据。数据导入 支持512 MB...
计算设置
计算引擎 说明 相关文档 离线计算引擎 MaxCompute 阿里原生的大数据计算平台，承载海量数据存储与计算能力，高效率与高稳定性。设置Dataphin实例的计算引擎为MaxCompute 实时计算引擎 阿里云实时计算Flink 阿里云新一代计算引擎Flink，支持...
客户案例
MaxCompute已被广泛应用于各大领域处理云上大数据，帮助众多企业解决了海量数据分析问题，同时降低企业运维成本，企业人员可更专注于业务开发。本文为您介绍MaxCompute的精选客户案例。MaxCompute的全量客户案例信息，请参见 行业客户案例...
使用向导模式创建数据服务API
数据服务API是一种API类型，由云计算资源中的数据通过参数配置生成，生成的API便于后续调用，可减少资源操作成本。向导模式适用于单表的简单查询，零代码通过界面化的设置完成API的封装。本文介绍如何使用向导模式创建数据API。前提条件 已...
产品简介
AnalyticDB采用云原生存算分离的架构，存储按量付费，计算弹性伸缩，同时具备离线处理与在线分析资源隔离的能力，满足企业对于数据处理效率、成本控制、系统稳定性的要求。兼容MySQL、PostgreSQL和Spark生态。AnalyticDB共有两个引擎，分别...
实时数仓概述
但当存在数据规模较大、数据格式不规范、计算逻辑复杂、下游对中间表的依赖度高等情况时，需要参考数据仓库分层架构设计即ODS、DWD、DWS、ADS。云原生数据仓库 AnalyticDB PostgreSQL 版 基于实时物化视图可以完美地融合离线数仓的分层架构...
设置逻辑表质量规则
前提条件 已新建逻辑表，具体操作，请参见 通过Excel导入逻辑表、通过云计算资源导入逻辑表 或 手动新建逻辑表。背景信息 如果逻辑表字段配置了 关联字段标准 的值，则在质量规则页面，PostgreSQL、RDS MySQL、AnalyticDB PostgreSQL、...
购买指引
产品版本 入门版 标准版 高级版 版本选择建议 小型数据团队 中小型数据团队 中型数据团队 功能规格 数据同步 离线数据同步 离线数据同步 实时数据同步 配置化数据同步 离线数据同步 实时数据同步 配置化数据同步 多引擎数据计算任务编排 ...
存储类型
云原生多模数据库 Lindorm依赖于LindormDFS云原生存储系统，实现了数据存储与计算分离。存储容量独立计费，支持不停机在线扩容。Lindorm实例的存储容量在同实例内的多个引擎之间共享。存储类型说明 云原生多模数据库Lindorm支持的存储类型...
开通MaxCompute和DataWorks
角色用途：用于授权MaxCompute访问大数据计算平台其他云产品，如Hologres等。绑定的角色策略：AliyunServiceRolePolicyForMaxComputeIdentityMgmt 权限策略详情：{"Statement":[{"Effect":"Allow","Action":"odps:ActOnBehalfOfAUser",...
资源管理
每个计算集群包含一组BE节点，类似于大数据系统中的计算组、计算队列。常用于读写隔离和在离线隔离等业务场景。计算层以集群粒度进行计算资源隔离的，同一个实例下的多集群之间，数据层是共享的，计算层是隔离的。同实例中的多个集群，通过...
实例规格选型指导
d3s、d3c 视频转码 点播 直播 CPU计算能力：要求高 内存：要求不高 IO：要求不高 c8y、hfc8i 大数据 Spark Hive CPU计算能力：要求高 内存：内存带宽要求高 IO：存储带宽要求高 g8y、r8y 根据细分业务场景选型 通用应用、游戏服务、视频...
应用场景
数据分析业务 云数据库 Memcache 版搭配大数据计算服务 MaxCompute。实现对大数据的分布式分析处理，适用于商业分析、挖掘等大数据处理场景。通过数据集成服务可自助实现数据在云数据库 Memcache 版与 MaxCompute 间的同步，简化数据操作...
新建Hive类型的公共节点
Hive类型的节点是离线节点，运行在Hive云计算资源之上，支持处理Hive、Hbase和Phoenix类型的数据。本文介绍如何新建Hive类型的公共节点。前提条件 已新建Hive类型云计算资源，具体操作，请参见 新建云计算资源。背景信息 Hive节点运行于...
- 产品推荐
- 这些文档可能帮助您