多活架构介绍

MSHA提供三种容灾架构...总结 建设性价比,适用面广。推荐企业首先建设同城双活,后续再演进到异地容灾架构。建设成本略,但容灾能力最强。推荐企业选取核心业务来建设建设成本中等,具备地域级容灾能力。推荐企业选取核心业务来建设

安全白皮书概述

Dataphin面向各行各业大数据建设、管理及应用诉求,一站式提供从数据接入到数据消费全链路的智能数据建设与资产治理的大数据能力,包括产品、技术和方法论等,可帮助企业一站式构建生产经济、质量可靠、安全稳定、消费便捷的企业级数据资产...

数仓构建流程

本文为您介绍如何基于阿里巴巴OneData方法论最佳实践,使用Dataphin助力企业数据中台的建设与管理,快速构建标准、规范的数据仓库。数仓构建流程 下图为使用Dataphin构建数据仓库的基本流程。基本概念 在正式学习本教程之前,您需要了解...

应用场景

但各个获客渠道的用户数据分散,会员管理体系单一,推荐准确度不,会员营销方式有限。解决方案:数据融合:通过数据引入功能,将各渠道数据沉淀至数据仓库内,丰富基础数据。数据建模:通过数据建模及代码自动化生成功能,以会员为中心,...

资产安全概述

场景2:开发环境数仓建设 敏感数据从生产环境写入开发环境过程中,您可以使用资产安全内置的敏感数据识别规则和脱敏规则,自动实现敏感数据的脱敏,确保敏感数据始终保留在权限的生产环境,不会泄露到开发环境。场景3:脱敏白名单的灵活...

资产安全概述

场景2:开发环境数仓建设 敏感数据从生产环境写入开发环境过程中,您可以使用资产安全内置的敏感数据识别规则和脱敏规则,自动实现敏感数据的脱敏,确保敏感数据始终保留在权限的生产环境,不会泄露到开发环境。场景3:脱敏白名单的灵活...

升级

如果您购买的Dataphin实例规格无法满足您当前的业务需求,可以通过升级操作开通Dataphin提供的增值功能包或购买更的产品规格。Dataphin当前不支持切换计算引擎。您可以升级到更规格的版本、开通增值功能包、或升级已购功能包的规格。...

产品概述

产品描述 Dataphin是集产品、技术、方法论于一体的智能大数据平台建设引擎,为您提供数据引入、规范定义、建模研发、资产管理、数据服务等全链路智能数据建设及治理服务。功能 描述 Dataphin全托管 全托管又称公共云多租户模式,只需购买...

Dataphin免费试用申请

若您使用云数据库,开通地域请和数据库所在地域保持一致,否则只能通过公网进行数据传输,可能产生较数据传输费用,且传输速度可能会受影响。联系方式 请输入可接收验证码的手机号,当前仅支持填写中国大陆手机号码(+86)。发送验证码 ...

开通Dataphin

注意事项 开通Dataphin前,请您了解以下几点:购买前建议您先联系阿里云 售前咨询 并提供企业数据建设需求及背景信息。待阿里云售前咨询帮您确认Dataphin当前版本及功能是否符合您的需求后,会为您开通购买权限。Dataphin不支持无条件退款...

数据服务概述

数据服务(OneService)是基于Dataphin建设数据中台的最后一步。数据服务作为统一的数据服务出口,实现了数据的统一市场化管理,有效地降低数据开放门槛的同时,保障了数据开放的安全。前提条件 已购买 数据服务 增值服务,开通Dataphin ...

答疑支持

若您在使用智能数据建设与治理Dataphin的过程中有任何疑问,您可通过答疑支持联系我们,为您答疑解惑。操作步骤 在Dataphin页面,按照以下操作指引或单击蓝色小机器人选择 答疑支持,进入答疑支持页面后,输入您需解答的问题。依次单击 ...

数据备份与删除

SAAS版本:Dataphin元数据库采用跨可用区可用版本,每天自动快照备份。

答疑支持

若您在使用智能数据建设与治理Dataphin的过程中有任何疑问,您可通过答疑支持联系我们,为您答疑解惑。使用说明 需保证网络连通、Dataphin已升级至3.14.1及以上版本且已经对接工单系统(如需对接可联系运维部署团队)方可使用工单功能。...

离线数仓构建流程概述

使用Dataphin进行离线数仓建设的基本流程如下:主流程 描述 操作指导 准备工作 使用Dataphin进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置...

离线数仓构建流程概述

使用Dataphin进行离线数仓建设的基本流程如下:主流程 描述 操作指导 准备工作 使用Dataphin进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置...

快速入门

如果您是首次使用智能数据建设与治理Dataphin,您可以参考快速入门文档,了解如何购买实例并接入服务端。Dataphin全托管 Dataphin全托管快速入门 Dataphin半托管 Dataphin半托管快速入门

数据备份与删除

独立部署版本:私有云独立部署,Dataphin输出PostgreSQL数据库作为元数据库。元数据库采用一主一备或一主两备模式,保障元数据库...公有云独立部署,Dataphin元数据库采用阿里云上RDS数据库,选择跨可用区可用版本,RDS每天自动快照备份。

推送记录

系统根据来源模块划分为不同的 告警原因:离线计算 包括 业务延迟过、TPS超过范围、失败超过配置比例、数据滞留超过配置、出错、完成、运行超时、未完成。数据质量 包括 表规则异常、字段规则异常 和 自定义规则异常。数据服务 包括 平均...

数仓规划概述

数仓规划是基于Dataphin建设数据中台的第一步,同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前,需要完成数据仓库的规划,包括定义数据板块、项目、数据源、计算源和统计周期。功能介绍 数仓规划包括逻辑空间与物理空间...

推送记录

系统根据来源模块划分为不同的 告警原因:离线计算 包括 业务延迟过、TPS超过范围、失败超过配置比例、数据滞留超过配置、出错、完成、运行超时、未完成。数据质量 包括 表规则异常、字段规则异常 和 自定义规则异常。数据服务 包括 平均...

变更管控

变更管控功能是指在变更环节(如提交、发布、运维操作等),通过配置...规则配置完成后,支持配置规则及策略生效灵活开关,以调整管控规则及策略配置,实现不同的管控效果,从而减少人工干预成本,也能进一步提升平台建设的规范性和稳定性。

消息模板

实时计算 实时计算 包括 业务延迟过、checkpoint失败超过配置、数据滞留超过配置、失败频率超过配置、TPS超过范围。基线监控 基线监控 包括 基线破线、基线预警、基线任务出错、基线任务变慢。数据质量 数据质量 包括 字段规则异常、...

变更管控

变更管控功能是指在变更环节(如提交、发布、运维操作等),通过配置...规则配置完成后,支持配置规则及策略生效灵活开关,以调整管控规则及策略配置,实现不同的管控效果,从而减少人工干预成本,也能进一步提升平台建设的规范性和稳定性。

研发平台设置

在Dataphin研发平台支持设置研发过程中的编辑锁。本文将为您介绍如何进行研发平台的编辑锁设置。权限说明 仅支持 超级管理员 或 系统管理员 进行设置。操作步骤 在Dataphin首页,单击顶部菜单栏的 管理中心。按照下图操作指引,进入 研发...

研发平台设置

在Dataphin研发平台支持设置研发过程中的编辑锁。本文将为您介绍如何进行研发平台的编辑锁设置。权限说明 仅支持 超级管理员 或 系统管理员 进行设置。操作步骤 在Dataphin首页,单击顶部菜单栏的 管理中心。按照下图操作指引,进入 研发...

导航设置

Dataphin支持设置租户的名称、Logo以及展示方式,满足个性化展示需求。本文为您介绍如何进行导航设置。权限说明 超级管理员、系统管理员支持设置租户名称、顶部Logo及favicon。普通成员支持查看租户名称、顶部Logo及favicon。...

配置自定义任务参数

set odps.sql.mapper.cpu=100 set odps.sql.mapper.split.size=256 set odps.sql.reducer.cpu=100 set odps.sql.joiner.cpu=100 说明 自定义参数配置采用优先级策略,任务节点的物理化配置较智能引擎的自定义任务参数优先级。参数配置完...

配置自定义任务参数

set odps.sql.mapper.cpu=100 set odps.sql.mapper.split.size=256 set odps.sql.reducer.cpu=100 set odps.sql.joiner.cpu=100 说明 自定义参数配置采用优先级策略,任务节点的物理化配置较智能引擎的自定义任务参数优先级。参数配置完...

数仓规划概述

数仓规划是基于Dataphin建设数据中台的第一步,同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前,需要完成数据仓库的规划,包括定义数据板块、项目、数据源、计算源和统计周期。功能介绍 数仓规划包括逻辑空间与物理空间...

用户中心概述

升级 如果您购买的Dataphin实例规格无法满足您当前的业务需求,可以通过升级操作开通Dataphin提供的增值功能包或购买更的产品规格。更多详情请参见 升级。续费 如果您购买的实例已过期或即将过期,您可以通过续费管理对实例进行续费操作...

用户中心概述

升级 如果您购买的Dataphin实例规格无法满足您当前的业务需求,可以通过升级操作开通Dataphin提供的增值功能包或购买更的产品规格。更多详情请参见 升级。续费 如果您购买的实例已过期或即将过期,您可以通过续费管理对实例进行续费操作...

计算设置概述

计算引擎 说明 操作文档 离线计算引擎 MaxCompute 阿里原生的大数据计算平台,承载海量数据存储与计算能力,效率与稳定性。设置Dataphin实例的计算引擎为MaxCompute 实时计算引擎 阿里云实时计算Flink 阿里云新一代计算引擎Flink,支持...

运行设置

但是大批量任务同时运行时会导致运行资源占用率,影响共享运行资源任务(如SQL任务)的调度,从而影响业务数据产出及时性。因此支持引用了同一个离线计算模板的多个Shell和Python任务可以共享运行资源,以提升资源利用率。出于权限控制和...

确定需求

业务调研 充分的业务调研和需求分析是数据仓库建设的基石,直接决定数据仓库能否建设成功。在数仓建设项目启动前,您需要请相关的业务人员介绍具体的业务,以便明确各个团队的分析员、运营人员的需求,沉淀出相关文档。您可以通过调查表、...

准备数据源和计算源

在使用Dataphin前,您需要选择符合业务场景需求的数据库或数据仓库作为数据源,用于读取原始数据和写入数据建设过程中的数据;同时您需要准备MaxCompute项目、Flink项目作为Dataphin的计算源,为数据的研发提供计算资源。准备数据源 ...

准备数据源和计算源

在使用Dataphin前,您需要选择符合业务场景需求的数据库或数据仓库作为数据源,用于读取原始数据和写入数据建设过程中的数据;同时您需要准备MaxCompute项目、Flink项目作为Dataphin的计算源,为数据的研发提供计算资源。准备数据源 ...

专题广场

此外,您还可以设置精选专题,精选专题常用于管理质量较、可直接消费的核心资产。权限说明 每个用户可在专题广场查看有查看权限的资产专题。专题广场入口 在Dataphin首页,单击顶部菜单栏的 资产,默认进入数据 目录 页面。在数据 目录 ...

专题广场

此外,您还可以设置精选专题,精选专题常用于管理质量较、可直接消费的核心资产。权限说明 每个用户可在专题广场查看有查看权限的资产专题。专题广场入口 在Dataphin首页,单击顶部菜单栏的 资产,默认进入数据 目录 页面。在数据 目录 ...

身份认证及访问控制

身份管理 在阿里云公共云环境下,Dataphin支持访问公共云控制台(RAM)的用户管理及认证。...角色管理 对于添加到Dataphin的用户,管理员可以使用全局角色和项目角色管理成员的权限。全局角色 全局角色用于管理Dataphin全局功能的操作权限或者...
共有59条 < 1 2 3 4 ... 59 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
智能数据建设与治理 Dataphin 弹性公网IP 短信服务 人工智能平台 PAI 金融分布式架构 物联网平台
新人特惠 爆款特惠 最新活动 免费试用