智能数据建设与治理Dataphin_智能大数据平台_智能建模_大数据-阿里云

智能数据建设与治理 Dataphin
播放视频
Dataphin是阿里巴巴集团OneData数据治理方法论内部实践的云化输出,一站式提供数据采、建、管、用全生命周期的大数据能力,以助力企业显著提升数据治理水平,构建质量可靠、消费便捷、生产安全经济的企业级数据中台。Dataphin提供多种计算平台支持及可拓展的开放能力,以适应各行业企业的平台技术架构和特定诉求。

产品优势

数据规范定义
结构化构建标签与统计指标,消除数据二义性
设计即开发
可视化数据仓库模型构建、物理任务全托管生产,分钟级自动化代码生成
数据资产管理
数据资产化管理,全链路数据追踪和分析,提升数据价值
主题式分析
自动聚合主题数据,所见即所得,高度简化查询与分析

产品版本和功能特性

为您提供多种版本规格和增值功能包的灵活组合

客户应用案例

餐饮行业
乳品行业
地产行业
Dataphin助力餐饮行业客户重塑会员体系
在线下零售餐饮行业的场景中,随着业务的发展,客户的门店数量及会员数量快速扩张,传统的数据加工处理和管理能力已经无法匹配业务的发展,在此情景下,客户通过阿里云对企业的业务系统和数据平台进行升级,基于Dataphin快速构建企业数据中台的数据,并结合Quick BI进一步实现对会员数据的分析和挖掘,最终实现业务上千人千面的个性化推荐
能够解决
多源异构的数据上云
多种类型的业务数据库中的数据,同步至云上
数据规范定义和建模研发
通过可视化、标准化配置逻辑模型,自动化生成物理模型和代码脚本,保证数据规范性,同时提高数据研发效率
标签体系的快速构建
结合Quick BI,完成标签设计、生产、分析、展现,偏好类标签自助构建和消费
数据资产管理和元数据查询
基于标准化构建沉淀的高质量数据资产,可视化地分析和管理数据资产,快速便捷地查询元数据详情
推荐搭配使用
Dataphin助力乳品行业客户进行全域数智运营
基于Dataphin,乳品行业客户能够将企业数据中台与各个业务系统进行对接,将这些系统沉淀的数据都汇集到中台,根据各种业务场景对数据进行智能分析,然后根据分析结果实时呈现业务状况,同时指导各个业务运营,构成一个闭环。上线各种分析场景,并与前端业务运营系统进行了对接
能够解决
多源异构数据上云
集成十几个来源系统涉及的数据,体系化建设形成会员、商品、交易、营销等数据域上云
数据规范定义
提供统一的数据源,让公司上下对业务能够有统一的认知
异常数据监控
恶意积分兑换告警,优化会员积分制度
推荐搭配使用
Dataphin助力地产行业客户实现高效数据服务
基于Dataphin的数据管理能力,数据量庞大的地产企业做了数据治理的工作,进行数据采集,构建数据模型,进行多维数据分析,比如描述性分析、预测性分析、诊断性分析,而它们之间是一步一步进阶的。数据中台大幅度降低了数据运营成本与决策时间成本,提高了速度和准确性
能够解决
多源异构的数据上云
集成超过50个数据源涉及的数据,地产、物业、营销、市场、IoT 等数据域上云
人力运营成本的管控
5人的数据团队,服务集团区域及总部职能人员超百人的数据需求
业务的精细化运营
丰富的数据模型构建,洞察业务的过程数据,实现精细化运营

产品功能

数仓规划支持全局架构逻辑空间和物理空间,包括通用业务概念定义、组织管理、计算存储管理。
数据架构基于业务场景划分数据板块和主题域,并进行概念模型设计
项目管理创建项目,对项目信息进行编辑和项目成员的管理
数据源管理配置数据构建所需数据源,支持原始的业务源数据配置和大数据计算引擎及存储配置,大数据计算引擎及存储如:MaxCompute
数据引入提供多种异构数据源的数据读写能力,提供脏数据过滤、流量控制等功能
数据智能研发支持配置逻辑数据模型,并通过数据智能引擎自动生成物理模型和SQL代码;提供任务运维、调度限流、基线监控等能力,为数据稳定生产保驾护航。
规范定义依托阿里多年大数据经验积累下的OneData方法论,对业务过程、原子指标等进行定义,保证数据规范性
智能建模基于概念模型快速创建逻辑模型,自动生成维度表、事实表及指标对应的物理存储和调度任务,设计即开发
数据通用研发通过SQL、Python、Shell等代码任务完成数据任务的研发,并支持创建代码模板提升开发效率
逻辑运维提供任务视角和字段视角的运维能力,结合限流、基线监控等功能,可支持千万级任务调度与运维
智能监控提供业务视角的调度限流及智能基线监控能力,更早发现异常,更快止血以保障系统稳定性和数据可用性
主题式数据查询支持逻辑数据模型的雪花关联式主题查询
数据资产管理提供数据的资产化管理能力,提供资产可视化查看管理、数据标准定义、数据质量监控、资产分类分级、查询脱敏配置、资源统计分析、元数据查询等功能
资产全景基于数据架构和项目划分,可以以全局、流动、结构化模式可视化查看多业务视角的数据资产
资产目录提供多种资产对象的元数据查询及详情查看,支持字段血缘和表级血缘,支持相关任务和数据表的影响分析
数据标准提供数据标准、码表、词根的管理能力,并结合资产元数据支持落标映射,助力企业资产治理
资产质量针对引擎及多种数据源的表和字段,提供质量六性监控能力,内置丰富的规则模板,同时支持针对数据源进行连通性和表结构异动性检测
资产安全通过配置识别规则,支持资产分类分级,内置丰富的脱敏算法,可在数据引入及开发时对敏感字段进行保护,提升数据资产安全性
资源治理基于计算存储资源消耗和生命周期等信息,自动识别需要优化的资产对象
数据服务数据服务作为统一的数据服务出口,实现了API的统一化管理,有效地降低数据开放门槛的同时,保障数据开放的安全。
API管理支持多种数据源及API创建方式,支持调用统计及运维监控,提供稳定、可靠的API服务
Dataphin数据源支持将Dataphin的逻辑表和物理表配置为可直接调用的Dataphin数据源,并提供标准的JDBC接口,打通逻辑表消费渠道,简化资产消费链路

产品动态

2018-06-01 新版本/新规格
升级研发工作台的建模、规范定义、代码开发的功能及交互体验
查看详情
2018-06-10 体验优化
规范建模体验优化
查看详情
2018-06-10 体验优化
数据处理的优化与数据同步的升级
查看详情
2018-06-19 体验优化
事实逻辑表更新问题优化
查看详情
2018-06-19 体验优化
元数据优化
查看详情
2018-06-19 体验优化
派生指标优化
查看详情
2018-06-29 新功能
Dataphin研发模块支持Hadoop版本,数据服务功能首发,调度运维功能升级,数据资产功能升级
查看详情
2018-07-30 新功能
Dataphin资产管理功能升级,调度运维功能升级
查看详情
2018-08-03 体验优化
Dataphin的hadoop计算引擎功能扩展
查看详情
2018-08-10 体验优化
Dataphin的数据同步功能扩展
查看详情
2018-08-23 体验优化
Dataphin国际化功能扩展
查看详情
2018-08-30 体验优化
DataphinV1.3版本升级
查看详情
2018-09-15 体验优化
dataphin执行提示优化
查看详情
2018-09-15 体验优化
dataphin执行提示优化
查看详情
2018-09-19 体验优化
Dataphin SQL扩展优化
查看详情
2018-09-30 新功能
DataphinV1.3版本升级
查看详情
2018-10-13 修复问题
任务调度机制优化
查看详情
2018-10-13 修复问题
修复同步任务限流配置项不生效问题
查看详情
2018-10-18 新功能
Dataphin逻辑表调度
查看详情
2018-10-20 修复问题
编辑器执行出错的特定场景优化
查看详情
2018-10-20 体验优化
支持调度配置小时参数
查看详情
2018-10-26 体验优化
脚本文件支持指定资源
查看详情
2018-11-01 新功能
Dataphin资产全景(公测/商业化)发布
查看详情
2018-11-15 体验优化
Dataphin操作依赖校验加强
查看详情
2018-12-08 新功能
Dataphin的编码研发模块支持小时调度配置
查看详情
2018-12-14 新功能
Dataphin数据同步功能优化(公测/商业化)发布
查看详情
2018-12-14 新功能
Dataphin数据同步功能优化(公测/商业化)发布
查看详情
2018-12-14 新功能
调度任务可以监控报警
查看详情
2018-12-15 体验优化
Dataphin编辑器智能助力代码开发
查看详情
2018-12-15 体验优化
Dataphin计算逻辑解析优化
查看详情
2019-01-26 修复问题
Dataphin的Shell调用DataX脚本的时区设置bugfix
查看详情
2019-01-30 新功能
Dataphin日志审计功能(公测/商业化)发布
查看详情
2019-01-31 新功能
Dataphin支持计算逻辑去重校验升级
查看详情
2019-01-31 新功能
Dataphin逻辑表计算逻辑快速查看
查看详情
2019-01-31 新功能
Dataphin建模研发功能加速器
查看详情
2019-01-31 体验优化
Dataphin产品交互体验优化
查看详情
2019-01-31 体验优化
Dataphin原子指标支持基于维度逻辑表定义存量指标
查看详情
2019-02-01 新功能
Dataphin调度资源管控(测/商业化)发布
查看详情
2019-04-23 新产品
智能数据构建与管理Dataphin公共云公测
查看详情
2020-04-09 新功能
Dataphin新版本发布,上线实时研发、数据集成、数据质量监控、告警中心等新功能
查看详情
2020-05-22 新功能
阿里云 Dataphin智能数据构建与管理 商业化发布
查看详情
2020-07-02 新功能
Dataphin新增基于ADB_PG引擎的基础研发版,资产地图功能升级
查看详情
查看全部日志

文档与工具