数据湖构建

阿里云数据湖构建(Data Lake Formation,简称 DLF)是一款全托管的快速帮助用户构建云上数据湖及Lakehouse的服务,为客户提供了统一的元数据管理、统一的权限与安全管理、便捷的数据入湖能力以及一键式数据探索能力。DLF可以帮助用户快速...

典型应用场景

将深耦合业务优化为通过实时消息通知实现的异步耦合,让核心业务逻辑更简单可靠,具体调整为:该场景中,买家下单系统只要完成下单操作,就直接返回,底层通过DTS的数据订阅实时获取订单系统的变更数据业务通过SDK订阅这些变更数据,并...

解决方案与客户案例

针对上层业务不同的服务类型提供UNIT和COPY两种数据同步策略:UNIT类型:每个单元部署独立的数据库系统,单元之间通过DTS进行数据【双向】实时同步,保持每个单元都有全量数据,每个单元均可进行读写操作,读写流量会根据业务定制的分流...

解决方案与客户案例

针对上层业务不同的服务类型提供UNIT和COPY两种数据同步策略:UNIT类型:每个单元部署独立的数据库系统,单元之间通过DTS进行数据【双向】实时同步,保持每个单元都有全量数据,每个单元均可进行读写操作,读写流量会根据业务定制的分流...

新建服务单元

在您开始新建API前,需要对数据表进行统一的元数据配置,即新建服务单元。Dataphin支持通过单物理表和多物理表的方式新建服务单元。本文为您介绍如何新建服务单元。前提条件 完成服务单元分组的创建,请参见操作步骤。如果数据源为Hbase、...

什么是全球多活数据库集群

整体架构 产品优势 多活架构提供多写能力的多活数据库云服务,业务单元化改造后可以在多个地域同时进行数据读写操作,为各地域的用户提供就近访问的体验。配置灵活产品化的全球多活数据库集群,开发和实施成本低。支持一键批量创建单元节点...

计费说明

000 2500 10CU(40个CPU Core+160GB)175,000 3000 10CU(40个CPU Core+160GB)200,000 数据处理单元统计规则:数据处理单元总量=(数据同步任务数+数据集成任务数)/3+计算任务数(离线和实时)+明细逻辑表总数+[向上取整(派生指标数/10...

功能更新记录

2021年8月 功能名称 功能描述 发布时间 发布地域 相关文档 产品计费:策略优化及数据处理单元规格拓展 同步任务和集成任务对应的数据处理单元由1:1修改为3:1,且前200个集成任务免费,进一步降低数据上云成本。同时,手动任务、汇总逻辑表...

概述

数据服务作为统一的数据服务出口,实现了数据的统一市场化管理,有效地降低数据开放门槛的同时,保障了数据开放的安全。背景信息 Dataphin数据服务旨在为企业搭建统一的数据服务总线,帮助企业提升数据资产的价值,同时保证了数据的可靠性...

文档最新动态

新功能 网络连通解决方案 2021年8月24日 数据服务:支持数据服务模块的数据查询加速、支持的数据源类型和版本拓展 为了满足对数据查询速度有要求的业务场景,Dataphin支持为项目添加加速计算源,且完成Dataphin数据源开发后,您可以手动...

FineReport

本文介绍如何通过FineReport连接AnalyticDB MySQL版并进行报表管理。前提条件 了解FineReport与AnalyticDB MySQL版之间的兼容性,请参见兼容性概览。安装MySQL JDBC驱动。安装FineReport。如果您是第一次安装FineReport,需要安装MySQL...

添加或移除单元节点

RDS全球多活数据库集群创建完成后,您可以按照业务需要,添加或移除单元节点。前提条件 已创建全球多活数据库集群。注意事项 如 移除单元节点,则该单元节点与中心节点之间的DTS双向同步实例也会被释放。移除单元节点的操作,并不会释放该...

新建API

区域 参数 描述 参数配置 服务单元分组配置 系统支持选择多物理表服务单元、单物理表服务单元和Dataphin逻辑表:选择单物理表和多物理表服务单元:单击服务单元类型显示框区域内,在下拉列表中选择服务单元类型。单击服务单元分组显示框...

创建与释放全球多活数据库集群

本文介绍如何创建和释放RDS全球多活数据库集群。前提条件 已授权全球多活数据库集群访问云资源。当前阿里云账户中的余额必须大于等于100元。已创建RDS MySQL实例,后续用作中心节点。创建方式,请参见创建RDS MySQL实例。说明 目前仅支持...

业务切换流程

为最大化地减少数据迁移对业务的影响,您可以参照本文的流程执行业务切换并建立回退方案。前提条件 已配置数据迁移任务,且数据迁移任务处于迁移中或已完成状态,配置案例请参见DTS数据迁移方案概览。注意事项 由于执行业务切换操作需要...

配置设备数据

配置设备数据源是分析设备数据的前提和基础,物联网数据分析的数据资产、数据可视化、数据API等功能均直接或间接依赖存储备份的数据源。本文介绍如何开启设备数据源的备份功能,以备份纺织品车间设备上报的数据。前提条件已完成设备上报...

业务切换流程

为最大化地减少数据迁移对业务的影响,您可以参照本文的流程执行业务切换并建立回退方案。前提条件 已配置数据迁移任务,且数据迁移任务处于迁移中或已完成状态,配置案例请参见DTS数据迁移方案概览。注意事项 由于执行业务切换操作需要...

升级

可选增值功能包 描述 数据萃取 面向各行各业数据价值深度挖掘的诉求,数据萃取为您提供可视化的ID链接、行为解析和标签萃取,进一步帮助您提炼可直接应用的高价值标签数据,助力您实现业务的融会贯通并驱动创新。数据服务 数据服务为您提供...

确定需求

您在构建数据仓库之前,首先需要确定构建数据仓库的目标与需求,并进行全面的业务调研。您需要了解真实的业务需求,以及确定数据仓库要解决的问题。业务调研 充分的业务调研和需求分析是数据仓库建设的基石,直接决定数据仓库能否建设成功...

数据库异地多活解决方案

以一个简单的业务单元的IT系统为例,整个IT系统的异地多活方案如下图所示。整个方案将各站点分为:分流量层、应用层和数据层。本文聚焦数据层的异地多活解决方案。目前针对数据层设计异地多活解决方案时,需遵循以下几个原则:单元封闭:...

产品计费

物联网数据分析依赖于企业版实例,与企业版实例一样,使用包年包月的计费方式。注意 以下内容仅供参考,实际收费以账单为准。计费项物联网数据分析的产品计费由以下两部分组成。数据处理单元数据处理单元(CU)由您使用的分析任务折算而来...

添加堡垒机架构备份网关

操作概览 步骤 说明 步骤一:安装数据库网关 在堡垒机上安装数据库网关。数据库网关:在备份时,接收从DBS备份网关所在的数据库主机发送过来的数据,再转发至DBS云存储中(外网);在恢复或下载数据库时,接收DBS云存储发生过来的数据,并...

新建分组

本文为您介绍如何新建服务单元、应用和Dataphin数据源的分组。背景信息 分组使用场景说明。分组类型 使用场景 服务单元分组 开发API 应用分组 调用API及调用Dataphin数据源都需要使用应用 Dataphin数据源分组 开发Dataphin数据源 管理分组...

名词解释

数据源物联网数据分析是通过访问数据源的数据进行数据同步备份、数据查询分析、数据配置等操作。在物联网数据分析数据源包括设备数据源和API数据源。设备数据源设备数据源包含了设备上报的自定义Topic数据和物模型数据。API数据源通过API...

单元化介绍

单元(即单元化应用服务产品层的部署单元),是指一个能完成所有业务操作的自包含集合,在这个集合中包含了所有业务所需的所有服务,以及分配给这个单元数据单元化架构就是将单元作为部署的基本单位,在全站所有机房中部署多个单元,每...

FineBI连接MaxCompute

MaxCompute支持您将MaxCompute项目数据接入FineBI,帮助企业的业务人员和数据分析师开展以问题为导向的探索式分析工作。本文为您介绍如何通过MaxCompute JDBC驱动,连接FineBI和MaxCompute项目,并进行可视化数据分析。背景信息 FineBI是帆...

管理服务单元权限

服务单元数据表进行统一的元数据配置。在您生成API前,需要对数据表进行统一的元数据配置。如果您需要使用他人的服务单元生成API,则需要申请服务单元的使用权限。前提条件 已购买数据服务模块,详情请参见开通Dataphin。背景信息 申请、...

数据加工过程卡点校验

此外,您还需要考虑如何能将在线业务的变更高效地通知给基于MaxCompute的离线数据仓库。建议您同时关注工具和人员管理,既要在工具上自动捕捉每一次业务的变化,也要求开发人员进行业务变更通知。具体的卡点校验原则如下:关注发布平台的...

划分数据

数据仓库是面向主题(数据综合、归类并进行分析利用)的应用。数据仓库模型设计除横向的分层外,通常也需要根据业务情况纵向划分数据域。数据域是联系较为紧密的数据主题的集合,是业务对象高度概括的概念,目的是便于管理和应用数据。通常...

数据模型架构规范

主要从数据业务特性和访问特性两个角度来考虑:将业务相近或者相关的数据、粒度相同数据设计为一个逻辑或者物理模型;将高概率同时访问的数据放一起,将低概率同时访问的数据分开存储。核心模型与扩展模型分离 建立核心模型与扩展模型体系...

数据服务权限列表

查看应用成员 有 有 有 进入API服务 有 有 有 删除应用 有 有 有 开发中心 查看服务单元列表 有 有 无 新建服务单元 有 有 无 添加服务单元的成员 有 有 无 批量删除服务单元的成员 有 有 无 转让服务单元的责任人 有 有 无 删除服务单元的...

自媒体:易撰

PolarDB-X专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题,历经各届天猫双十一及阿里云各行业客户业务的考验,助力企业加速完成业务数字化转型。本文介绍易撰如何通过PolarDB-X应对业务挑战。所属行业:自...

资产地图

资产地图基于业务板块、数据域、维度、业务过程和所属项目的关联关系,集中为您展示数据。同时,资产地图支持搜索、访问及收藏等功能,为您提供高效、快捷、准确的数据查找入口。页面介绍 登录Dataphin控制台。在Dataphin控制台页面,选择...

核心概念

本文为您介绍Dataphin中,业务板块、数据域、项目、维度、业务过程、维度逻辑表、事实逻辑表、原子指标等基本概念。业务板块 业务板块是逻辑空间的重要组成部分,是基于业务特征划分的命名空间。当数据业务含义存在较大差异时,您可以...

概述

业务挑战 大部分阿里云用户会将阿里云关系型数据库RDS、PolarDB for MySQL、MongoDB或者云服务器ECS自建数据库作为业务系统数据库,随着业务数据的增长,业务数据库存储的数据也越来越多。但RDS、PolarDB for MySQL、MongoDB或者ECS自建...

MSHA术语表

Center,特殊的单元,是⼀些⻓尾没有做单元化改造的业务和⼀些强中⼼⽆法进⾏单元化改造的业务所在的数据中⼼(LDC)。两地三中⼼ 即⽣产数据中⼼、同城灾备中⼼、异地灾备中⼼建设⽅案。这种模式下,两个城市的三个数据中⼼互联互通,如果...

数据订阅(旧版)

实时数据订阅功能旨在帮助用户获取RDS MySQL、DRDS的实时增量数据,您可以根据自身业务需求自由消费增量数据,搭建/实现多种业务场景,例如缓存更新策略、业务异步解耦、异构数据数据实时同步及含复杂ETL的数据实时等。支持的数据库、...

LTS(原BDS)服务介绍

支持简单易用的数据交换、处理、订阅等能力,满足用户的数据迁移、实时订阅、数湖转存、数仓回流、单元化多活、备份恢复等需求,实现面向Lindorm的一站式数据生态服务。核心能力云原生分布式:LTS是一个基于ECS部署的分布式系统,具备良好...

数据资产等级定义

本文为您介绍数据资产等级的定义,以及如何定义生产链路上的相关数据的资产等级...根据血缘往上追溯,将这几个表的上游都打上A2的标记,一直标记到源数据业务系统,如图所示。icmsDocProps={'productMethod':'created','language':'zh-CN',};

在DataV中展示ARMS监控数据

本文档为您介绍如何在ARMS控制台创建数据源,并在DataV中展示ARMS监控数据。背景信息 业务实时监控服务(Application Real-Time Monitoring Service,简称ARMS)是一款APM类的监控产品。用户可基于ARMS的前端、应用和自定义监控功能,快速...
< 1 2 3 4 ... 200 >
跳转至: GO

新品推荐

你可能感兴趣

热门推荐

新人福利专场 阿里云试用中心 企业支持计划 飞天会员助力企业低成本上云 智能财税30天免费试用 云解析DNS新用户首购低至36元/年起 ECS限时升级特惠6.5折