DataWorks

DataWorks是从工作室、车间到工具集都齐备的一站式大数据工场,助力您快速完成数据集成、开发、治理、服务、质量和安全等全套数据研发工作。

移动数据分析

移动数据分析(Mobile Analytics)是阿里云推出的一款移动App数据统计分析产品,提供通用的多维度用户行为分析,支持日志自主分析,助力移动开发者实现基于大数据技术的精细化运营、提升产品质量和体验、增强用户黏性。

数据资源平台

阿里云数据资源平台是构建数据智能的全流程平台,提供数据汇聚、规范设计、指标与标签体系构建、数据质量管控、数据资产管理、数据资产服务与共享、智能分析等核心功能,支持行业知识内容沉淀,帮助金融、政府及企业客户快速构建智能数据中...

云数据库 ClickHouse

数据库ClickHouse是开源列式数据库ClickHouse的云上托管服务,数据库内核...阿里云提供了一套企业数据库管理平台,增强了数据安全、集群动态扩容、监控运维等企业级功能,与云上其他数据产品打通,可以便捷地构建云上海量数据分析平台。

管理数据集成任务

完成数据集成任务的配置后,您可以停止、恢复或删除该数据集成任务。前提条件 已创建数据集成任务,相关案例请参见配置RDS MySQL间的数据集成任务。背景信息 数据集成任务支持的管理操作及对应的影响请参见下表。操作 影响 停止数据集成...

查看历史任务

数据集成任务会在每个调度时间点生成一个数据迁移任务,通过DTS控制台您可以查看所有已经运行完成的数据迁移任务,了解该任务的执行情况。前提条件 已创建数据集成任务,相关案例请参见配置RDS MySQL间的数据集成任务。操作步骤 登录数据...

配置监控报警

数据集成任务提供了监控报警功能,您可以通过控制台对重要的监控指标设置报警规则,让您第一时间了解该任务的运行状态。前提条件 已创建数据集成任务,相关案例请参见配置RDS MySQL间的数据集成任务。背景信息 DTS目前支持的监控项为延迟和...

概述

Dataphin支持通过数据集成和数据同步的方式,将业务数据源的数据引入Dataphin平台。背景信息 如果您是在2020年4月之后购买的Dataphin,则数据同步能力通过数据集成功能实现(即系统不再提供数据同步的功能入口)。数据集成为您提供简单高效...

Dataworks数据集成

无论是哪种应用场景,都可以通过DataWorks的数据集成功能完成数据的同步过程,详细的操作步骤(包括创建数据集成任务、数据源配置、作业配置、白名单配置等),请参考DataWorks文档中的使用指南->数据集成一栏。文章中余下部分会介绍...

修改调度策略

对于已经配置完成的数据集成任务,如果由于业务需求变更需要重新调整调度策略,您可以参照本文的方法修改调度策略。前提条件 已创建数据集成任务,相关案例请参见配置RDS MySQL间的数据集成任务。操作步骤 登录数据传输控制台。在左侧导航...

Napatech案例

云原生多模数据库Lindorm助力Napatech大幅提升存储、索引性能。生态合作伙伴介绍Napatech公司(OSE:NAPA.OL)是一家提供FPGA解决方案的丹麦公司,成立于2003年。公司总部位于丹麦,销售和支持的区域包括美国,亚太地区,欧洲,中东和非洲...

公告

功能 基础研发版 智能研发版 基础功能 数仓规划(项目、计算源、数据源和公共定义)、管理中心、资产中心(地图、安全)、数据研发(数据处理、即席查询、发布和运维)和数据集成 数仓规划(业务板块、项目、计算源、数据源和公共定义)、...

概述

数据集成是基于Dataphin构建的简单高效的数据同步平台,致力于提供具有强大的数据预处理能力、丰富的异构数据源之间数据高速稳定的同步能力。如果您是在2020年4月份之后购买的Dataphin,则数据同步能力已升级为数据集成。背景信息 面对各行...

阿里云产品生态集成

数据集成 MaxCompute可以通过数据集成功能加载不同数据源(例如MySQL数据库)的数据,也可以通过数据集成把MaxCompute的数据导出到各种业务数据库。数据集成功能已集成在DataWorks上,您可以直接在DataWorks上配置MaxCompute数据源并读写...

数据集成

数据集成是阿里对外提供的可跨异构数据存储系统的、可靠、...您可以通过数据集成(Data Integration)向云数据库RDS进行数据的导入和导出。支持的数据源请参见支持的数据源。icmsDocProps={'productMethod':'created','language':'zh-CN',};

数据集成

数据集成是阿里对外提供的可跨异构数据存储系统的、可靠、...您可以通过数据集成(Data Integration)向云数据库RDS进行数据的导入和导出。支持的数据源请参见支持的数据源。icmsDocProps={'productMethod':'created','language':'zh-CN',};

独享数据集成资源组

数据集成任务高并发执行且无法错峰运行的情况下,企业需要独享的计算资源组来保障数据快速、稳定地传输,此时您可以选择独享数据集成资源组。使用限制 独享资源组处于阿里云VPC网络,如果数据源处于经典网络环境中,则数据源与独享资源组...

配置RDS MySQL间的数据集成任务

本文以配置RDS MySQL间的数据集成任务为例,介绍数据集成任务的配置流程和注意事项。说明 支持全量数据迁移的数据源均支持数据集成功能,详情请参见支持的数据库和迁移类型。前提条件 已创建源和目标实例,请参见创建RDS MySQL实例。背景...

数据集成调度策略说明

通过该功能可以帮助您构建更加灵活的数据仓库(例如构建T+1的周期性数仓),本文介绍数据集成的策略、限制及适用场景。支持的数据库 支持全量数据迁移的数据源均支持数据集成功能,详情请参见支持的数据库和迁移类型。费用说明 迁移类型 ...

支持的数据源与读写插件

数据集成是稳定高效、弹性伸缩的数据同步平台,为阿里云大数据计算引擎(MaxCompute、AnalyticDB for PostgreSQL和Hologres等)提供离线、批量数据的进出通道。注意 在网络可达的情况下,支持跨账号同步数据。即A账号下的MySQL数据库的数据...

Dataphin支持的数据

大数据存储型数据源 数据源类型 数据集成 实时研发 数据治理 数据服务 数据安全 创建数据源的操作指导 MaxCompute 支持 支持 支持 不支持 支持 创建MaxCompute数据源 Hive 支持 不支持 支持 不支持 支持 创建Hive数据源 SAP HANA 支持 不...

通过数据集成导入导出数据

本文介绍如何通过数据集成在PolarDB-X中进行数据导入和导出。数据集成是阿里巴巴集团提供的数据同步平台。该平台具备可跨异构数据存储系统、可靠、安全、低成本、可弹性扩展等特点,可为20多种数据源提供不同网络环境下的离线(全量或增量...

概述

日常工作中,企业通常会对实时日志数据进行开发。其中:日志数据来源可以为ECS、容器、移动端、开源软件、网站服务或JavaScript。本文为您介绍如何通过Tunnel、DataHub、LogHub以及DataWorks数据集成将日志数据迁移至MaxCompute。方案 说明...

资源规划与配置

使用DataWorks的数据集成功能进行数据同步时,数据同步任务会运行占用一定的资源组,本文为您介绍资源组的基本概念和分类,以及连通性和性能问题,通过对比各类资源组,助力您根据自身需求选择更合适的资源组类型。基本概念 资源组是指数据...

使用数据集成迁移数据至分析型数据库MySQL版

数据集成是阿里集团对外提供的稳定高效、弹性伸缩的数据同步平台,致力于提供复杂网络环境下、丰富的异构数据源之间数据高速稳定的数据移动及同步能力。支持的数据源类型数据集成提供丰富的数据源支持,如下所示:文本存储(FTP/SFTP/OSS/...

数据集成导出数据

当您需要将MaxCompute中的数据导出至其他数据源执行后续数据处理操作时,您可以使用数据集成功能导出数据。本文为您介绍如何将MaxCompute的数据导出至其他数据源。背景信息 数据集成的导出方式有如下两种:向导模式:创建离线同步节点后,...

什么是ETL

实时数据集成:ETL强大的流式数据转换处理能力大幅提升数据集成效率,低代码的开发方式也进一步降低了数据集成的难度和成本,让企业专注于数据价值实现。实时数据仓库:行业领先的流数据处理能力帮助企业快速搭建实时数据仓库。离线数仓...

配置DB2数据

如果您要测试每种资源组的连通性,以保证同步任务使用的数据集成资源组都能够与数据源连通,需要测试多个数据集成资源组与数据源间的网络连通性时,您可以多选后单击批量测试连通性。测试连通性通过后,单击完成。后续步骤 完成数据源配置...

数据加工(ETL)

实时数据集成:ETL强大的流式数据转换处理能力大幅提升数据集成效率,低代码的开发方式也进一步降低了数据集成的难度和成本,让企业专注于数据价值实现。实时数据仓库:行业领先的流数据处理能力帮助企业快速搭建实时数据仓库。离线数仓...

资源组操作及网络连通

如果您需要使用独享数据集成资源组通过内网同步ECS自建的数据库,您需要为独享数据集成资源组做相关的网络配置,详情可参见新增和使用独享数据集成资源组,连通方案核心点为:独享数据集成资源组绑定ECS所在VPC,会自动添加一个路由指向vpc...

选择网络连通方案

DataWorks使用集成资源组(同步插件)来进行数据,数据同步前,您需要保障数据集成资源组(同步插件)与数据库的网络连通性,您可以根据数据库所在网络环境,选择合适的网络解决方案来实现网络连通。本文为您介绍数据库在不同网络环境中时...

通过数据集成导入导出MongoDB数据

数据集成DataWorks是稳定高效、弹性伸缩的数据同步平台,为阿里云大数据计算引擎(MaxCompute、AnalyticDB和OSS等)提供离线、批量数据的进出通道。本文介绍如何通过数据集成导入导出MongoDB数据。关于通过数据集成导入导出MongoDB数据的...

数据集成导入数据

当您需要将其他数据源的数据导入MaxCompute中执行后续数据处理操作时,您可以使用数据集成功能导入数据。本文为您介绍如何将其他数据源的数据导入MaxCompute。背景信息 数据集成的导入方式分为离线导入和实时导入两种:离线导入您可以通过...

计费说明

基础研发版定价 数据处理单元规格和调度资源 定价(CNY/月)数据处理单元规格 调度资源 200 4CU(16个CPU Core+64GB)8,500 数据处理单元统计规则:数据处理单元总量=(数据同步任务数+数据集成任务数)/3+计算任务数(离线和实时)其中:...

操作离线单条管道

查看离线单条管道的历史版本详情 在数据集成页面,单击离线整库迁移前的图标,展开离线整库迁移。在数据集成页面,单击需要查看历史版本详情的离线单条管道。在管道脚本的编辑页面,单击页面上方的历史信息。在节点版本对话框,查看历史...

等待资源

数据集成任务等待数据集成资源。odps任务等待计算资源。说明 无论是任务调度的调度资源,数据集成任务执行资源,还是odps任务执行资源,对于资源组下可用资源是有限的,如果有任务长时间执行未释放资源必定会阻塞其他任务执行。为什么任务...

配置HDFS数据

操作步骤 登录DataWorks控制台,单击目标项目栏中的进入数据集成。在数据集成页面,单击左侧导航栏的数据源,然后单击新增数据源。在新增数据源页面,选择HDFS。在新增HDFS数据源页面,按照页面提示进行参数配置。参数 说明 数据源名称 ...

更多数据同步方案

数据集成是阿里对外提供的可跨异构数据存储系统的、可靠、...您可以通过数据集成(Data Integration)向云数据库RDS进行数据的导入和导出。支持的数据源请参见支持的数据源。icmsDocProps={'productMethod':'created','language':'zh-CN',};

能力介绍

基于数据总线的应用间数据集成方案。数据集成介绍数据集成标准化的目标是规范应用之间数据的传递方式和表达方式。传递方式:即应用之间的数据如何流通。平台提供了对数据进行增删改查的4个API,以及HTTP2方式的消息订阅机制。表达方式:即...

什么是数据传输服务DTS

配置RDS MySQL间的数据集成任务 数据集成调度策略说明 数据同步 帮助您实现数据源之间的数据实时同步,适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、查询与报表分流、云BI及实时数据仓库等多种业务场景。同步方案概览 ...
< 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 轻量应用服务器 商标 物联网无线连接服务 SSL证书 对象存储
这些文档可能帮助您
PolarDB-X 1.0定价 PolarDB-X定价 什么是云数据库RDS 基于 MySQL 5.7 的分布式事务 什么是数据库备份DBS 价格、收费项与计费方式

新品推荐

你可能感兴趣

热门推荐

新人福利专场 阿里云试用中心 企业支持计划 飞天会员助力企业低成本上云 智能财税30天免费试用 云解析DNS新用户首购低至36元/年起 ECS限时升级特惠6.5折