文章 2023-05-22 来自:开发者社区

带你读《全链路数据治理-全域数据集成》之16:2. 网络连通原理介绍

2. 网络连通原理介绍DataWorks 使用集成资源组(同步机器)来进行数据同步,数据同步前,您需要保障数据集成资源组(同步机器)与数据库的网络连通性,您可以根据数据库所在网络环境,选择合适的网络解决方案来实现网络连通。

带你读《全链路数据治理-全域数据集成》之16:2. 网络连通原理介绍
文章 2023-05-22 来自:开发者社区

带你读《全链路数据治理-全域数据集成》之17:3. 独享数据集成资源组介绍

3. 独享数据集成资源组介绍1) 资源属性DataWorks 平台托管型资源,购买后您可独占使用这些资源,详情请参见新增和使用独享数据集成资源组。 2) 使用场景l 实时同步、离线同步、同步解决方案场景。 l 当您需要通过内网访问其他网络环境,需要与其他网络环境下的数据库进行网络连通,您可以选择独享数据集成资源组。 l 在数据集成任务高并发执行且无法错峰运行的情况下,企业需要独享的计算资源组来保....

文章 2023-05-22 来自:开发者社区

带你读《全链路数据治理-全域数据集成》之18:4. 网络连通解决方案概览

4. 网络连通解决方案概览1) 使用限制使用独享数据集成资源组时:可以与在公网、VPC(内网)网络环境中的数据源进行跨 Region、跨 IDC、跨云厂商之间的网络连通,无法与经典网络中的数据源连通。 2) 方案选型

带你读《全链路数据治理-全域数据集成》之18:4. 网络连通解决方案概览
文章 2023-05-22 来自:开发者社区

带你读《全链路数据治理-全域数据集成》之19:5. 场景(上)

5. 场景场景一:通过公网访问数据库1) 网络连通方案直接连接。 2) 网络连通配置操作指导以使用阿里云 RDS 数据库为例,网络连通配置如下。 l 其中,独享数据集成资源组的详情请参见新增和使用独享数据集成资源组。 l 获取 RDS 的专有网络信息,详情请参见切换专有网络 VPC 和虚拟交换机。 注意:请注意公网的收费限制,详情请参见数据集成公网流量计费。 场景二:通过 VPC(内网)访问数据....

带你读《全链路数据治理-全域数据集成》之19:5. 场景(上)
文章 2023-05-22 来自:开发者社区

带你读《全链路数据治理-全域数据集成》之19:5. 场景(下)

《全链路数据治理-全域数据集成》——三、数据同步网络连通实践——. 场景(上) :https://developer.aliyun.com/article/1223037场景四:通过 VPC(内网)同步数据库数据,且数据库与 DataWorks工作空间使用不同阿里云主账号1) 网络连通方案2) 网络连通方案架构图3) 网络连通配置操作指导l 为独享数据集成资源组绑定一个 VPC。 Ø 在 Dat....

带你读《全链路数据治理-全域数据集成》之19:5. 场景(下)
文章 2023-05-22 来自:开发者社区

带你读《全链路数据治理-全域数据集成》之20:6. 附录

6. 附录1) 网络连通解决方案如下:l 云企业网使用场景示例,请参见云企业网。l VPN 网关使用场景示例,请参见 VPN 网关。2) 查看数据集成任务执行集群的方式如下:l 任务运行在默认的资源组上,日志中会出现如下信息:running in Pipeline[basecommon_ group_xxxxxxxxx]。l 任务运行在独享数据集成资源上,日志中会出现如下信息:running i....

文章 2023-05-22 来自:开发者社区

带你读《全链路数据治理-全域数据集成》之21:7. 后续步骤

7. 后续步骤1) 网络连通配置l 选择合适的网络连通方案后,您可参考连通方案对应的操作引导配置数据源与资源组的网络连通。l 完成网络连通配置后,您可根据数据库是否开启白名单设置,如果开启了白名单,则您需要将资源组相应的 IP 地址段添加至数据库的白名单中,避免资源组无法正常读写数据库的数据,详情可参见添加白名单。l 如果您的数据库是 ECS 自建数据库,您还需安全组配置,详情可参见 ECS自建....

阿里云文档 2023-05-15

数据集成的数据同步有哪些内容

DataWorks数据集成支持复杂网络环境下的数据同步,您可在数据开发(DataStudio)界面直接创建离线同步节点,用于离线(批量)数据周期性同步;实时同步任务运维,用于单表或整库增量数据实时同步。本文为您介绍数据同步的相关内容。

问答 2023-05-07 来自:开发者社区

DataWorks中使用实时数据同步任务同步数据时,独享数据集成资源组的性能指标?

DataWorks中使用实时数据同步任务同步数据时,独享数据集成资源组的性能指标?

问答 2023-04-29 来自:开发者社区

DataWorks数据集成连接串变更,存量数据同步任务是否会批量更新

DataWorks数据集成连接串变更,存量数据同步任务是否会批量更新

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐