数据管理DMS解决方案系列

为了更好地指导您使用数据管理DMS(Data Management),DMS推出解决方案系列文档,旨在通过最佳实践(Step by Step)的形式向您介绍DMS研发流程、数据安全、数据开发的解决方案。研发流程解决方案 数据安全解决方案 数据开发解决方案 更多...

创建Hologres数据

新建Hologres数据源用于实现Dataphin能够读取Hologres的业务数据,及能够向Hologres...详细内容,请参见 网络连通解决方案。单击 测试连接,测试数据源是否可以和Dataphin进行正常的连通。测试成功后,单击 确定,完成Hologres数据源的创建。

什么是云原生数据湖分析

云原生数据湖分析(简称DLA)是新一代大数据解决方案,采取计算与存储完全分离的架构,支持数据库(RDS\PolarDB\NoSQL)与消息实时归档建仓,提供弹性的Spark与Presto,满足在线交互式查询、流处理、批处理、机器学习等诉求,也是传统...

数据集成:全领域数据汇聚

支持在各类复杂网络环境下,连通数据源的网络解决方案,无论数据源在公网、IDC还是VPC内,均可使用DataWorks数据集成实现网络连通。支持安全控制与运维监控,保障数据同步的安全、可控。核心技术与架构 引擎架构 采用星形引擎架构,数据源...

离线同步能力说明

您可以根据数据库所在网络环境,选择合适的网络解决方案来实现数据源与资源组的网络连通。在配置同步任务前,您需要确保数据集成资源组与您将同步的数据来源端与目标端网络环境已经连通,对应数据库环境与网络连通配置详情请参见:配置资源...

迁移失败常见原因及解决方案

本文主要介绍在线迁移中,数据迁移失败的常见原因及解决方案。如果迁移任务失败,您可以 查看迁移失败文件列表,分析迁移失败的原因并排除问题。之后,在迁移任务列表中,单击失败任务的 管理,然后单击 重试,重新迁移失败的文件。下面...

恢复数据库

数据库备份DBS 提供数据恢复能力,通过创建恢复任务将已完成备份的数据恢复到云数据库、本地数据库或DBS沙箱中,可用于误操作后恢复以及分析历史数据等场景。前提条件 DBS备份计划的运行状态为 运行中。已完成数据库备份。相关操作,请参见...

方案选择

本文主要为您介绍针对订单系统的一些传统解决方案,以及面对亿量级订单,表格存储提供的更全面的解决方案。传统方案一:MySQL分库分表 MySQL自身拥有强大的数据查询、分析功能,基于MySQL创建订单系统,可以应对订单数据多维查询和统计场景...

如何对JSON类型进行高效分析

针对海量半结构化数据计算与分析,本文将以半结构化数据JSON为例,首先简述传统数据库与数据仓库的解决方案,然后详细描述 PolarDB IMCI列式JSON、虚拟列、秒级加减列与表列数扩展等技术点,最后给出 PolarDB IMCI列式JSON实时分析与扩展流...

Napatech案例

业务挑战 随着网络数据流量的爆增以及业务可用性要求的不断提升,Napatech公司的用户可以将数据包采集和分析的能力提升至200G,然而上层软件产生的流量数据包元数据也爆增,给后台数据库(比如开源的HBase/ElasticSearch)的存储和索引能力...

如何排查无法连接MongoDB实例的问题?

排查方法及解决方案如下:方法一(推荐):使用云数据库MongoDB的连接诊断功能,检测IP地址是否连通,如何检测及检测失败后如何解决,请参见 连接诊断。方法二:请在数据库的白名单中临时添加 0.0.0.0/0,如果设置后可以正常访问,说明是白...

他云/自建数据库录入

目标数据库实例已购买网络解决方案网络解决方案详情,请参见 连接本地IDC。注意事项 若需要通过数据管理DMS管理实例,请在创建实例时需根据实际需求设置数据库账号权限,具体授权语法可参考各数据库类型对应的官网文档。具体权限说明如下...

离线同步并发和限流之间的关系

来源端读取支持最大连接数:同步解决方案的离线全量数据初始化阶段,会基于JDBC建立到数据连接并读取全量历史数据。此连接数即用来控制数据来源端支持的最大JDBC连接数,避免大量任务同时启动打满数据连接池,影响数据库的稳定性。请...

东软案例

解决方案 东软集团围绕运营商、政务云和汽车等行业新一代数字信息系统IT运维场景海量监控数据存储分析痛点,将从遍布全国多地域的手机、平板等终端连接应用系统业务服务的数字足迹和客户数字体验数据、云端&数据中心网络抓包分析数据,应用...

数据源测试连接报VPC_GRANT_ACCESS_API_ERROR错误的...

本文为您介绍在Dataphin中添加RDS类型数据源时,进行测试连接报VPC_GRANT_ACCESS_API_ERROR错误的解决方案。问题描述 添加RDS类型的数据源时,网络类型选择为VPC网络,单击 连接测试 时连接测试失败,报错信息为 测试连接失败,请确保填写...

无法连接云数据库OceanBase的解决方法

解决方案 请执行以下操作排查解决:检查连接数据库的信息是否正确,详情请参见 获取连接参数。说明:默认租户创建申请内网地址,如为公网连接,请单击 申请公网地址。检查客户端到云数据库OceanBase的网络是否畅通。说明:使用ODC工具连接...

通过DMS登录Tair

解决方案:在DMS 数据库实例 列表中,右键单击目标实例,选择 编辑实例,然后选择 录入方式 为 连接串地址,将修改后的实例连接地址填写到 连接串地址 文本框中进行重试。相关文档 通过redis-cli连接Tair 通过客户端程序连接Tair

通过DMS登录Redis

解决方案:在DMS 数据库实例 列表中,右键单击目标实例,选择 编辑实例,然后选择 录入方式 为 连接串地址,将修改后的实例连接地址填写到 连接串地址 文本框中进行重试。相关文档 通过redis-cli连接Redis 通过客户端程序连接Redis

新建解决方案

将工作组中已沉淀的数据标准、数据模型、数据加工场景、数据服务API配置、云计算资源配置等数据资产,进行版本化的解决方案创建及实例化,便于完成数据治理工作环境的初始化、跨平台的资产发布及迁移。本文介绍如何通过全新创建和根据已有...

无法远程连接ECS实例

本文介绍远程连接ECS实例的方法和无法远程连接ECS实例的解决方案。如何远程连接ECS实例 云服务器ECS支持通过多种方式连接实例,包括Workbench、VNC和第三方客户端工具。您可以综合考虑目标实例的操作系统、本地设备的操作系统、需要执行的...

通过操作审计查询行为事件日志

DIDeleteSolutionV1 旧版解决方案删除解决方案 DIStartSolutionV1 旧版解决方案运行解决方案(提交执行/重跑)DICloneSolutionV1 旧版解决方案克隆 DIFullSupplementData 旧版解决方案全量补数据 DownloadSqlResult 下载数据分析的SQL查询...

无法连接云数据库HBase

解决方案 请执行以下操作排查解决:检查客户端到云数据库HBase的网络是否畅通,详情请参见 连通性检测。注意:云数据库HBase为了保障安全性,不提供Ping的ICMP协议,请不要使用Ping来访问,判断是否连通云数据库HBase,请使用Telnet。检查...

互联网服务:小打卡

客户价值 客户当前圈子打卡日记业务有10亿以上数据,每年有亿级增量,基于 PolarDB-X+RDS的分布式数据解决方案提供了海量数据存储和数据存储扩展能力,解决了10亿级数据在单机数据库的存储瓶颈。小打卡上有几百万活跃用户,业务发展较快...

自媒体:易撰

自媒体 网站地址:易撰 客户介绍 长沙营智信息技术有限公司是专业的新媒体大数据服务商,其旗下知名品牌易撰,基于新媒体大数据挖掘技术及NLP算法分析,为各内容创客、广告主提供全面、科学、精准的大数据分析服务以及大数据架构解决方案。...

某历史养成类游戏开发公司实时计算和数据仓库方案

解决方案 客户选择云数据库Lindorm SQL(Phoenix)服务+数据湖Spark服务构建实时计算和数据仓库解决方案。Lindorm SQL提供在线查询能力、Spark提供流式处理、复杂分析等能力来满足业务需求;梳理业务数据,对数据进行分层存储在Lindorm SQL...

准备数据源和计算源

详情请参见 网络连通解决方案。准备计算源 在创建项目空间前,您需要完成项目空间计算源的准备。计算源包括离线计算源(MaxCompute)和实时计算源(Flink)。您可以根据业务情况进行准备对应的计算源:如何创建MaxCompute项目,请参见 创建...

准备数据源和计算源

详情请参见 网络连通解决方案。准备计算源 在创建项目空间前,您需要完成项目空间计算源的准备。计算源包括离线计算源(MaxCompute)和实时计算源(Flink)。您可以根据业务情况进行准备对应的计算源:如何创建MaxCompute项目,请参见 创建...

离线同步常见问题

MaxCompute如何实现列筛选、重排序和补空等 MaxCompute列配置错误的处理 MaxCompute分区配置注意事项 MaxCompute任务重跑和failover 报错信息及解决方案 报错信息及解决方案 数据同步报错:[TASK_MAX_SLOT_EXCEED]:Unable to find a ...

ETL工具支持概览

数据迁移及同步方案综述:数据传输服务(DTS):阿里云提供的实时数据同步服务,可以将其他数据源(RDS MySQL,ECS自建MySQL,PolarDB等)实时同步数据到 AnalyticDB PostgreSQL版,构建实时数据仓库解决方案。阿里云的数据集成服务(Data ...

数据湖管理FAQ

本文汇总了数据湖管理相关的常见问题及解决方案。Lakehouse相关问题 什么是Lakehouse?Lakehouse数据入湖时,对线上RDS有压力吗?如何控制建仓的限流能力?Lakehouse工作负载为什么运行失败,又没有S park Log 日志可以看?元数据发现相关...

敏感数据溯源

解决方案:使用 数据水印 功能生成的水印信息需要提供充足的数据量,才能保证通过溯源任务还原出可靠的水印信息,进而定位出可能的数据泄露责任人。建议您使用数据量大于500条,并且不包含重复数据的文件进行溯源。原因二:被泄漏的数据非...

常见问题

解决方案:开通公网详情请参见 申请和释放外网地址。常见原因2:白名单未配置。解决方案:设置白名单详情请参见 设置白名单。常见原因3:ECS安全组未放开。解决方案:开放安全组详情请参见 安全组操作指引。常见原因4:公司设置了网络防火...

EMR+DLF数据解决方案

采用EMR+DLF数据解决方案,相对传统EMR数据湖方案有下列优点:DLF提供数据湖跨引擎的统一的,全托管免运维的元数据服务。支持可视化的元数据管理,以及多版本管理和回退。支持可视化一键元数据迁移。支持元数据全文检索。支持元数据...

Redis连接问题排查流程

本文介绍 云数据库Redis版 各类连接问题的排查流程。若您已收到客户端返回的错误信息,请查阅 常见报错 匹配解决方案。首次连接排查 网络环境 在开始连接 Redis 之前,您需要先确认客户端的网络环境,具体流程图如下:图 1.排查网络环境 ...

新建数据库网关

在顶部菜单栏中,选择 解决方案>数据库网关。说明 若您使用的是极简模式的控制台,请单击控制台左上角的 图标,选择 全部功能>解决方案>数据库网关。在 网关列表 页面,单击 新建网关。在弹出的对话框中,填写 网关名称 和 备注 信息,单击...

创建Redis数据

通过创建Redis数据源能够实现Dataphin向Redis写入业务数据。本文为您介绍如何创建Redis数据源。背景信息 Redis一个高性能的key-value数据库,多用于缓存,事件发布或订阅,高速队列等场景。...您可根据 附录:网络连通解决方案 自行排查。

独享调度资源组

网络连通方案 数据源网络环境 网络连通方案 数据源处于公网环境中 数据源与独享资源组绑定的VPC网络直连即可连通。数据源处于VPC网络中,且与独享资源组在 同一 地域 建议独享资源组与数据源绑定同一VPC,绑定后系统自动为您添加一条路由至...

如何解决Redis内存使用率突然升高

解决方案:排查是否存在连接泄漏。设置连接超时时间,自动关闭空闲连接。详情请参见 设置客户端的超时时间。排查是否突发流量导致输入和输出缓冲区积压 排查方法:查看性能监控的出入口流量使用率是否达到100%。执行 MEMORY STATS 命令,...

概览

为了更好地指导您使用数据管理DMS(Data Management),DMS推出解决方案系列文档,旨在通过最佳实践(Step by Step)的形式向您介绍DMS研发流程、数据安全、数据开发的解决方案。研发流程解决方案 DMS为在线流程化系统,可统一管理企业内...

(可选)申请公网连接地址

数据库MongoDB支持公网连接地址,您可以为实例申请公网连接地址用于使用公网连接数据库MongoDB实例的场景。本文介绍为云数据库MongoDB副本集实例申请公网连接地址的方法。背景信息 云数据库MongoDB实例支持的连接地址类型及对应说明...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 云数据库 RDS 云服务器 ECS 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用