时序数据库 TSDB

时序数据库产品系列是是广泛应用于物联网(IoT)设备监控系统,企业能源管理系统(EMS),生产安全监控系统,电力检测系统等行业场景的专业数据库产品,提供百万高效写入,高压缩比低成本存储、降采样、插值、多维聚合计算,查询结果可视...

图数据库 GDB

图数据库 GDB 是一种支持 Property Graph 图模型,用于处理高度连接数据查询与存储的实时,可靠的在线数据库服务。GDB 支持 TinkerPop Gremlin 查询语言,可以帮助用户快速构建基于高度连接的数据集的应用程序。

认领与预处理

背景信息 本章节介绍PM认领...在订单详情点击开始统计开始数据预处理 预处理完成后可以查看查看统计结果,进行统计确认或再次统计 数据预处理是基于需求类型设置的语料库进行匹配处理的,可在订单详情页-需求类型中单独修改该订单的语料库配置

概述

物联网数据分析提供数据管道功能,对已备份的设备数据或导入的API数据源的数据进行预处理后,将数据以表的形式,存储于物联网数据分析平台。物联网数据分析提供的数据管道功能包括实时管道和离线管道。您可在物联网平台控制台的数据分析>...

数据预处理

对于文本数据而言,通常文本数据里面会含有很多跟任务无关的噪音,这时应该进行文本的预处理。在NLP自学习平台内置了一些预处理规则,如果您觉得有必要进行预处理,可以选择这些规则。我们内置的规则包括:去除 url 链接;去除 emoji 表情...

数据可视化

前提条件 完成数据预处理,详情请参见数据预处理。操作步骤 进入PAI-Studio项目空间。登录PAI控制台。在左侧导航栏,选择模型开发和训练>可视化建模(Studio)。在页面左上方,选择使用服务的地域。可选:在PAI可视化建模页面的搜索框,...

云原生架构下日志服务数据预处理

本文介绍云原生架构下日志服务数据预处理的场景描述、方案优势、解决问题、架构图及操作参考链接。场景描述 某家国际教育机构,提供在线教育服务,其用户主要分布在中美两地,该企业拥抱云计算,在架构设计上也全面采用了云原生服务,本...

数据预处理

本文为您介绍如何对原始数据进行数据预处理,得到模型训练集和模型预测集。前提条件 完成数据准备,详情请参见准备数据。操作步骤 进入PAI-Studio项目空间。登录PAI控制台。在左侧导航栏,选择模型开发和训练>可视化建模(Studio)。在...

名词解释

数据管道数据预处理的一种方式,通过配置表达式或筛选器,输出指定的数据表。数据管道包括:在线管道:实时地对备份的设备数据源或API数据源的数据进行预处理。离线管道:预处理T+1日的设备源数据。数据API通过数据API,可获取所需数据,...

什么是物联网数据分析

数据管道包括:实时管道:您可实时预处理备份的设备数据源或API导入的数据,输出数据表。离线管道:您可预处理T+1日的设备源数据,输出数据表。数据存储物联网数据分析提供的数据存储功能,以表的形式,将数据存储为数据表。数据表包括:...

翻译

预翻译流程如下图:操作步骤 在左侧菜单选择订单管理我的订单点击已经认领的订单的标题进入订单详情界面 在数据预处理区域点击开始统计,系统执行预翻译操作 说明 预翻译操作前必须认领订单 说明 预翻译使用的记忆库和机器翻译引擎,是通过...

概述

数据集成是基于Dataphin构建的简单高效的数据同步平台,致力于提供具有强大的数据预处理能力、丰富的异构数据源之间数据高速稳定的同步能力。如果您是在2020年4月份之后购买的Dataphin,则数据同步能力已升级为数据集成。背景信息 面对各行...

什么是ETL

离线数仓加速:通过流数据处理先将数据预处理至数仓,后续再对数仓数据进行深度挖掘。既不影响业务库运行,也能满足离线数仓对外服务。报表提速:构建实时报表体系,不仅大幅提升报表产出效率,还能支持更多实时分析场景,满足了企业数字化...

常见问题

数据迁移/数据同步/数据订阅 数据迁移时显示已完成的值超过总数 自建MySQL源数据库server_id检查失败 数据迁移时目标数据库increment_trx表的作用说明 如何通过DTS实现同实例中的数据库复制和重命名 使用数据订阅功能传输数据后日期数据...

数据迁移与同步FAQ

说明 DTS的数据同步功能可支持更加丰富的Redis同步场景和功能,建议通过DTS的数据同步功能来完成数据迁移。更多信息,请参见Redis数据同步方案概览。使用DTS遇到检查报错,如何解决?DTS在执行数据迁移或数据同步任务之前,会对源库和...

数据迁移过程中检查失败

概述 在数据迁移过程中,为保障数据迁移任务的顺利执行,DTS将进行检查。如果某项检查出现异常,请参考本文进行排查处理。详细信息 检查失败请参考如下表格内容进行修复。检测项 检测内容 失败原因 解决方法 源库连接性检查 检查DTS...

新功能发布记录

实时管道:预处理已备份的设备数据源和导入的API数据源的数据。离线管道:原Topic管理。2021-09-16 数据管道概述 数据存储 新增了数据存储功能。数据存储功能包括平台系统表、产品存储表和自定义存储表。以表的形式,存储各类数据。2021-09...

新建 OB_MySQL 至 AnalyticDB MySQL 的数据同步项目

本文为您介绍如何新建 OceanBase 数据库至 云原生数据仓库 AnalyticDB MySQL 版(简称 ADB)的数据同步项目。背景信息ADB 的基本介绍请参见 基础数据类型。ADB 的建表、分区表和分布表的详情请参见 CREATE TABLE。支持的 DDL目前同步 ...

RDS MySQL间的双向同步

说明 源和目标RDS MySQL实例可以不同或相同,即您可以使用DTS实现两个RDS MySQL实例间的数据迁移或同一RDS MySQL实例内的数据迁移。数据库账号 填入源RDS MySQL实例的数据库账号。账号所需权限及授权方式,请参见数据库账号的权限要求。...

PolarDB O引擎集群间的单向同步

配置项目 配置说明 目标已存在表的处理模式 检查并报错拦截:检查目标数据库中是否有同名的表。如果目标数据库中没有同名的表,则通过该检查项目;如果目标数据库中有同名的表,则在检查阶段提示错误,数据同步作业不会被启动。说明 ...

配置订阅任务(旧控制台)

数据传输服务DTS(Data Transmission Service)提供的数据订阅功能简单易用,您只需在控制台上进行简单操作,即可完成整个数据订阅任务的配置。通过数据订阅功能可以实时订阅增量数据,轻松帮助业务实现轻量级缓存更新、业务异步解耦、含...

配置同步任务(新控制台)

数据传输服务DTS(Data Transmission Service)提供的数据同步功能简单易用,您只需在新版控制台上进行简单操作,即可完成整个数据同步作业的配置。注意事项 本文仅简单介绍数据同步任务的通用配置流程,不同的同步链路在配置数据同步任务...

新建 OB_MySQL 至 DataHub 的数据同步项目

本文为您介绍如何同步 OceanBase 数据库 MySQL 租户下的数据至 DataHub。前提条件已创建 OceanBase 数据库 MySQL 租户类型的数据源。详情请参见 创建 OceanBase 数据源。已创建 DataHub 数据源,并确认连通性。OMS 支持自动创建 Topic。...

Redis实例间的单向数据同步

如果目标库的数据逐出策略(maxmemory-policy)配置为noeviction以外的值,可能导致目标库的数据与源库不一致。关于数据逐出策略详情,请参见Redis数据逐出策略介绍。同步期间,如源Redis实例发生扩缩容(如增加或者减少分片)、规格变配...

从PolarDB MySQL同步至RDS MySQL

功能限制 不兼容触发器 当同步对象为整个库,且库中的触发器(TRIGGER)会更新库内某个表时,可能导致源和目标库的数据不一致。相关解决方案请参见源库存在触发器时如何配置同步作业。RENAME TABLE限制 RENAME TABLE操作可能导致同步数据不...

修改订阅对象

执行了移除订阅对象操作后,如果数据订阅的客户端还能订阅到该对象的数据,您需要在订阅客户端中进行过滤。操作步骤 登录数据传输控制台。在左侧导航栏,单击数据订阅。在数据订阅列表页面上方,选择订阅通道所属地域。定位至目标数据订阅...

准备工作

本文为您介绍MMA2.0运行前的环境准备和迁移数据预处理。准备运行环境 下载与Hive版本对应的MMA工具。下载方式请提工单获取。MMA所服务器上需要安装JDK1.8及以上版本的Java。安装Beeline客户端。确认MaxCompute所在地域并获取该地域的...

PolarDB-X 2.0间的同步

使用数据传输服务DTS(Data Transmission Service),您可以实现PolarDB-X 2.0 间的数据同步。前提条件 已创建源和目标PolarDB-X 2.0实例,且兼容MySQL 5.7版本。目标PolarDB-X 2.0实例的存储空间须大于源PolarDB-X 2.0实例占用的存储空间...

配置同步任务(旧控制台)

数据传输服务DTS(Data Transmission Service)提供的数据同步功能简单易用,您只需在控制台上进行简单操作,即可完成整个数据同步任务的配置。首次使用数据同步功能时,请阅读数据同步操作指导,帮助您快速掌握创建、监控、管理数据同步...

从RDS MySQL同步至PolarDB MySQL

功能限制 不兼容触发器 当同步对象为整个库,且库中的触发器(TRIGGER)会更新库内某个表时,可能导致源和目标库的数据不一致。相关解决方案请参见源库存在触发器时如何配置同步作业。RENAME TABLE限制 RENAME TABLE操作可能导致同步数据不...

从PolarDB MySQL同步至RDS MySQL

功能限制 不兼容触发器 当同步对象为整个库,且库中的触发器(TRIGGER)会更新库内某个表时,可能导致源和目标库的数据不一致。相关解决方案请参见源库存在触发器时如何配置同步作业。RENAME TABLE限制 RENAME TABLE操作可能导致同步数据不...

数据加工(ETL)

数据传输服务DTS提供的数据加工功能ETL(Extract Transform Load),实现了流式数据的清洗和转换处理,能够准确、高效地提供您需要的数据。本文介绍配置ETL任务的使用流程。背景信息 说明 ETL功能在公测阶段,支持免费体验。如在体验过程中...

检查

目标库插件检查:检查目标库是否已经安装迁移对象依赖的数据库插件。如果目标库缺失插件,请参见目标库插件缺失。目标库版本号检查:检查评估目标库版本与结构迁移目标库版本是否一致。如果目标库版本不一致,请参见目标库版本不一致。字符...

PolarDB MySQL集群间的单向同步

功能限制 不兼容触发器 当同步对象为整个库,且库中的触发器(TRIGGER)会更新库内某个表时,可能导致源和目标库的数据不一致。相关解决方案请参见源库存在触发器时如何配置同步作业。RENAME TABLE限制 RENAME TABLE操作可能导致同步数据不...

PolarDB MySQL集群间的单向同步

支持的数据库版本,请参见同步方案概览。源PolarDB MySQL集群已开启Binlog,详情请参见如何开启Binlog。注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或...

PolarDB-X间的数据实时同步

准备工作 由于PolarDB-X间的数据同步不支持结构初始化,所以您需要根据源PolarDB-X中待同步对象的数据结构,在目标PolarDB-X中创建相应的数据库和数据表,详情请参见创建数据库和SQL基本操作。说明 结构初始化:将源库中待同步对象的结构...

购买流程

数据订阅配置费类型 如果您创建的数据订阅实例为包年包月(也称为付费),订阅实例类型为MySQL,则您需要选择数据订阅配置费类型。选择为配置费720元/月(免数据流量费),只收取配置费,免收数据流量费。说明 数据流量是指客户端从订阅...

PolarDB MySQL数据同步至AnalyticDB PostgreSQL

目标已存在表的处理模式 清空目标表的数据检查阶段跳过同名对象存在性检查的检查项目。全量初始化之前将目标表的数据清空。适用于完成同步任务测试后的正式同步场景。忽略报错并继续执行在检查阶段跳过同名对象存在性检查的检查项目...

使用限制

您在使用数据湖构建(Data Lake Formation,简称DLF)控制台和接口时,产品...数据湖元数据限制项用户配额单表QPS2000单表分区数量100万数据湖入湖预处理作业限制项用户配额用户入湖作业数量(每个region)1000个每个入湖作业最大资源量1000CU

备份数据库

单击左侧导航栏中的数据源,然后在上方选择目标地域。单击批量备份。选择目标数据源类型与备份类型,并单击开始批量备份。您选择多个数据库进行批量备份时,每次仅支持配置相同数据库类型、相同备份类型的备份任务,例如批量备份MySQL逻辑...
< 1 2 3 4 ... 200 >
跳转至: GO

新品推荐

你可能感兴趣

热门推荐

新人福利专场 阿里云试用中心 企业支持计划 飞天会员助力企业低成本上云 智能财税30天免费试用 云解析DNS新用户首购低至36元/年起 ECS限时升级特惠6.5折