离线存储授权
iGraph引擎的离线系统需要的权限列表：Object Action 说明 Project Read 查看项目自身（不包括项目的任何对象）的信息，例如CreateTime。Project List 查看项目所有类型的对象列表。Table Describe 读取表的元信息。Table Select 读取表的...
同步字典
说明 管控模式为安全协同模式的实例，在采集元数据时会默认屏蔽系统库。详细信息，请参见 DMS默认屏蔽的实例系统库。表的名称、占用的存储空间、记录行数、字符集、字段、索引和描述信息。字段类型、精度和描述信息。字典更新规则：如果...
数据风险点监控
离线数据风险点监控 数据准确性 数据准确性是数据质量的关键，也是所有离线系统加工时的第一保障要素，详情请参见 概述。下面为您介绍使用DataWorks的数据质量（DQC）保障MaxCompute离线数据的准确性。说明 执行数据质量需使用DataWorks...
数据加工过程卡点校验
离线系统卡点校验 MaxCompute将离线业务系统生成的数据，通过同步工具（DataWorks的数据集成或阿里云DTS）进入数据仓库系统（MaxCompute）。数据在数据仓库中进行清洗、加工、整合、算法和建模等一系列运算后，再通过同步工具输出到数据...
持续架构优化
计算存储分离 面对业务不断增长带来的数据持续增加，不管是在线还是离线系统，其所需要的存储规模以及存储成本，成倍上涨。如果还是采取传统的分散式存储管理方式，不但带来高昂的管理分散式存储的成本，而且还会增加存储成本。应用需要...
全场景解决方案
平滑迁移异构治理 方案架构 双模微服务平台通过 SOFA 微服务和 Service Mesh 微服务，提供了既支持 SOFA 框架又支持 Service Mesh 架构的微服务管理和治理能力,解决用户在技术转型期间与未改造的遗留系统相互之间的打通和过渡问题，帮助...
闲鱼
颠覆性创新往往是从边缘性的地方出现，而向云原生化及Serverless化升级，对于闲鱼是一条全新的路，走出了这条路，对于很多做线上交易的公司有着巨大的借鉴意义。客户痛点 客户端交互层、服务端业务胶水层、领域层边界划分不清晰，导致很小...
闲鱼
颠覆性创新往往是从边缘性的地方出现，而向云原生化及Serverless化升级，对于闲鱼是一条全新的路，走出了这条路，对于很多做线上交易的公司有着巨大的借鉴意义。客户痛点 客户端交互层、服务端业务胶水层、领域层边界划分不清晰，导致很小...
账号权限
pg_read_all_data&pg_write_all_data 受限 读写任意表的权限，可读写任意用户表和可读大部分系统表，安全原因屏蔽部分系统表。pg_read_all_settings 受限 读任意参数权限，可读权限范围内的参数，安全原因屏蔽部分参数。pg_read_server_...
账号权限
pg_read_all_data&pg_write_all_data 受限 读写任意表的权限，可读写任意用户表和可读大部分系统表，安全原因屏蔽部分系统表。pg_read_all_settings 受限 读任意参数权限，可读权限范围内的参数，安全原因屏蔽部分参数。pg_read_server_...
线下系统调研问答汇总
本文总结了线下系统调研常见的问题和解决方案。IDC调研 连通性测试 请在工具服务器上运行如下命令，打印远端机器的日期来尝试连通性 sshpass-p '密码' ssh-p 端口 账号@ip地址 'date' 如果出现"host key changed"报错，则表示您需要远程...
如何设置目标虚拟用户或目标RPS？
评估TPS（RPS）线上系统：已有系统：可选取高峰时刻，在一定时间内（如3分钟~10分钟），获取系统总业务量，计算单位时间（秒）内完成的笔数，乘以2~5倍作为峰值的TPS，例如峰值3分钟内处理订单18万笔，平均TPS是1000，峰值TPS可以是2000~...
概述
变更是指对线上系统的任何操作（如：发布、增加、修改或移除等），或其他对生产业务可能有影响的任何操作。基于阿里巴巴的历史经验，有一半以上的重大故障皆为变更触发，因此，变更过程的风险防御显得尤为重要，会直接关乎业务的稳定性。...
DMS默认屏蔽的实例系统库
数据管理DMS 中管控模式为安全协同模式的实例，在采集元数据时会默认屏蔽实例的系统库。本文列举不同数据库类型默认屏蔽的实例系统库。背景信息 数据管理DMS中录入实例后，系统将自动采集实例中数据库的元数据（字典）信息。为了保护系统库...
ICP备案信息转移至其他阿里云账号
如您进行线下转移操作，转移申请提交后约1个工作日左右转移成功，具体以实际转移成功的日期为准。如当前备案主体下存在多个网站和App备案，ICP备案信息转移时将转移当前阿里云账号下所有的ICP备案信息，无法单独转移其中任意一个。操作步骤...
在DMS中自定义屏蔽系统库
本文介绍如何在 DMS 中，通过配置安全规则来自定义屏蔽实例的系统库。背景信息 在实例录入 DMS 后，系统将自动采集实例中数据库的元数据（字典）信息。为保护系统库，同时减少系统库对您的干扰，可自定义屏蔽 DMS 部分系统库（如MySQL的...
错误码
E23 系统CPU ID错误 lscpu 命令的返回值中上线与下线状态的CPU信息无效，请运行 lscpu 命令并检查其返回值是否存在异常。E24 CPU错误 lscpu 命令的返回值中存在无效信息，请运行 lscpu 命令并检查其返回值是否存在异常。E25 大页长度错误 ...
数据集成概述
数据集成支持多种类型组件，通过简单的拖拽、配置并组装组件的方式，生成离线单条管道。数据集成支持快速生成批量同步任务。整库迁移来源端支持MySQL、SQL Server、Oracle，目标端支持 MaxCompute。同时，数据集成支持用户自定义系统不支持...
如何理解并使用对话工厂
对话工厂，就是用来生产对话流的，意图、实体，就是对话流的原材料，节点、连线就是组装对话流的生产线。对话工厂 如图，最左侧是五个菜单，分别是意图列表、实体列表、全局变量、全局配置、测试窗。在左侧第二列中，系统将七个节点进行了...
如何理解并使用对话工厂
对话工厂，就是用来生产对话流的，意图、实体，就是对话流的原材料，节点、连线就是组装对话流的生产线。对话工厂 如图，最左侧是五个菜单，分别是意图列表、实体列表、全局变量、全局配置、测试窗。在左侧第二列中，系统将七个节点进行了...
拼写纠错干预词典
屏蔽纠正词：对一个Query屏蔽纠正词，系统在查询Query时不再会改写成屏蔽的纠正词进行结果召回。使用干预词典。创建并填充完成拼写纠错词干预词典后，可在任意应用的查询规则内选择使用。干预词典效果测试和上线。查询分析规则使用了干预...
应用场景
在线或离线分析系统：支持实时在线分析系统和类似于Hadoop的离线分析系统。数据处理 在很多领域，如股市走向分析、气象数据测控、网站用户行为分析，由于数据产生快、实时性强且量大，您很难统一采集这些数据并将其入库存储后再做处理，这...
EBA设备接入方案介绍
1．概述 本文档针对EBA设备厂商技术人员，目的是使本地的 楼宇设备或系统（支持BACnet、Modbus、KNX、SNMP等协议的设备或系统）可以接入到阿里云平台。本方案可以将不同品牌的楼宇设备产生的数据进行标准化，实现数据的统一管理，并提供...
应用场景
大数据存储与分析 传统的数据分析场景下，用户需要把数据从在线数据库（Operational Database）复制到离线数据仓库（Data Warehouse）上之后再进行数据分析，这需要海量数据的多次复制、传输、加载和存储等多方面工作。HybridDB for MySQL...
数据集成概述
数据集成支持多种类型组件，通过简单的拖拽、配置并组装组件的方式，生成离线单条管道。数据集成支持快速生成批量同步任务。整库迁移来源端支持MySQL、SQL Server、Oracle，目标端支持 MaxCompute。同时，数据集成支持用户自定义系统不支持...
修改容量告警线
容量告警线是触发容量告警的阈值，当存储空间或磁盘容量的已用占比达到设置的阈值，系统将自动发送消息知会告警消息接收人当前已用容量的百分比。本文介绍通过Lindorm管理控制台修改容量告警线的方法。前提条件 购买实例时，商品类型 选择...
同义词干预词典
屏蔽同义词：对一个Query屏蔽已有的同义词，系统在查询Query时不再会同时返回包含屏蔽的已有的同义词的搜索结果。使用干预词典。创建并填充完成同义词干预词典后，可在任意应用的查询规则内选择使用。干预词典效果测试和上线。查询分析规则...
智能质检应用说明
对于离线数据，系统能够当天或隔天完成全量质检，并能够辅助质检员快速定位违规点，及时联系用户解决矛盾，有效避免合规风险。2、企业的质检业务有提效需求，需要全量质检和标准质检规则，以解决用工和人力矛盾 某些业务如果不质检，难以...
订阅关系清理
本文介绍如何在 云消息队列 MQTT 版 控制...开启自动订阅关系清理 设置为 否：订阅者客户端离线期间，系统不会清理订阅者与该Topic的订阅关系，订阅关系持续生效。配置完成后，您可以在Topic列表的 订阅关系清理周期 列查看Topic的清理周期。
客户案例
业务挑战 一致性，一致性是金融业务的生命线，为了应对硬件或者系统故障（IDC/OS/机器故障），传统的数据库在这方面为业务提供多种选择。最大可用模式在主库故障情况下可能造成数据丢失。最大保护模式会提高全年的不可用时间，并造成性能...
功能发布记录
支持流水线变量，包括系统变量和自定义变量。在流水线设计态中，变量支持以占位符的方式使用。自定义变量支持默认值、支持在中心应用部署时设置自定义变量值。增加应用运维、项目运维的角色，将流水线的设计和运行权限分离。支持手动终止...
数据注册与字段配置
在配置中心配置了若干个指标后，我们会动态组装 SQL，然后对“实验报表来源表”进行计算、统计，并把结果存到 Hologres 中。在实验报表页面，可以查询到指标数据。离线“实验报表来源表”的格式 字段名称 字段含义 是否必填 说明 user_id ...
开发前端界面
编排页面：前端全代码 开发管理中允许您上传自定义页面，在完成线下开发并打包页面代码至平台后，也可将代码映射至应用内页面，后续即可和其他编排出的页面一样被调用。在 页面编排 页面，单击 新建页面。在 新建页面 面板，编码 需填写为...
Webhook 触发流水线
Webhook 触发用于代码源以外的第三方工具或自有系统触发流水线运行。Webhook 触发设置 通过 Webhook 触发，用户通过任意第三方系统触发流水线运行。在编辑流水线时，可以点击触发设置，开启 Webhook 触发。Webhook 触发流水线运行 在启用...
功能简介
数据探索（Data Discovery）是一款面向业务人员的业务模型（智能数据与智能算子组装）编排、调试、运行及运营管理产品，旨在将“大数据”变成“人人都可用的大数据”。数据探索面向行业客户和业务人员，提供工具内容一体化的业务模型构建...
新建离线模型
您可以在画布中通过鼠标的拖拽和条件设定，组装、编排业务需求的业务模型。本文介绍如何新建离线模型。前提条件 已存在离线模型所需数据，具体操作，请参见 通过选择已有表新建数据集、通过上传本地数据新建数据集。已新建离线模型所需的...
使用访问控制屏蔽恶意IP和限制并发连接数
不同产品类型的云虚拟主机支持使用访问控制功能屏蔽恶意IP和限制并发连接数（即限制访问频率）的情况也不同，具体说明如下：主机类型 主机操作系统 说明 共享云虚拟主机 Linux操作系统 Windows操作系统 均不支持使用访问控制功能屏蔽恶意IP...
模型中心
模型中心提供业务模型的可视化组装、编排能力，提供拖拽式智能算子的面向业务场景的模型Flow DAG的编辑与配置。通过该模块可以将业务需求转换为业务模型进而通过底层引擎的运行产生业务效果，主要包含以下功能：模型管理、模型编排、模型发...
离线集成概述
离线集成支持多种组件，包括输入、输出与转换组件等，通过在画布上简单的拖拽、配置并组装的方式，生成离线集成单条管道。离线集成也支持脚本模式，支持更多个性化配置。同时，用户创建的自定义RDBMS数据源的输入与输出组件也会自动在创建...
离线集成概述
离线集成支持多种组件，包括输入、输出与转换组件等，通过在画布上简单的拖拽、配置并组装的方式，生成离线集成单条管道。离线集成也支持脚本模式，支持更多个性化配置。同时，用户创建的自定义RDBMS数据源的输入与输出组件也会自动在创建...
- 产品推荐
- 这些文档可能帮助您