续费
后，再将鼠标悬停至左侧导航栏的 大数据 上，单击 数据开发和治理 列下的 Dataphin。进入 续费 页面：在Dataphin产品详情页，单击 管理控制台。Dataphin管理控制台根据实例的状态，为您提供不同的续费操作入口：如果您的实例仍在服务期内，...
Quick BI连接MaxCompute
BI是一个专为云上用户量身打造的易上手、性能强的大数据分析及可视化平台，可以让每个人都能成为数据分析师。Quick BI不仅是业务人员查看数据的工具，更是数据化运营的助推器。更多Quick BI信息，请参见 Quick BI。前提条件 在执行操作前，...
限制说明
项目 限制说明 数据类型 云数据库 Memcache 版仅支持 Key-Value 格式的数据，不支持 array、map、list 等复杂类型的数据。数据可靠性 云数据库 Memcache 版的数据存储在内存中，服务并不保证缓存数据不会丢失，有强一致性要求的数据不适合...
基本概念
在隐私计算的数据应用中，以项目的形式对成员、权限、节点或数据等要素进行隔离。根据不同的应用类别，项目分为不同的类型。虚拟宽表 结合两组数据特征列并且经过 ID 对齐后，物理层面中不存在的宽表被称为虚拟宽表。用户面向虚拟宽表进行...
资产全景
资产全景页面仅为您展示生产环境中的元数据及加工所得的应用数据，包括以下三种模式：全局模式：以星球形式为您展示存储数据量大于0的业务板块及其概要信息。流动模式：展示数据的流入、整合与输出过程，更直观的体现数据加工流向。结构化...
消息路由设置示例
消息路由路径：从边缘应用A路由到边缘应用B 将边缘应用A的数据发送到边缘应用B中。注意 仅函数计算类型的边缘应用，支持使用消息路由。下图中的示例表示，边缘应用A过滤出符合/xxxx 的消息主题，并将该消息主题中的消息发送给边缘应用B。...
Github实时数据同步与分析
实时数仓Hologres与大数据计算服务MaxCompute深度融合，可以组成一体化的大数据查询与分析架构。在MaxCompute公共数据集中，存储了历史GitHub全量数据。如果想要做更长时间的数据分析，有两种方式： 使用外部表查询，在不导入 数据 的情况...
在EMR集群运行TPC-DS Benchmark
100 TB的大数据系统。本文介绍如何在EMR集群完整运行TPC-DS的99个SQL，并得到最佳的性能体验。背景信息 TPC-DS是全球最知名的数据管理系统评测基准标准化组织TPC（事务性管理委员会）制定的标准规范，并由TPC管理测试结果的发布。TPC-DS...
常见问题
本文为您介绍执行MaxCompute准备工作过程中的常见问题。...Studio是阿里云MaxCompute平台提供的安装在开发者客户端的大数据集成开发环境工具，目前支持集成安装的平台有IntelliJ IDEA、PyCharm。配置详情，请参见 配置MaxCompute Studio。
识别任务说明
PostgreSQL、PolarDB等）、大数据（TableStore、MaxCompute等）：对于较大的数据库（即表数量大于1000个），扫描速度为1000列/分钟。非结构化数据（OSS）：平均扫描1 TB数据需要6小时。文件或表扫描限制 为了避免数据源中文件或表过大影响...
后台管理
魔笔提供应用管理员视角的应用数据管理后台，管理员可以在应用管理后台，管理前台展示的实体和API数据。前提条件 已预览或发布应用。操作步骤 进入应用预览页面（开发环境）或打开环境详情对话框（开发/生产环境），详细操作请参见 查看...
公共节点
Hive节点通过类SQL语句协助读写、管理存储在分布式存储系统上的大数据集的数据仓库，完成海量日志数据的分析和开发工作，具体操作，请参见 新建Hive类型的公共节点。Hologres Hologres节点运行于Hologres云计算资源之上，您可使用标准的SQL...
如何使用cookie实现可视化应用数据隔离
当您在DataV中使用API数据源时，可以使用cookie，实现不同的用户登录系统时，只能看到自己的数据，保证可视化应用数据的安全性。原理说明 当您将DataV页面通过 iframe 的方式嵌入自己的业务系统时，在用户登录的情况下，业务系统会在cookie...
分析视图
如果希望同时分析所有应用的数据时，可以创建多应用视图，将多个应用上报数据进行聚合，成为一个独立的多端分析视图，在该视图中可以进行多种模型分析、看板搭建以及独立创建数据权限体系等。操作说明 1.小站视图操作说明 1）创建小站视图 ...
Stage级别诊断结果
某个Stage中的数据被广播，一般是因为这些广播后的数据会作为Join操作的右表（Builder端）来在内存中构建哈希表，所以右表越小越好。在高并发查询的场景下，这样有利于减少节点间的网络连接，提升系统整体稳定性。对于Join条件存在数据倾斜...
数据域
数据域是联系较为紧密的数据主题的集合，通常是根据业务类别、数据来源、数据用途等多个维度，对企业的业务数据进行的区域划分，将同类型数据存放在一起，便于您快速查找需要的内容。不同使用目的数据，分类标准不同。例如，电商行业通常...
准备工作：获取CDH或CDP集群信息并配置网络连通
背景信息 CDH是Cloudera的开源平台发行版，提供开箱即用的集群管理、集群监控、集群诊断等功能，并支持使用多种组件，助力您执行端到端的大数据工作流程。CDP是跨平台收集和整合客户数据的公共数据平台，可帮助您收集实时数据，并将其构建...
数据指标概述
物联网平台数据服务从预置指标和自定义指标维度管理数据指标，以用于数据可视化分析，从中挖掘价值，优化改进相关配置，从而提升业务效率。物联网平台数据服务的数据指标功能...数据指标的应用 数据指标可应用于以下功能：数据API 数据可视化
DBMS_LOB
将字符类型数据的大对象，转换成二进制类型数据的大对象。CONVERTTOCLOB(dest_lob IN OUT,src_blob,amount, dest_offset IN OUT,src_offset IN OUT,blob_csid,lang_context IN OUT,warning OUT)存储过程 N/A 将二进制数据的大对象转换成...
简介
通过数据实体建模，用户不用关心底层数据表的设计，通过创建数据模型可定义应用的数据模型的格式。数据模型里的每个实体代表一个业务抽象体，实体之间的联系用实体之间的连线（有向边）表示，这种联系可以是一对一、一对多或多对多的联系。...
公开数据集概述
BB（TPCx-BB）是一个大数据基准测试，衡量基于Hadoop的大数据系统的性能。它通过执行30个经常执行的分析查询来衡量硬件和软件组件的性能。TPCx-BB 10GB性能测试集 TPCx-BB 100GB性能测试集 TPCx-BB 1TB性能测试集 TPCx-BB 10TB性能测试集 ...
导出应用
当前导入、导出应用数据时，包含的应用信息如下所示：应用名、应用描述信息、应用所处集群信息、应用实例数 应用程序包、应用镜像 CPU、内存请求与限制值 启动命令、启动参数、环境变量配置 就绪探针、存活探针、启动后脚本、停止前脚本 ...
功能特性
ARMS应用监控是一款应用性能管理（Application Performance Management，简称APM）产品。您无需修改代码，只需为应用安装一个探针，ARMS就能够对应用进行全方位监控，帮助您全面掌控应用运行状态，快速定位出错接口和慢接口，洞察性能瓶颈...
时空分析
近年来伴随物联网智能终端在各领域渗透落地，会源源不断生产一种新的感知型时空数据，这类时空数据的应用价值从单一的“位置服务”拓展到多维联合分析/时空模式挖掘等交叉方向，大有“无位置不智能”之架势演化。时空数据分类 传统空间型：...
常见问题
数据同步过程中，可以修改源表中的字段类型，目前仅支持整型数据类型之间、浮点数据类型之间的列类型更改，并且只能将取值范围小的数据类型更改为取值范围大的数据类型，或者将单精度数据类型更改为双精度数据类型。整型数据类型：支持...
数据采集2.0
通过开放搜索为用户提供的算法平台，可以将这些搜索行为反馈数据应用在搜索排序算法模型训练中，不断地提升搜索效果。注意事项 数据采集功能会在实例应用创建完成后自动开通 数据，目前主要指终端用户对搜索结果的行为反馈数据 采集， 目前...
使用场景
ACM 为大数据实时计算场景的应用带来以下好处：应用计算参数动态配置，动态生效，生效时间快，性能影响低。企业级互联网架构下的异地多活场景 异地多活是企业级互联网架构中的一种高级容灾架构。相对于传统容灾架构，有业务恢复时间短、...
作品复制管控
对于安全要求比较高的企业，默认允许复制数据可能带来较大的数据安全问题。Quick BI推出作品复制管控功能，组织管理员可以设置开启或关闭数据作品的复制功能，帮助您有效防止数据泄露。本文为您介绍如何进行作品复制管控。使用限制 仅组织...
快速入门
性能分析服务支持对接入的移动应用数据的域名进行分组管理，便于后续基于域名维度进行数据分析。具体操作请参见 设置域名及分组。说明 域名及分组可根据实际需求，有选择地设置。查询分析数据 移动应用的数据接入性能分析服务后，可通过...
注册CDH或CDP集群至DataWorks
背景信息 CDH是Cloudera的开源平台发行版，提供开箱即用的集群管理、集群监控、集群诊断等功能，并支持使用多种组件，助力您执行端到端的大数据工作流程。CDP是跨平台收集和整合客户数据的公共数据平台，可帮助您收集实时数据，并将其构建...
安装ARMS商业版
本文介绍如何在微服务网关控制台安装ARMS...注意 网关重启后，ARMS控制台才能接收到该网关相关的应用数据。执行结果 在 网关管理 页面目标网关的 操作 列出现 ARMS控制台，单击 ARMS控制台 可直接进入应用监控系统，可查看您的应用总览数据。
数据库上云实施支持服务
乙方项目交付过程中提供数据库相关的技术支持，协助甲方顺利进行适配阿里云数据库的应用改造和数据迁移，并将关键信息记录在文档内，因此文档类交付成果应着重文档实质内容的验收，确认乙方提交内容符合甲方需求。若甲方业务流程要求在乙方...
数据组织优化
Compaction服务通过消除记录中间历史状态，可节省计算和存储成本，极大加速全量快照查询场景的效率，但也不是频率越高越好，首先执行一次也要读取一遍全量数据进行Merge，极大消耗计算和IO资源，并且生成的新BaseFile也会占据额外的存储...
创建逻辑模型：应用表
应用表通常挂载于应用数据层，用于将一个统计粒度（维度或维度组合）及该粒度下的多个指标汇总输出，为后续的业务查询，数据分发等提供基础。您也可以根据业务需求，选择将应用表挂载至其他数据层。创建数据分层，详情请参见 创建数仓分层...
扩容磁盘
复选框：在一个ECS实例重启完成且该实例上的大数据服务全部恢复后，再启动下一个ECS实例。每个节点重启耗时约5分钟。清除 滚动重启 复选框：同时重启ECS实例。只重启变配节点 变配节点是指已经完成磁盘扩容或者升级配置操作的节点，例如，...
简介
在三方数据集成时，外部数据的输入、输出结果，通常是JSON/XML等数据类型，这些数据类型与Mobi内作为数据传递的数据类型 Object 之间无法直接映射，故需引入 结构体（Structure），用于承载外部数据与内部数据之间的转化。结构体定义 结构...
应用身份识别
数据库审计服务提供的审计功能，只能审计访问源的IP信息，无法溯源访问应用的具体访问源信息（例如：用户名）。如果您需要在审计日志中查看具体访问源的信息，您可以使用应用身份识别功能。本文介绍如何使用应用身份识别功能。前提条件 已...
Tablestore外部表
MaxCompute与Tablestore是两个独立的大数据计算和存储服务，所以两者之间的网络必须保证连通性。MaxCompute公共云服务访问Tablestore存储时，推荐您使用Tablestore私网地址，即Host名以 ots-internal.aliyuncs.com 作为结尾的地址，例如 ...
使用须知
analytics），对于复杂分析，比如前面提到的复杂join则不适合，这种建议用Spark这种专门的大数据计算引擎来实现，请参见 X-Pack Spark分析服务 和 HBase SQL（Phoenix）与Spark的选择。Phoenix是否支持映射已经存在的HBase表？支持，请参见...
创建EMR Hive节点
HIVE节点，通过类SQL语句协助读写、管理存储在分布式存储系统上的大数据集的数据仓库，完成海量日志数据的分析和开发工作。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于业务流程对不同开发引擎进行具体...
- 产品推荐
- 这些文档可能帮助您