使用简介
Ganos Geometry Pyramid可以用于二维空间几何大数据的快速显示。数据要求 类型为Point、Line、Polygon、MultiPoint、MultiLine或MultiPolygon的空间数据表。每条记录必须包含一个唯一的正整数类型的ID字段（uint4/uint8）。必须已经为几何...
使用简介
Ganos Geometry Pyramid可以用于二维空间几何大数据的快速显示。数据要求 类型为Point、Line、Polygon、MultiPoint、MultiLine或MultiPolygon的空间数据表。每条记录必须包含一个唯一的正整数类型的ID字段（uint4/uint8）。必须已经为几何...
使用简介
Ganos Geometry Pyramid可以用于二维空间几何大数据的快速显示。数据要求 类型为Point、Line、Polygon、MultiPoint、MultiLine或MultiPolygon的空间数据表。每条记录必须包含一个唯一的正整数类型的ID字段（uint4/uint8）。必须已经为几何...
分析外部OSS上的数据
数据应用层（ADS）并不只是简单的查询数据和分析结果，也存在大量的计算，甚至会将离线数据和实时数据进行聚合分析，此时，行存格式的MySQL并不能很好的支撑这些操作。使用该功能后，数据架构如下图所示：该架构既解决了数据应用层（ADS）...
运维阶段
开发人员根据影响分析的结果判断是否对线上的数据应用有影响。如果有影响，需要开发人员及时推送告警信息至任务责任人，并判断原因、确定可行性解决方案。如果无影响，则无需处理。制定与实施方案。开发人员提交线上变更申请。审批人员...
应用场景
Cassandra能够支持大并发低延时的访问需求，具备高可用和弹性扩容能力，适合日志、消息、feed流、订单、账单、网站等各种大数据量的互联网在线应用场景。多活 Cassandra原生支持多DC部署方式，实现更好的可用性和容灾能力。云数据库...
应用场景
云数据库HBase支持海量全量数据的低成本存储、快速批量导入和实时访问，具备高效的增量及全量数据通道，可轻松与Spark、MaxCompute等大数据平台集成，完成数据的大规模离线分析。优势如下：低成本：高压缩比，数据冷热分离，支持HDD/OSS...
数据迁移
本文为您介绍数据迁移的最佳实践，包含将其他业务平台的业务数据或日志数据迁移至MaxCompute，或将MaxCompute的数据迁移至其它业务平台。...BI快速地以可视化方式展现数据处理结果，详情请参见 基于MaxCompute的大数据BI分析。
概述
从OSS上传和下载数据时，您的应用程序可以轻松实现每秒数千个事务的请求性能。您的应用程序可以实现存储空间（Bucket）中每个分区（OSS按对象名的字母序排列对象，并按照数据量和请求QPS来拆分分区）每秒至少 3,500 个PUT/COPY/POST/DELETE...
功能简介
提供自定义监控链路配置能力，快速实现从数据生产到数据应用的全链路编排及溯源和监控节点的稳定性分析。例如，当指标出问题时，加工这个指标的全局链路上，涉及系统的接入、数据的加工、API的转换、系统中的算法加工，到最终指标的呈现，...
全景监控
提供自定义监控链路配置能力，快速实现从数据生产到数据应用的全链路编排及溯源和监控节点的稳定性分析。例如，当指标出问题时，加工这个指标的全局链路上，涉及系统的接入、数据的加工、API的转换、系统中的算法加工，到最终指标的呈现，...
功能简介
提供自定义监控链路配置能力，快速实现从数据生产到数据应用的全链路编排及溯源和监控节点的稳定性分析。例如，当指标出问题时，加工这个指标的全局链路上，涉及系统的接入、数据的加工、API的转换、系统中的算法加工，到最终指标的呈现，...
数据集常见问题
如何将两个数据源中的数据应用于同一个交叉表中？如何实现多表关联分析？如何通过参数SQL实现占比的灵活运算？目前Quick BI是不支持直接计算占比的，您可以通过参数SQL创建数据集，实现占比的计算。假设目前数据表结构为：日期（date）、...
作业优先级管理与成本优化
本文为您介绍MaxCompute作业优先级管理与成本优化。作业优先级 MaxCompute的包年包月计算资源有限，在实际数据开发过程中，系统需要优先保障...由于大数据的动态性和不断变化的性质，成本优化应该持续进行，成本优化流程请参见 成本优化概述。
应用场景
智能解析数据库及大数据的通信流量，细粒度审计数据访问行为，通过对数据源全量行为的审计溯源、危险攻击的实时告警、风险语句的智能预警，为您最敏感的数据库资产做好最安全的监控保障。个人信息合规 可精准区分和保护个人数据，避免产生...
Serverless Spark概述
解决方案 Serverless Spark是云原生数据湖团队基于Apache Spark打造的服务化的大数据分析与计算服务。方案架构图如下所示： Serverless Spark将Spark、Serverless、云原生技术，深度整合到一起，相对于传统开源Spark集群版方案，具体以下...
成本优化概述
由于大数据的动态性和不断变化的性质，企业用户成本优化的活动应该持续不断的进行。您可以参考以下流程进行优化： 在使用MaxCompute之前，建议您详细了解付费策略以及预估自己需要使用的资源，选择适合您的付费方式。详情请参见 选择付费...
创建Hudi数据源
Hudi，Hudi是一个通用的大数据存储系统，将核心仓库和数据库功能直接引入到数据库中，并支持记录级别的插入更新和删除数据的能力。更多详情请参见 Apache Hudi官网。使用限制 Dataphin仅支持超级管理员、数据源管理员、板块架构师、项目...
主备方案介绍
存储的是数据D1和数据D2中时间戳更大的数据，数据在LTS同步过程中不会改变数据原有的时间戳，一般情况下存储的是数据D2，但是由于主备实例不同可能存在时间戳毫秒级的时间差异造成数据D2的时间戳比数据D1的时间戳小，在这种情况下存储的是...
将云消息队列 Kafka 版的数据迁移至MaxCompute
在数加（一站式大数据平台）中，DataWorks控制台即为MaxCompute控制台。MaxCompute和DataWorks一起向用户提供完善的数据处理和数仓管理能力，以及SQL、MR、Graph等多种经典的分布式计算模型，能够更快速地解决用户海量数据计算问题，有效...
Tair扩展数据结构概览
Counting）压缩算法开发的数据结构，支持仅占用很小的内存空间对采样数据进行高性能计算，支持滚动窗口和滑动窗口，可以更好地支持流式运算，支持大数据分析中常用的聚合算子，如： DISTINCT、COUNT、MAX、MIN、FIRST、LAST、SQUARED 等。...
使用ARMS应用监控数据指标绘制自定义的Grafana大盘
如果您需要使用ARMS应用监控数据指标绘制自定义大盘，只需要创建一个Grafana专家版或高级版工作区，将Prometheus实例中的应用数据通过Grafana服务展示，就可以实现自定义大盘。前提条件 已开通应用监控和Prometheus监控。具体操作，请参见 ...
上游应用
对于某个应用而言，上游应用是指向该应用发送数据的应用。本文说明如何查看上游应用情况，包括响应时间、请求数、错误数等信息。前提条件 接入应用监控 功能入口 登录 ARMS控制台，在左侧导航栏选择 应用监控>应用列表。在 应用列表 页面...
背景信息以及准备工作
Store）上的大数据进行分析之后，通过DLA把结果数据回写到MongoDB，供前台业务使用。前提条件 使用DLA读写MongoDB数据前，您需要通过以下操作在MongoDB中准备好测试数据。创建实例 DLA和MongoDB所属地域必须相同，否则无法进行本文档操作。...
车辆数据分析和价值挖掘
分析洞察的结果可以配置为自定义服务API，也可以直接被用户业务系统集成调用，用户只需关注业务开发，无需关注设备数据的存储、备份、分析和API开放等技术细节，大大加快了业务中物联网数据应用的开发。前提条件 数据分析动洞察前需要进行...
什么是物联网平台
您可使用物联网平台的数据服务，对物联网设备进行数据接入、数据解析、数据存储、数据指标、分析洞察和数据应用的配置，挖掘物联网设备的数据价值。具体操作，请参见 数据服务。功能概览 实例管理 面向物联网个人开发者和企业客户提供试用...
云数据库Cassandra版应用场景
Cassandra能够支持大并发低延时的访问需求，具备高可用和弹性扩容能力，适合消息、feed流、订单查询、网站等各种大数据量的互联网在线应用场景。在线应用场景 方案优势 高可用：单点故障不影响业务。低延时：延迟在毫秒级别。弹性：可随着...
背景信息以及准备工作
DLA作为无服务化的大数据分析服务，通过标准的SQL语句直接对存储在阿里云对象存储服务（Object Storage Service，简称 OSS）、表格存储（Table Store）中的数据进行清洗。例如，使用DLA对OSS中的历史数据按天进行清洗。DataWorks是基于...
应用场景
Lindorm支持海量数据的低成本存储、快速批量导入和实时访问，具备高效的增量及全量数据通道，可轻松与Spark、MaxCompute等大数据平台集成，完成数据的大规模离线分析。优势 低成本：高压缩比，数据冷热分离，支持HDD/OSS存储。数据通道：...
Tair命令概览
Counting）压缩算法开发的数据结构，支持仅占用很小的内存空间对采样数据进行高性能计算，支持滚动窗口和滑动窗口，可以更好地支持流式运算，支持大数据分析中常用的聚合算子，如： DISTINCT、COUNT、MAX、MIN、FIRST、LAST、SQUARED 等。...
东软案例
东软集团围绕运营商、政务云和汽车等行业新一代数字信息系统IT运维场景海量监控数据存储分析痛点，将从遍布全国多地域的手机、平板等终端连接应用系统业务服务的数字足迹和客户数字体验数据、云端&数据中心网络抓包分析数据，应用运行代码...
上游应用
对于某个应用而言，上游应用是指向该应用发送数据的应用。本文说明如何查看上游应用情况，包括响应时间、请求数、错误数等信息。功能入口 登录 EDAS控制台。在左侧导航栏，单击 应用管理>应用列表。在 应用列表 页面顶部菜单栏选择地域，在...
入门概览
本文介绍 云原生多模数据库 Lindorm 时序引擎的使用流程，帮助您快速连接使用Lindorm时序引擎。操作流程 从创建Lindorm实例到Lindorm时序引擎的应用开发，您需要完成以下操作：创建Lindorm实例，创建时选择数据引擎为时序引擎，具体操作请...
应用间迁移
本文将为您介绍在OpenSearch中，如何快速的将旧应用的应用...若用户的应用无数据源，则该文档只能迁移应用结构，旧应用中的数据源需要用户通过API的方式重新导入新应用。若应用有数据源，模板默认是没有数据库信息的，这个需要手动再配置下
应用间迁移
本文将为您介绍在OpenSearch中，如何快速的将旧应用的应用...若用户的应用无数据源，则该文档只能迁移应用结构，旧应用中的数据源需要用户通过API的方式重新导入新应用。若应用有数据源，模板默认是没有数据库信息的，这个需要手动再配置下
上游应用
对于某个应用而言，上游应用是指向该应用发送数据的应用。本文说明如何查看上游应用情况，包括响应时间、请求数、错误数等信息。应用限制 EDAS标准版不支持查看上游应用情况，专业版和铂金版支持查看上游应用情况。功能入口 登录 EDAS控制...
Quick BI的数据集是否区分数据大小写
问题描述 Quick BI的数据集是否会区分数据的大小写？解决方案 数据集默认不区分数据大小写。当数据集开启Quick引擎后是区分大小写的。适用于 Quick BI 公共云专业版4.4.1版本
产品概述
什么是地址标准化 地址标准化 是依托阿里云海量的地址语料库，以及超强的NLP算法实力所沉淀出的高性能及高准确率的标准地址算法服务。...最终通过OneID，来构建自有的数据的位置画像，达成数据分析和支撑数据应用的能力并支持数据下载。
数据资产定级
数据的资产等级，可以根据数据质量不满足完整性、准确性、一致性、及时性对业务的影响程度进行划分。数据等级定义如下： 毁灭性质：数据一旦出错，将会引起重大资产损失，面临重大收益损失等。标记为A1。全局性质：数据直接或间接用于企业...
数据资产定级
数据的资产等级，可以根据数据质量不满足完整性、准确性、一致性、及时性对业务的影响程度进行划分。数据等级定义如下： 毁灭性质：数据一旦出错，将会引起重大资产损失，面临重大收益损失等。标记为A1。全局性质：数据直接或间接用于企业...
- 产品推荐
- 这些文档可能帮助您