云原生大数据计算服务 MaxCompute系统hdfs 的相关内容

阿里云文档 2025-12-09

系统规则模板和自定义规则模板

为了减少书写Spec时的工作量，数据质量提供了数据质量规则模板能力，系统内置了一批常用的规则模板，您也可以创建自定义的规则模板，这些模板中固化了Spec所需的大部分设置。在使用模板创建规则时，只需要在模板基础之上，设置额外的配置即可。

阿里云文档 2025-08-22

订阅Serverless Spark工作流系统事件通知

EMR Serverless Spark已接入云监控平台，您可以通过事件订阅对重要的事件设置定制化的报警通知，让您及时了解事件的发生与进展，帮助您实时掌握事件动态，便于您在业务故障时快速分析并定位问题。

阿里云文档 2025-08-19

支持的预设的系统权限策略列表

本文描述云原生大数据计算服务 MaxCompute支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。

阿里云文档 2025-06-27

DataWorks中EMR Serverless Spark版本的用户画像分析的加工数据阶段

本文为您介绍如何用Spark SQL创建外部用户信息表ods_user_info_d_spark以及日志信息表ods_raw_log_d_spark访问存储在私有OSS中的用户与日志数据，通过DataWorks的EMR Spark SQL节点进行加工得到目标用户画像数据，阅读本文后，您可以了解如何通过Spark SQL来计算和分析已同步的数据，完成数仓简单数据加工场景。

阿里云文档 2024-11-01

支持的预设的系统权限策略列表

本文描述EMR Workbench支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。

文章 2023-12-19 来自：开发者社区

【云计算与大数据技术】分布式协同系统Chubby锁、ZooKeeper在HDFS中的使用讲解（图文解释超详细）

阿里云Kuafa RPC系统夸父(Kuafu)是飞天平台内核中负责网络通信的模块，它提供了一个 RPC 的接口 , 简化编写基于网络的分布式应用夸父的设计目标是提供高可用(7×24小时)、大吞吐量(Gigabyte)、高效率、易用(简明 API、多种协议和编程接口)的 RPC服务Hadoop IPC的应用在 Hadoop系统中,Hadoop IPC为 HDFS、MapReduce提供了高效的 ....

文章 2022-02-17 来自：开发者社区

Hadoop 大数据系统在文件存储 HDFS 版上的最佳实践

在当前的数字经济时代，数据被列为跟土地，资本等并列的新生产要素，数据的存储和处理被众多行业所深度依赖。Hadoop经过多年的发展，已经成为了事实上的开源大数据标准解决方案，被众多公司采纳和使用；而且随着技术的不断迭代更新，Hadoop生态也已经从最初狭义的HDFS，MapReduce和YARN三大服务组件，逐渐发展出了Spark，Flink等新的处理框架，成长为功能更加完善和丰富的广义Hadoo....