阿里云文档 2024-06-07

EMR Serverless StarRocks产品架构介绍

本文为您介绍EMR Serverless StarRocks的架构。

阿里云文档 2024-05-23

数据查询DQL和数据操作DML的架构设计核心要点

为了方便用户操作Delta Table,MaxCompute计算引擎对SQL全套的数据查询DQL语法和数据操作DML语法进行了支持,并且SQL引擎内核模块包括Compiler、Optimizer、Runtime等都做了专门适配开发以支持相关功能和优化。本文为您介绍数据查询DQL和数据操作DML的架构设计核心要点。

SQL调优与架构优化

10 课时 |
61 人已学 |
免费

容器应用的高弹性架构

3 课时 |
32 人已学 |
免费

容器应用的高弹性架构

9 课时 |
349 人已学 |
免费
开发者课程背景图
阿里云文档 2024-05-22

基于Delta Table构建近实时增全量一体化链路实践

面对当前日益复杂且对数据时效性要求极高的近实时业务场景,MaxCompute基于Delta Table推出了集大规模存储、高效批量处理和近实时能力于一体的近实时增量一体化架构。本文为您介绍该架构的工作原理及其优势。

阿里云文档 2024-05-22

高并发近实时增量写入场景的架构设计的基本概念

数据流入Delta Table主要存在近实时增量写入和批量写入两种场景,本文为您介绍高并发近实时增量写入场景的架构设计。

阿里云文档 2024-05-22

什么是Delta Table,有哪些基本概念

Delta Table的增量存储和处理架构的特殊设计主要集中在五个模块:数据接入、计算引擎、数据优化服务、元数据管理、数据文件组织,其他部分与MaxCompute通用的架构一致。本文为您介绍Delta Table的核心架构要点。

文章 2023-06-30 来自:开发者社区

大数据数据存储的分布式文件系统的HDFS的基本概念和架构的平台主要特点的大数据量支持

Hdfs 中可以支持数据块的大小可以达到数百 GB,从而可以支持大数据量的存储和处理。 Hdfs 中的集群可以根据需要进行水平扩展,从而可以支持更高的数据量。 Hdfs 中的数据备份和恢复机制可以保证数据的安全性和完整性。 在下一篇博客中,我们将进一步介绍HDFS的基本概念和架构的平台主要特点的大数据量支持,希望大家能够继续关注。

文章 2023-06-29 来自:开发者社区

大数据数据存储的分布式文件系统的HDFS的基本概念和架构的平台主要特点的高吞吐量

Hdfs 中使用了多种技术和组件来提高数据的吞吐量,如文件的分布式存储、数据块的分配、节点的监控和故障转移等。 Hdfs 中的集群可以根据需要进行水平扩展,从而提高数据的吞吐量。 Hdfs 中的数据备份和恢复机制可以保证数据的安全性和完整性。 在下一篇博客中,我们将进一步介绍HDFS的基本概念和架构的平台主要特点的高吞吐量,希望大家能够继续...

文章 2023-06-29 来自:开发者社区

大数据数据存储的分布式文件系统的HDFS的基本概念和架构的平台主要特点的高容错

Hdfs 中使用了多种技术和组件来保证数据的可靠性和可用性,如元数据的管理、数据块的分配、节点的监控和故障转移等。 Hdfs 中的集群可以根据需要进行水平扩展,从而提高数据的可用性和可靠性。 Hdfs 中的数据备份和恢复机制可以保证数据的安全性和完整性。 在下一篇博客中,我们将进一步介绍HDFS的基本概念和架构的平台主要特点的高容错,希望大...

文章 2023-06-29 来自:开发者社区

大数据数据存储的分布式文件系统的HDFS的基本概念和架构的基本架构的DataNode

DataNode 中存储了数据块中的数据,并将其与元数据中的信息进行匹配。 DataNode 可以将数据块中的数据以数据流的形式存储到本地的磁盘上,从而实现数据的快速读取和写入。 DataNode 中还可以将数据块中的数据以块的形式存储到集群中的其他节点上,从而实现数据的分布式存储。 在下一篇博客中,我们将进一步介绍HDFS的基本概念和架构...

文章 2023-06-28 来自:开发者社区

大数据数据存储的分布式文件系统的HDFS的基本概念和架构的基本架构的NameNode

NameNode 中存储了集群中所有的文件和目录的元数据,包括文件名、路径、大小、创建时间等。 NameNode 可以根据文件的名称和路径来定位文件的位置,并将其与元数据中的信息进行匹配。 NameNode 中还存储了集群中所有的数据块的元数据,包括数据块的位置、大小、创建时间等。 在下一篇博客中,我们将进一步介绍HDFS的基本概念和架构的...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

金融级分布式架构

SOFAStack™(Scalable Open Financial Architecture Stack)是一套用于快速构建金融级分布式架构的中间件,也是在金融场景里锤炼出来的最佳实践。

+关注