分区表概述
分区表是指拥有分区空间的表，即将表数据按照某个列或多个列进行划分，从而使表中的数据分散存储在不同的物理位置上。合理设计和使用分区，可以提高查询性能、简化数据管理，同时支持更灵活的数据访问与操作。
使用Schemaless Query方式读取湖上Parquet数据
本文以E-MapReduce的Serverless Spark集群为例，为您介绍在MaxCompute中如何使用Schemaless Query的方式读取Spark SQL生成的Parquet文件，并在计算完成后将结果通过UNLOAD命令传回至OSS。
"Flink+Paimon：阿里云大数据云原生运维数仓的创新实践，引领实时数据处理新纪元"
随着大数据产品云原生化的加速推进，云原生集群的规模和数量急剧增加，这给运维工作带来了前所未有的挑战。为了有效应对这些挑战，阿里云大数据团队结合Apache Flink与自研的Paimon数据湖解决方案，构建了一套实时云原生运维数仓，显著提升了运维能力和数据处理的实时性。本文将通过实际案例分析，详细阐述Flink&...
Flink+Paimon在阿里云大数据云原生运维数仓的实践
1. 背景 随着大数据产品云原生化的推进，云原生集群的规模和数量都在增加，云原生集群的运维难度也在不断增加，云原生集群的资源审计、资源拓扑、资源趋势的需要就比较迫切。云原生集群的资源审计主要是 node 资源、pod 资源，如当前集群的 node 数量以及Pod 数量；资源拓扑主要构建用户->实例->pod->node->集群的关联关系，例如一个公有云用户，提供给运维团.....
软件开发的未来已来：大数据、AI和云原生的终极融合如何引爆市场
大数据、人工智能（AI）和云原生技术的终极融合正在软件开发领域引发巨大的变革和市场机遇。这个融合的未来已经来临，并将引爆市场的原因如下：1. 智能化应用程序的崛起随着AI技术的不断进步，开发者可以轻松地将机器学习和深度学习模型集成到应用程序中，从而为用户提供更智能的体验。这种融合使得智能化应用程序，如智能推荐系统、自然语言处理应用、计算机视觉应用等，成为可能。这些应用可以更好地理解用户需求、自动....
大数据、AI和云原生：引领未来软件开发的技术演进
大数据、人工智能（AI）和云原生技术的共同发展正引领着未来软件开发的技术演进。它们为软件开发带来了新的维度和机遇，推动着创新、智能和高效的软件应用的发展。以下是它们在未来软件开发中的技术演进的关键方面：1. 数据驱动的创新：大数据的发展使得软件可以从海量数据中挖掘洞察，发现模式和趋势。AI技术可以对这些数据进行分析和学习，从而提供更智能、个性化的服务。在未来，软件开发将越来越注重数据的价值，基于....
米哈游大数据云原生实践
在刚刚结束的 2023 云栖大会上，米哈游数据平台组大数据技术专家杜安明分享了米哈游大数据架构向云原生化升级过程中的目标、探索和实践，以及如何通过以阿里云容器服务 ACK 为底座的 Spark on K8s 架构，获得在弹性计算、成本节约以及存算分离方面的价值。1. 背景简介随着米哈游业务的高速发展，大数据离线数据存储量和计算任务量增长迅速，早期的大数据离线架构已不再满足新场景和需求。为了解决原....
本页面内关键词为智能算法引擎基于机器学习所生成，如有任何问题，可在页面下方点击"联系我们"与我们沟通。
阿里云云原生
关注云原生中间件、微服务、Serverless、容器、Service Mesh等技术领域、聚焦云原生技术趋势、云原生大规模的落地实践
+关注