云原生大数据计算服务 MaxCompute k8s 的相关内容

文章 2024-06-12 来自：开发者社区

大数据之spark on k8s

大数据之spark on k8s spark on k8s架构解析 1.k8s的优点 k8s是一个开源的容器集群管理系统，可以实现容器集群的自动化部署、自动扩缩容、维护等功能。 1、故障迁移 2、资源调度 3、资源隔离 4、负载均衡 5、跨平台部署 2.k8s集群架构 ...

问答 2023-06-11 来自：开发者社区

Flink中现在大数据组件，用docker部署 k8s管理的场景多不多，比如计算flink ？

Flink中现在大数据组件，用docker部署 k8s管理的场景多不多，比如计算flink spark 调度yarn 中间件kafka zk 存储clickhouse es mysql 我理解存储或者网络IO重的组件不放在docker，因为性能比较差其他可以都放？

文章 2022-02-17 来自：开发者社区

邀您参与 | 阿里巴巴如何扩展 K8s 调度器支持 AI 和大数据任务？

随着 Kubernetes 的广泛应用，越来越多的开发人员尝试使用 Kubernetes 运行和管理 Web 应用和微服务以外的工作负载。典型场景包括深度学习任务，高性能计算作业，基因计算工作流，甚至是传统的大数据处理任务。围绕 Kubernetes 容器平台，统一管理各种异构算力资源，高效调度AI、大数据、高性能计算任务，已然成为云原生技术带来变革的领域之一。阿里云容器服务团队结合多年 .....

文章 2021-12-31 来自：开发者社区

给 K8s 装上大数据调度引擎：伏羲架构升级 K8s 统一调度

作者 | 冯亦挥引言基于 K8s 的统一调度是阿里集团的核心项目，随着2021年双十一落下帷幕，这个历时一年多，汇集了蚂蚁、电商、搜索、计算平台等几大调度团队的联合项目在生产场景得到了终极验证。作为统一调度项目的核心团队，伏羲成功地将 MaxCompute 弹内几万台机器、数百万核计算资源接入了统一调度系统，全程对业务和用户完全无感，无一故障，无一破线，完美实现了“飞行中更换引擎”的目标。统一调....

问答 2021-12-25 来自：开发者社区

大数据平台为什么不推荐采用k8s作为计算集群控制？

1、大数据平台为什么不推荐采用k8s作为计算集群控制？为什么？ 2、K8S容器和yarn容器区别是什么？

问答 2020-05-06 来自：开发者社区

要在云服务平台快速搭建一套大数据服务平台，该具备哪些最基本的软件环境，有没有类似k8s的快速部署容器

文章 2019-04-11 来自：开发者社区

Hadoop大数据平台实战(05)：深入Spark Cluster集群模式YARN vs Mesos vs Standalone vs K8s

Spark可以以分布式集群架构模式运行，如果我们不熟Spark Cluster，这个时候需要集群管理器帮助我们管理Spark 集群。集群管理器根据需要为所有工作节点提供资源，操作所有节点。负责管理和协调集群节点的程序一般叫做：Cluster Manager，集群管理器。目前搭建Spark 集群，可以的选择包括Standalone，YARN，Mesos，K8s，这么多工具，在部署Spark集群时....

共有7条

< 1 >

跳转至： GO

更新时间 2024-06-14 03:56:13

本页面内关键词为智能算法引擎基于机器学习所生成，如有任何问题，可在页面下方点击"联系我们"与我们沟通。

云原生大数据计算服务 MaxComputek8s相关内容

k8s云原生大数据计算服务 MaxCompute

云原生大数据计算服务 MaxCompute您可能感兴趣

产品推荐

热门帮助文档

阿里巴巴大数据计算

阿里大数据官方技术圈

+关注

热门技术解决方案

挖掘及触达高价值用户

本方案使用阿里云机器学习平台 PAI 的强大算法能力，通过对用户数据的计算和预测，辅助客户对人群营销决策的判断，在用户召回，流失预测，高价值用户寻找等多个运营场景，帮助客户降低成本，提高效率，客户可通过短信的方式触达用户，完成营销触达的全链路操作。

了解更多