数据平台Apache 的相关内容

阿里云文档 2024-12-23

使用Livy Operator提交任务

Apache Airflow是一个强大的工作流程自动化和调度工具，它允许开发者编排、计划和监控数据管道的执行。EMR Serverless Spark为处理大规模数据处理任务提供了一个无服务器计算环境。本文为您介绍如何通过Apache Airflow的Livy Operator实现自动化地向EMR Serverless Spark提交任务，以实现任务调度和执行的自动化，帮助您更有效地管理数据处理任...

阿里云文档 2024-12-06

通过Apache Airflow向EMR Severless Spark提交任务

Apache Airflow是一个强大的工作流程自动化和调度工具，它允许开发者编排、计划和监控数据管道的执行。EMR Serverless Spark为处理大规模数据处理任务提供了一个无服务器计算环境。本文为您介绍如何通过Apache Airflow实现自动化地向EMR Serverless Spark提交任务，以实现作业调度和执行的自动化，帮助您更有效地管理数据处理任务。

文章 2024-11-29 来自：开发者社区

Cisco WebEx 数据平台：统一 Trino、Pinot、Iceberg 及 Kyuubi，探索 Apache Doris 在 Cisco 的改造实践

WebEx 是 Cisco 推出的远程、实时的网络会议平台。全球财富 500 强公司中约有 95% 的公司采用 WebEx 来作为视频会议工具，日均会议次数突破 150 万次，全球业务市场超过 160 个。随着市场规模的扩大及使用者持续增加，亟需一个数据平台提供全面的数据及处理分析，以支持故障排查、批量和实时的分析、BI 和大模型的应用、可观测性与数据治理等需求。在此背景下，WebEx 数据平....

阿里云文档 2024-05-06

Apache Hadoop FileUtil.unTar命令注入漏洞

2022年8月4日，Apache Hadoop官方披露修复了一个Shell命令注入漏洞CVE-2022-25168。由于Apache Hadoop的FileUtil.unTar API在传递Shell之前未对输入的文件名进行转义，攻击者可以利用该漏洞注入任意命令，从而对集群造成破坏。

阿里云文档 2024-03-22

Apache Kafka Connect远程代码执行漏洞

2023年02月08日，Apache发布了一则安全公告，修复了Apache Kafka中存在的一个反序列化漏洞，漏洞编号为CVE-2023-25194。在攻击者可以控制Apache Kafka Connect客户端的情况下，通过SASL JAAS配置和基于SASL的安全协议，在其上创建或修改连接器，从而触发JNDI代码执行漏洞。

阿里云文档 2023-11-03

如何使用ApacheHDFS透明缓存加速_EMR on ECS_开源大数据平台 E-MapReduce(EMR)

Apache HDFS透明缓存加速可以利用计算集群的闲置存储资源对远端HDFS集群进行数据缓存，避免了计算集群或服务占用核心集群过多带宽。当HDFS集群和计算集群分离，HDFS集群访问性能不及预期时，您可以通过在计算集群或靠近计算集群的地方缓存数据来进行加速。

问答 2022-12-07 来自：开发者社区

开源大数据平台Apache Hadoop FileUtil.unTar命令注入漏洞如何处理

文章 2019-01-09 来自：开发者社区

阿里云ECS构建大数据平台实践-基于Apache Hadoop

0. 项目背景基于阿里云ECS云服务器进行搭建私有的大数据平台，采用Apache Hadoop生态，为大数据提供存储及处理。 1. 购买ECS云服务器实例在这里，因为实验需要3个节点，所以我们购买3台ECS实例。 2. 远程登录服务器，进行基础环境的配置。 # 工欲善其事，必先利其器 # 前提准备 # 安装系统命令 yum -y install wget vim ntpdate net-...

共有8条

< 1 >

跳转至： GO

更新时间 2024-11-30 16:37:50

本页面内关键词为智能算法引擎基于机器学习所生成，如有任何问题，可在页面下方点击"联系我们"与我们沟通。

Apache您可能感兴趣

产品推荐

{"optioninfo":{"dynamic":"ture","static":"true"},"simplifiedDisplay":"newEdition","newCard":[{"ifIcon":"img","link":"https://www.aliyun.com/product/selectdb","icon":"云数据库 SelectDB 版","iconImg":"https://img.alicdn.com/imgextra/i4/O1CN01HTbnvZ1zYYlhbjXKj_!!6000000006726-0-tps-200-200.jpg","contentLink":"https://www.aliyun.com/product/selectdb","title":"云数据库 SelectDB 版","des":" 阿里云全托管 SelectDB 实时数仓服务，100%兼容 Apache Doris。广泛应用于实时报表分析、即席多维分析、日志检索分析、数据联邦与查询加速等场景，为客户提供极致性能、简单易用的数据分析服务。","link1":"https://common-buy.aliyun.com/?commodityCode=selectdb_pre_public_cn","btn1":"立即购买","link2":"https://help.aliyun.com/product/2503500.html","btn2":"产品文档","btn3":"管理控制台","link3":"https://selectdb.console.aliyun.com/cn-hangzhou/basic-list","infoGroup":[{"infoName":"热门活动","infoContent":{"firstContentLink":"https://www.aliyun.com/activity/database/bestoffers","firstContentName":"新用户首月享0.5折","lastContentName":"","lastContentLink":""}},{"infoName":"快速入门","infoContent":{"firstContentName":"实例连接","firstContentLink":"https://help.aliyun.com/document_detail/2504486.html","lastContentName":"集群启停","lastContentLink":"https://help.aliyun.com/document_detail/2504481.htm"}},{"infoName":"最新动态","infoContent":{"firstContentName":" 3.0版发布 ","firstContentLink":"https://help.aliyun.com/document_detail/2504504.html","lastContentName":"2.4版发布","lastContentLink":"https://help.aliyun.com/document_detail/2504504.html?#8c23772040k3g"}},{"infoName":"热门产品","infoContent":{"firstContentName":"云数据库ClickHouse 版","firstContentLink":"https://www.aliyun.com/product/apsaradb/clickhouse"}}]}],"card":[],"search":[],"infoCard":[{"bannerUrl":"https://img.alicdn.com/tfs/TB1Xf81a3gP7K4jSZFqXXamhVXa-5169-974.jpg","bannerTitle":"mPaaS 小程序","bannerContent":"源自于支付宝小程序框架，亿级线上业务体量的锤炼，安全性媲美支付宝原生能力。<br>不仅面向自有 App 投放小程序，更可快速构建打包，覆盖支付宝、淘宝、钉钉等应用。","liveButtonName":"查看详情","liveButtonLink":"https://www.aliyun.com/product/mobilepaas/mpaas-miniprogram","contentTitle":"提供即开即用的端上体验","homePageLink":"https://common-buy.aliyun.com/?spm=5176.14673561.J_8751524360.2.56702709BussF3&commodityCode=mpaas_beta#/open","homePageName":"免费试用","linkGroup":[{"linkContent":"发布包大小极致优化，节省流量和存储。"},{"linkContent":"服务迭代不再受发版限制，快速发布，快速迭代。"},{"linkContent":"业务开发效率更加优秀，一次开发，多端运行。"}]}],"title":{"mainTitle":"","subtitle":"","linkUrl":"https://www.aliyun.com/product/selectdb","btnText":"查看详情"},"visual":{"topbg":"https://img.alicdn.com/tfs/TB1bQuBIYH1gK0jSZFwXXc7aXXa-3840-740.gif","icon":"","textColor":"dark"},"dataList":[{"summary":"阿里云数据库 SelectDB 版内核 Apache Doris 2.0 如何实现导入性能提升 2-8 倍","author":"selectdb技术","linksUrl":"https://developer.aliyun.com/article/1323178"},{"summary":"Apache Doris 巨大飞跃：存算分离新架构","author":"selectdb技术","linksUrl":"https://developer.aliyun.com/article/1308283"}],"sceneCard":[],"txt":[]}

{"$env":{"JSON":{}},"$page":{"env":"production"},"$context":{"optioninfo":{"dynamic":"ture","static":"true"},"simplifiedDisplay":"newEdition","newCard":[{"ifIcon":"img","link":"https://www.aliyun.com/product/selectdb","icon":"云数据库 SelectDB 版","iconImg":"https://img.alicdn.com/imgextra/i4/O1CN01HTbnvZ1zYYlhbjXKj_!!6000000006726-0-tps-200-200.jpg","contentLink":"https://www.aliyun.com/product/selectdb","title":"云数据库 SelectDB 版","des":" 阿里云全托管 SelectDB 实时数仓服务，100%兼容 Apache Doris。广泛应用于实时报表分析、即席多维分析、日志检索分析、数据联邦与查询加速等场景，为客户提供极致性能、简单易用的数据分析服务。","link1":"https://common-buy.aliyun.com/?commodityCode=selectdb_pre_public_cn","btn1":"立即购买","link2":"https://help.aliyun.com/product/2503500.html","btn2":"产品文档","btn3":"管理控制台","link3":"https://selectdb.console.aliyun.com/cn-hangzhou/basic-list","infoGroup":[{"infoName":"热门活动","infoContent":{"firstContentLink":"https://www.aliyun.com/activity/database/bestoffers","firstContentName":"新用户首月享0.5折","lastContentName":"","lastContentLink":""}},{"infoName":"快速入门","infoContent":{"firstContentName":"实例连接","firstContentLink":"https://help.aliyun.com/document_detail/2504486.html","lastContentName":"集群启停","lastContentLink":"https://help.aliyun.com/document_detail/2504481.htm"}},{"infoName":"最新动态","infoContent":{"firstContentName":" 3.0版发布 ","firstContentLink":"https://help.aliyun.com/document_detail/2504504.html","lastContentName":"2.4版发布","lastContentLink":"https://help.aliyun.com/document_detail/2504504.html?#8c23772040k3g"}},{"infoName":"热门产品","infoContent":{"firstContentName":"云数据库ClickHouse 版","firstContentLink":"https://www.aliyun.com/product/apsaradb/clickhouse"}}]}],"card":[],"search":[],"infoCard":[{"bannerUrl":"https://img.alicdn.com/tfs/TB1Xf81a3gP7K4jSZFqXXamhVXa-5169-974.jpg","bannerTitle":"mPaaS 小程序","bannerContent":"源自于支付宝小程序框架，亿级线上业务体量的锤炼，安全性媲美支付宝原生能力。<br>不仅面向自有 App 投放小程序，更可快速构建打包，覆盖支付宝、淘宝、钉钉等应用。","liveButtonName":"查看详情","liveButtonLink":"https://www.aliyun.com/product/mobilepaas/mpaas-miniprogram","contentTitle":"提供即开即用的端上体验","homePageLink":"https://common-buy.aliyun.com/?spm=5176.14673561.J_8751524360.2.56702709BussF3&commodityCode=mpaas_beta#/open","homePageName":"免费试用","linkGroup":[{"linkContent":"发布包大小极致优化，节省流量和存储。"},{"linkContent":"服务迭代不再受发版限制，快速发布，快速迭代。"},{"linkContent":"业务开发效率更加优秀，一次开发，多端运行。"}]}],"title":{"mainTitle":"","subtitle":"","linkUrl":"https://www.aliyun.com/product/selectdb","btnText":"查看详情"},"visual":{"topbg":"https://img.alicdn.com/tfs/TB1bQuBIYH1gK0jSZFwXXc7aXXa-3840-740.gif","icon":"","textColor":"dark"},"dataList":[{"summary":"阿里云数据库 SelectDB 版内核 Apache Doris 2.0 如何实现导入性能提升 2-8 倍","author":"selectdb技术","linksUrl":"https://developer.aliyun.com/article/1323178"},{"summary":"Apache Doris 巨大飞跃：存算分离新架构","author":"selectdb技术","linksUrl":"https://developer.aliyun.com/article/1308283"}],"sceneCard":[],"txt":[]}}

云数据库 SelectDB 版

阿里云全托管 SelectDB 实时数仓服务，100%兼容 Apache Doris。广泛应用于实时报表分析、即席多维分析、日志检索分析、数据联邦与查询加速等场景，为客户提供极致性能、简单易用的数据分析服务。

立即购买

产品文档

管理控制台

热门活动

新用户首月享0.5折

快速入门

实例连接

集群启停