AI 助理
备案控制台
文章 2024-11-05 来自：开发者社区

阿里云MaxCompute-XGBoost on Spark 极限梯度提升算法的分布式训练与模型持久化oss的实现与代码浅析

1. XGBoost简介 XGBoost是一个优化的分布式梯度增强库，旨在实现高效，灵活和便携。它在GBDT框架的基础上实现机器学习算法。XGBoost提供了并行树提升（也称为GBDT，GBM），可以快速准确地解决许多数据科学问题。XGBoost最初是一个研究项目，孵化于Distributed (Deep) Machine Learning Community (DMLC) ，由陈天奇博...

阿里云MaxCompute-XGBoost on Spark 极限梯度提升算法的分布式训练与模型持久化oss的实现与代码浅析
文章 2020-05-12 来自：开发者社区

5月14日Apache Spark中国社区技术直播【Analytics Zoo上的分布式TensorFlow训练AI玩FIFA足球游戏】

主题： Analytics Zoo上的分布式TensorFlow训练AI玩FIFA足球游戏 时间： 2020.5.14 19：00 参与方式： 扫描下方海报二维码加入钉钉群或者届时点击直播间直接观看（回看链接） https://developer.aliyun.com/live/2802 讲师介绍： 喻杉，Intel大数据分析团队机器学习工程师。她目前专注于在analytics-zoo大数据和人....

5月14日Apache Spark中国社区技术直播【Analytics Zoo上的分布式TensorFlow训练AI玩FIFA足球游戏】
问答 2019-01-22 来自：开发者社区

spark dataset的每个分区如何调用不同的模型进行训练或者预测

model.fit 或者 model.transform 的入参都是dataset

文章 2017-11-14 来自：开发者社区

Spark Mllib里如何将trainDara训练数据的分类特征字段转换为数值字段（图文详解）

   　　字段3 是分类特征字段，但是呢，在分类算法里不能直接用。所以，必须要转换为数值字段才能够被分类算法使用。 本文转自大数据躺过的坑博客园博客，原文链接：http://www.cnblogs.com/zlslch/p/7450754.html，如需转载请自行联系原作者

Spark Mllib里如何将trainDara训练数据的分类特征字段转换为数值字段（图文详解）
文章 2017-11-12 来自：开发者社区

Spark Mllib里如何将trainDara训练数据文件里提取第M到第N字段（图文详解）

                            　 本文转自大数据躺过的坑博客园博客，原文链接：http://www.cnblogs.com/zlslch/p/7450591.html，如需转载请自行联系原作者

Spark Mllib里如何将trainDara训练数据文件里提取第M到第N字段（图文详解）
文章 2017-11-08 来自：开发者社区

Spark技术在京东智能供应链预测的应用——按照业务进行划分，然后利用scikit learn进行单机训练并预测

3.3 Spark在预测核心层的应用 我们使用Spark SQL和Spark RDD相结合的方式来编写程序，对于一般的数据处理，我们使用Spark的方式与其他无异，但是对于模型训练、预测这些需要调用算法接口的逻辑就需要考虑一下并行化的问题了。我们平均一个训练任务在一天处理的数据量大约在500G左右，虽然数据规模不是特别的庞大，但是Python算法包提供的算法都是单进程执行。我们计算过，如果使用一....

文章 2017-11-01 来自：开发者社区

Spark Mllib里如何将trainDara训练数据文件里第一行是字段名不是数据给删除掉（图文详解）

              本文转自大数据躺过的坑博客园博客，原文链接：http://www.cnblogs.com/zlslch/p/7450524.html，如需转载请自行联系原作者

Spark Mllib里如何将trainDara训练数据文件里第一行是字段名不是数据给删除掉（图文详解）

本页面内关键词为智能算法引擎基于机器学习所生成，如有任何问题，可在页面下方点击"联系我们"与我们沟通。

apache spark您可能感兴趣

Apache Spark 中国技术社区

阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区，定期推送精彩案例，问答区数个 Spark 技术同学每日在线答疑，只为营造 Spark 技术交流氛围，欢迎加入！

+关注