阿里云机器学习平台 PAI

文章 2022-07-04 来自：开发者社区

阿里云PAI DSW实例安装Python37

Step By Step1、查看默认安装python版本python --version2、查看安装的envconda info --envs3、安装python373.1 切换至清华镜像源conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/ conda config --add ....

文章 2022-06-16 来自：开发者社区

阿里云机器学习平台PAI子账号(RAM用户)使用过程中相关权限授予

1.工作空间相关权限授予工作空间（WorkSpace）:工作空间是PAI的顶层概念，为企业和团队提供统一的计算资源管理及人员权限管理能力，为AI开发者提供支持团队协作的全流程开发工具及AI资产管理能力。PAI工作空间和DataWorks工作空间在概念和实现上互通。常见问题一：子账号进入工作空间列表提示当前账号没有创建工作空间的权限由于PAI的工作空间与DataWorks的工作空间在底层是打通的，....

文章 2022-06-16 来自：开发者社区

阿里云PAI-DSW入门学习：基于官方文档训练文本分类模型

Step By Step1.购买并创建一个DSW实例2.创建成功后打开一个终端3.配置下环境直接安装tensorflow会有警告，这边按照提示改用虚拟环境4.下载Demo数据集wget http://atp-modelzoo-sh.oss-cn-shanghai.aliyuncs.com/tutorial/ez_text_classify/zqkd_sample/train.csv wget h....

文章 2022-06-12 来自：开发者社区

阿里云大数据ACP（四）机器学习 PAI 2

五、产品介绍5.1 PAI 架构5.2 PAI 功能特性5.3 PAI 的可视化5.4 PAI 支持的算法5.5 支持深度学习5.6 基本概念5.7 机器学习PAI 在线预测、离线调度六、产品应用6.1 应用流程6.2 数据预处理6.3 特征工程6.4 统计分析6.5 深度学习框架6.6 应用流程

文章 2022-06-12 来自：开发者社区

阿里云大数据ACP（四）机器学习 PAI 1

文章目录一、基础知识二、机器学习定义三、机器学习常见场景四、机器学习常见算法4.1 有监督学习4.1.1 分类模型4.1.2 回归模型4.2 无监督学习4.2.1 关联规则4.2.2 聚类模型4.3 半监督学习五、产品介绍5.1 PAI 架构5.2 PAI 功能特性5.3 PAI 的可视化5.4 PAI 支持的算法5.5 支持深度学习5.6 基本概念5.7 机器学习PAI 在线预测、离线调度六、....

文章 2022-06-09 来自：开发者社区

阿里云PAI-DSW入门学习：利用DSW访问Github

Step By Step1.购买DSW实例这里购买的是2vCpu的2.创建完成3.进入DSW实例并创建一个Terminal4.输入命令git clone https://github.com/jakevdp/PythonDataScienceHandbook.git就可以下载了5.下载完成即可看到下载文章在左侧参考链接利用PAI-DSW访问Github, 快速获取最新的学习资源

文章 2022-06-09 来自：开发者社区

阿里云PAI平台同时入选Gartner《DSML工程平台市场指南》和《多角色DSML平台市场指南》

点击查看更多相关报告Gartner市场定义：DSML工程平台由核心产品和集成产品、组件、库和框架（包括专有、合作伙伴来源和开源）的支持组合组成，用于开发和运行与典型复杂、创新和高度可扩展应用程序集成的机器学习解决方案。这些平台使用多种编程语言提供了以代码为中心的用户界面。为了提高生产率，它们还通过可视化界面和开放式API促进合成和自动化。多角色数据科学和机器学习 (DSML) 平台是一个具有凝聚....

文章 2022-05-05 来自：开发者社区

阿里云机器学习平台PAI与香港大学合作论文入选INFOCOM 2022，有效减少大规模神经网络训练时间

近日，阿里云机器学习平台 PAI 与香港大学吴川教授团队合作的论文”Efficient Pipeline Planning for Expedited Distributed DNN Training”入选 INFOCOM（IEEE International Conference on Computer Communications） 2022，论文提出了一个支持任意网络拓扑的同步流水线并行训....

文章 2022-04-27 来自：开发者社区

阿里云机器学习PAI开源中文NLP算法框架EasyNLP，助力NLP大模型落地

作者：临在、岑鸣、熊兮一导读随着 BERT、Megatron、GPT-3 等预训练模型在NLP领域取得瞩目的成果，越来越多团队投身到超大规模训练中，这使得训练模型的规模从亿级别发展到了千亿甚至万亿的规模。然而，这类超大规模的模型运用于实际场景中仍然有一些挑战。首先，模型参数量过大使得训练和推理速度过慢且部署成本极高；其次在很多实际场景中数据量不足的问题仍然制约着大模型在小样本场景中的应用，提高....

问答 2022-04-20 来自：开发者社区

为了应对当前分布式训练的挑战，阿里云机器学习PAI团队自主研发了什么训练框架？