问答 2024-07-23 来自:开发者社区

大模型可以私有化部署到自己的服务器上吗?

大模型可以私有化部署到自己的服务器上吗?

问答 2024-07-09 来自:开发者社区

魔塔ModelScope社区搭建大模型需要准备一台gpu服务器吗?

魔塔ModelScope社区搭建大模型需要准备一台gpu服务器吗?

问答 2024-05-22 来自:开发者社区

函数计算部署的大模型能跟服务器交互吗?

函数计算部署的大模型能跟服务器交互吗?

文章 2024-05-16 来自:开发者社区

社区供稿 | Yuan2.0千亿大模型在通用服务器上的高效推理实现:以NF8260G7服务器为例

引言 近日,浪潮信息联合Intel在IPF大会上发布了可运行千亿参数大模型的AI通用服务器,首次实现了单机通用服务器,即可运行千亿参数大模型。并在发布现场演示了基于NF8260G7服务器进行yuan2.0-102B模型在代码编写、逻辑推理等高难度问题上的实时推理效果,引起了业界广泛的关注。本文将详细解读yuan2.0-102B模型在NF8260G7服务器上进行高效实时...

社区供稿 | Yuan2.0千亿大模型在通用服务器上的高效推理实现:以NF8260G7服务器为例
文章 2023-07-27 来自:开发者社区

科技云报道:大模型的火烧到了AI服务器上

科技云报道原创。 大模型的纷争已经随着各大入局者公布产品后,热度逐渐退去,但是由大模型带来的产业链高频共振,已经传递了算力层。 表现最为激烈的,就是AI服务器市场。大模型带来的算力需求,直接引发了一波AI服务器抢购潮和涨价潮。 据《证券时报》报道,一家检测企业透露,他们在去年6月购买的8台AI服务器到今年三月已经涨价到130万每台,到现在价格飙升至160万每台。不到一年的时间,价格涨幅...

科技云报道:大模型的火烧到了AI服务器上

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐