问答 2023-11-29 来自:开发者社区

在ModelScope中,部署在EAS上,在线调试不知道模型对应如参数是什么

麻烦老师帮忙看一下,部署在EAS上,在线调试不知道模型对应如参数是什么,日志报错如下:这中有什么解决办法吗,请求就用的是下面这个串

问答 2023-11-29 来自:开发者社区

在ModelScope中,类似创空间部署模型一样 怎么部署本地模型

请教下 类似创空间部署模型一样 怎么部署本地模型 https://modelscope.cn/studios/OrionStarAI/OrionStar-Yi-34B-Chat/file/view/master/app.py

问答 2023-11-29 来自:开发者社区

EAS 部署ModelScope模型调试碰到一点问题,这 input 格式是什么?

EAS 部署ModelScope模型调试碰到一点问题,这 input 格式是什么?

问答 2023-11-29 来自:开发者社区

在ModelScope中,若是想长期部署的话合适的GPU费用怎么计算?

我希望在创空间部署一个微调后的大模型应用,模型权重等已经上传到魔塔了。推理部分需要17G显存,请问若是想长期部署的话合适的GPU费用怎么计算?

问答 2023-11-29 来自:开发者社区

在ModelScope中,有人用gradio把模型部署到创空间的时候遇到过这种问题吗?

有人用gradio把模型部署到创空间的时候遇到过这种问题吗?在本地调试的时候无法生成公网URL,在local页面调试不会报错,但是一直不会出结果,等半小时也不行。又因为创空间更新app.py文件要审核几分钟,导致现在代码调试没发进行了。设置share=True了,但是无法创建share link。有人遇到同样的情况,但我按照他的解决方案做了还是不行

问答 2023-11-19 来自:开发者社区

如何在modelscope中的notebook部署motinagent

在notebook中怎么部署motinagent,文档里面介绍的无法运行

问答 2023-11-16 来自:开发者社区

ModelScope我的想法是,用docker部署方便快捷?

ModelScope我的想法是,1. 用docker部署方便快捷,2.映射模型文件目录,在宿主机下载模型,比如Qwen-14B-Chat 3.使用自定义的数据训练这个模型 4.通过http访问api接口进行远程对话或训练 。 主要是相关文档资料不好找

文章 2023-11-15 来自:开发者社区

ModelScope部署到trt-llm

是的,ModelScope支持将模型部署到TRT-LLM (TensorRT Large Language Model) 上。TensorRT是一种高性能的深度学习推理优化器和运行时,它可以优化经过训练的神经网络模型以更快的速度运行在多种平台上,包括嵌入式设备和数据中心。千问大模型是由阿里云开发的一种大规模预训练语言模型,其中包含了大量的训...

问答 2023-11-15 来自:开发者社区

请问ModelScope内部版本ODPS UDF,提交部署的任务如何更新或下线?

请问ModelScope内部版本ODPS UDF,提交部署的任务如何更新或下线?

问答 2023-11-15 来自:开发者社区

ModelScope如果有最新的 linux 部署文档,麻烦发到群文件里面哦?

ModelScope如果有最新的 linux 部署文档,麻烦发到群文件里面哦?着急用一下

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐