阿里云文档 2024-08-09

通过阿里云Python LLM SDK上报LLM Trace数据

阿里云自研Python LLM SDK为LLM应用提供高质量的自动埋点能力,并自动上报链路数据至可观测链路 OpenTelemetry 版。数据上报成功后,可观测链路 OpenTelemetry 版即可开始监控应用,您可以查看LLM领域的新版TraceView,更直观地分析不同操作类型的输入输出、Token消耗等信息。

阿里云文档 2024-08-09

通过阿里云Python LLM SDK上报LLM Trace数据

阿里云自研Python LLM SDK为LLM应用提供高质量的自动埋点能力,并自动上报链路数据至可观测链路 OpenTelemetry 版。数据上报成功后,可观测链路 OpenTelemetry 版即可开始监控应用,您可以查看LLM领域的新版TraceView,更直观地分析不同操作类型的输入输出、Token消耗等信息。

文章 2024-07-15 来自:开发者社区

使用阿里云服务网格高效管理LLM流量:(一)流量路由

【阅读原文】戳:使用阿里云服务网格高效管理LLM流量:(一)流量路由 人工智能领域由于大型语言模型(LLM)的出现而迎来了飞速发展。这些先进的人工智能模型能够和人类通过自然语言的方式顺畅沟通,并且具有一定的推理能力,已经完全改变了人类获取信息以及处理文本数据的方式。国内外厂商相继推出了自己的大模型服务,并且提供了适应特定行业需求的领域模型。越来越多的应用正在接入LLM。 ...

使用阿里云服务网格高效管理LLM流量:(一)流量路由
问答 2024-07-04 来自:开发者社区

使用阿里云ECS DeepGPU后,LLM微调训练场景和Stable Diffusion推理场景的性

使用阿里云ECS DeepGPU后,LLM微调训练场景和Stable Diffusion推理场景的性能有何提升?

阿里云文档 2024-07-01

通过Milvus和LangChain快速构建LLM问答系统

本文介绍如何通过整合阿里云Milvus、阿里云DashScope Embedding模型与阿里云PAI(EAS)模型服务,构建一个由LLM(大型语言模型)驱动的问题解答应用,并着重演示了如何搭建基于这些技术的RAG对话系统。

问答 2024-06-12 来自:开发者社区

在阿里云OpenAPI通过swagger的方式如何调用opensearch LLM问答版?

在阿里云OpenAPI通过swagger的方式如何调用opensearch LLM问答版?

文章 2024-05-10 来自:开发者社区

基于阿里云向量检索 Milvus 版和 LangChain 快速构建 LLM 问答系统

本文介绍如何通过整合阿里云Milvus、阿里云DashScope Embedding模型与阿里云PAI(EAS)模型服务,构建一个由LLM(大型语言模型)驱动的问题解答应用,并着重演示了如何搭建基于这些技术的RAG对话系统。 免费试用 前提条件 已创建Milvus实例。具体操作,请参见快速创建Milvus实例。 已开通PAI(EA...

基于阿里云向量检索 Milvus 版和 LangChain 快速构建 LLM 问答系统
问答 2024-01-16 来自:开发者社区

我们想在阿里云搭建 chatglm6b 的大模型服务,,LLM大语言模型大概需要什么样的ecs配置?

我们想在阿里云搭建 chatglm6b 的大模型服务,3000左右的使用人数,LLM大语言模型大概需要什么样的ecs配置?不考虑用 sass 服务。

问答 2023-12-24 来自:开发者社区

阿里云百炼xADB-PG向量引擎 llm只是个本地的数据库检索工具吗?不能联网吗?

阿里云百炼xADB-PG向量引擎 llm只是个本地的数据库检索工具吗?不能联网吗?

问答 2023-07-30 来自:开发者社区

阿里云语音AI开放搜索LLM列表怎么查看?

阿里云语音AI开放搜索LLM列表怎么查看?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

{"cardStyle":"productCardStyle","productCode":"aliyun","productCardInfo":{"productTitle":"文档智能&RAG,让你的AI大模型开启“外挂”之旅","productDescription":"本方案介绍了如何实现将文档智能和检索增强生成(RAG)结合起来构建强大的LLM知识库,包括清洗文档内容、文档内容向量化、问答内容召回后通过特定的Prompt,提供给LLM足够的上下文信息,以此来满足对于企业级文档类型知识库的问答处理。","productContentLink":"https://www.aliyun.com/solution/tech-solution/document-mind-rag-for-llm","isDisplayProductIcon":true,"productButton1":{"productButtonText":"方案详情","productButtonLink":"https://www.aliyun.com/solution/tech-solution/document-mind-rag-for-llm"},"productButton2":{"productButtonText":"一键部署","productButtonLink":"https://help.aliyun.com/document_detail/2845368.html"},"productButton3":{"productButtonText":"查看更多技术解决方案","productButtonLink":"https://www.aliyun.com/solution/tech-solution/"},"productPromotionInfoBlock":[{"$id":"0","productPromotionGroupingTitle":"解决方案推荐","productPromotionInfoFirstText":"10分钟在网站上增加一个 AI 助手","productPromotionInfoFirstLink":"https://www.aliyun.com/solution/tech-solution/add-an-ai-assistant-to-your-website-in-10-minutes","productPromotionInfoSecondText":"10 分钟构建 AI 客服并应用到网站、钉钉或微信中","productPromotionInfoSecondLink":"https://www.aliyun.com/solution/tech-solution/build-a-chatbot-for-your-website-or-chat-system"}],"isOfficialLogo":false},"activityCardInfo":{"activityTitle":"","activityDescription":"","cardContentBackgroundMode":"LightMode","activityContentBackgroundImageLink":"","activityCardBottomInfoSelect":"activityPromotionInfoBlock"}}