云原生数据仓库 AnalyticDB PostgreSQL版简介实践的相关内容

文章 2024-05-27 来自：开发者社区

【LangChain系列】第十篇：数据保护简介及实践

[toc] 今天看来，数据隐私非常重要，尤其是在使用大型语言模型（LLMs）和敏感信息时。公司和个人经常需要使用私人数据，比如个人可识别信息（PII），用于他们的LLM应用程序中。然而，数据泄露和隐私侵犯的风险是一个持续的威胁，这使得实施数据保护措施变得必要。在这篇博客文章中，我们将探讨保护私人数据的解决方案，用于构建使用LLMs的问答系统。我们将深入探讨数据匿名化的概念，这涉及在将数...

文章 2024-05-25 来自：开发者社区

【LangChain系列】第九篇：LLM 应用评估简介及实践

[toc] 随着语言模型（LLMs）的不断进步，它们的应用变得越来越复杂和精密。随着这种复杂性的增加，评估这些基于LLM的应用程序的性能和准确性也变得更具挑战性。在这篇博客文章中，我们将深入探讨LLM应用评估的世界，探讨可以帮助您评估和改进模型性能的框架和工具。一、创建QA应用程序 import os fro...

文章 2024-05-24 来自：开发者社区

【LangChain系列】第八篇：文档问答简介及实践

[toc] 在机器学习和自然语言处理的快速发展中，大型语言模型是处理各种任务的非常有用的工具。其中一项引起人们极大兴趣的任务是对文档进行问答，其中 LLM 用于根据 PDF、网页或公司内部文件等文档的内容提供准确的回答。这篇博文将深入探讨使用 LLM 对文档进行问答的迷人世界，探索嵌入和向量存储等关键概念。我们还将逐步完成整个过程，并向您介绍LangChain库，该库简化了这些技术的实现。...

文章 2024-05-23 来自：开发者社区

【LangChain系列】第七篇：工作流（链）简介及实践

[toc] Langchain的核心是“链”的概念，这是一个构建块，允许您组合和编排不同的组件，以创建复杂而智能的应用程序。想象一下，您是一名数据科学家，正在从事一个尖端项目，该项目涉及处理和分析大量非结构化数据，例如客户评论、社交媒体帖子，甚至是学术论文。您的目标是从这些数据中提取见解和有价值的信息，但任务的庞大数量和复杂性可能令人生畏。使用LangChain链，您可以将这个非常复杂的任...

文章 2024-05-22 来自：开发者社区

【LangChain系列】第六篇：内存管理简介及实践

[toc] 聊天机器人和虚拟助手正变得越来越普遍，在对话中保持上下文和连续性的能力很重要。想象一下，你正在与聊天机器人进行有趣的对话，结果对方却在对话中完全忘记了上下文，不过不要害怕，LangChain的内存管理功能为您提供了支持。内存管理允许对话式 AI 应用程序保留和回忆过去的交互，从而实现无缝和连贯的对话。LangChain提供不同类型的内存类型，每种类型都是为满足特定需求和优化性能...

文章 2024-05-21 来自：开发者社区

【LangChain系列】第五篇：大语言模型中的提示词，模型及输出简介及实践

[toc] 本节我们将探索 LangChain 的内部工作原理，LangChain 是一个有用的 Python 库，可以简化使用 LLM 的过程。您将能够创建直观、可重用且可扩展的应用程序，这些应用程序可以改变您与 LLM 的交互方式。一、大语言模型（LLM）大型语言模型（LLM）是在大量...

文章 2024-05-20 来自：开发者社区

【LangChain系列】第四篇：向量数据库与嵌入简介及实践

[toc] 在这篇博文中，我们将探讨向量存储和嵌入，它们是构建聊天机器人和对数据语料库执行语义搜索的最重要组件。一、工作流回想一下检索增强生成（RAG）的整个工作流程：我们从文档开始，创建这些文档的较小拆分，为这些拆分生成嵌入，然后将它们存储在矢量存储中。向量存储是一个数据库，您可以在以后轻松查找类似的向量。二、安装设置适当的环境变量并加载我们将要处理的文档 - c...

文章 2024-05-19 来自：开发者社区

【LangChain系列】第三篇：Agent代理简介及实践

[toc] 大型语言模型（LLM）已成为能够理解和生成类似人类文本的有用 AI 系统。然而，它们的真正潜力在于它们能够充当推理引擎，处理新信息和回答复杂问题。LangChain的代理通过允许LLM与各种工具和数据库进行交互，协助推理和决策任务来释放这种潜力。在这篇博文中，我们将深入探讨LangChain的代...

文章 2024-05-16 来自：开发者社区

【LangChain系列】第二篇：文档拆分简介及实践

[toc] 在上一篇博客中，我们学习了如何使用LangChain的文档加载器将文档加载为标准格式。加载文档后，下一步是将它们拆分为更小的块。这个过程乍一看似乎很简单，但有一些微妙之处和重要的考虑因素会显着影响下游任务的性能和准确性。一、为什么文档拆分很重要文档拆分至关重要，因为它可以确保语义相关的内容在同一块中组合在一起。在回答问题或执行依赖于文档中存在的上下文信息的其他任务时，这...

文章 2024-05-15 来自：开发者社区

【LangChain系列】第一篇：文档加载简介及实践

[toc] LangChain提供了一套强大的文档加载器，简化了从PDF、网站、YouTube视频和专有数据库（如Notion）等不同来源加载和标准化数据的过程。这篇博文我们将学习LangChain的文档加载功能，涵盖了各种加载器类型、实际应用和代码示例，使你能够轻松地将数据集成到你的机器学习工作流程中。一、什么是文档加载器文档加载器是LangChain生态系统提供的基本构建块，负...