1. 项目价值：敏感词的“克星”
在这个信息爆炸的时代，敏感词就像一群“隐形的小怪兽”，潜伏在文本的每个角落，稍不留神就会引发一场“灾难”。无论是社交平台的评论，还是企业内部的文档，敏感词的检测和脱敏都成了刚需。
谛听（Diting） ，一个基于 Spring Boot 的敏感词识别组件，正是为了解决这个问题而生！它不仅能高效识别敏感词，还能灵活脱敏，让你的系统从此告别“敏感危机”。
为什么我们需要谛听？
- 合规性要求：无论是 GDPR、CCPA，还是国内的网络安全法，都对敏感数据的处理提出了严格要求。谛听可以帮助你轻松应对这些合规性挑战。
- 用户体验：用户不希望看到满屏的“***”，也不希望因为误判而无法发布内容。谛听的精准检测和灵活脱敏，能够提升用户体验。
- 系统安全：敏感数据泄露可能会引发严重的安全问题。谛听的全局 API 出参拦截和日志脱敏功能，能够有效防止敏感数据泄露。
2. 为什么要做这个项目？
想象一下，你正在开发一个社交平台，用户发布的每一条内容都需要经过敏感词检测。如果检测不准确，可能会引发用户投诉；如果检测太慢，用户体验又会大打折扣。这时候，你需要一个高效、灵活、易用的敏感词识别工具。
谛听的诞生，就是为了让你不再为这些问题头疼！它不仅能帮你快速识别敏感词，还能通过动态生成变体、异步调用大模型等黑科技，让你的系统更加智能和安全。
谛听的独特之处：
- 动态生成变体：传统的敏感词库需要手动维护，费时费力。谛听通过动态生成拼音、形近字、编辑距离等变体，大大减少了维护成本。
- 异步大模型识别：大模型的识别能力强大，但调用成本高。谛听通过异步调用大模型，既保证了识别的准确性，又避免了对系统性能的影响。
- 全局 API 出参拦截：自动拦截 API 返回值，脱敏敏感字段，让你的数据更安全。
- 日志脱敏：告别日志中的敏感信息泄露，让你的系统更合规。
3. 功能亮点：谛听的“超能力”
-
多数据源支持：无论是 MySQL、Redis，还是 JSON、TXT，谛听都能轻松接入，让你告别数据孤岛。
- MySQL：直接从数据库中读取敏感词库。
- Redis：利用 Redis 的高性能，快速加载敏感词库。
- JSON/TXT：支持本地文件加载，方便快捷。
-
动态生成变体：拼音、形近字、编辑距离……谛听能动态生成敏感词变体，减少你的维护成本。
- 拼音匹配：将敏感词和文本都转换为拼音，进行匹配。
- 形近字匹配：使用形近字库，将敏感词扩展为形近字集合，进行匹配。
- 编辑距离：通过计算编辑距离，识别敏感词的变体。
-
异步大模型识别：调用大模型进行敏感数据识别，结果通过事件驱动模型返回，让你的系统更智能。
- 异步调用：避免阻塞主线程，提升系统性能。
- 事件驱动：通过 Spring 事件机制，方便用户处理识别结果。
-
全局 API 出参拦截：自动拦截 API 返回值，脱敏敏感字段，让你的数据更安全。
- AOP 切面：通过 Spring AOP 拦截 API 返回值。
- 自定义脱敏策略：支持多种脱敏策略，如字符替换、正则替换等。
-
日志脱敏：告别日志中的敏感信息泄露，让你的系统更合规。
- 日志拦截：通过日志框架的拦截器，脱敏敏感字段。
- 多级别支持：支持不同日志级别的脱敏策略。
4. 后续规划：谛听的“星辰大海”
-
性能优化：通过优化算法和引入缓存机制，提升谛听的匹配效率，支持高并发场景。
- 高效匹配算法：优化 AC 自动机算法，提升匹配效率。
- 缓存机制：引入缓存（如 Caffeine、Redis），减少敏感词库的频繁读取。
-
插件化架构：设计插件化架构，支持用户自定义数据源、匹配算法、脱敏策略等。
- 插件市场：允许用户分享和下载自定义的数据源、匹配算法等插件。
- 动态加载：支持敏感词库的动态加载和更新，无需重启应用。
-
开源社区：打造开源社区，吸引更多开发者参与，共同完善谛听的功能和生态。
- 开发文档：提供详细的开发文档和贡献指南。
- Demo 项目：提供完整的 Spring Boot Demo 项目，展示组件的集成和使用方法。
5. 期待你的使用与反馈！
谛听（Diting）目前正处于快速发展的初期阶段，我们非常期待大家的试用和反馈！你的每一次使用和反馈，都是谛听成长的重要动力。
你可以这样参与：
-
试用谛听：下载并使用谛听，体验它的强大功能。
- 在 GitHub 上查看项目文档，快速上手。
- 在你的 Spring Boot 项目中集成谛听，感受它的便捷与高效。
-
提交 Issue：如果你在使用过程中遇到问题，或者有新的功能需求，欢迎在 GitHub 上提交 Issue。
- 报告 Bug：帮助我们发现问题，提升谛听的稳定性。
- 提出需求：告诉我们你希望谛听支持哪些功能，我们会尽力实现。
-
分享经验：在技术社区或博客中分享谛听的使用经验，帮助更多开发者了解和使用谛听。
- 在技术社区（如 CSDN、掘金、知乎）分享谛听的使用经验。
- 在社交媒体上宣传谛听，吸引更多开发者关注。
6. 结语：让我们一起“谛听”世界！
谛听（DeepListen）的使命是让敏感词无处遁形，打造更安全的数字世界。我们相信，通过大家的试用和反馈，谛听一定能够不断成长，成为敏感词识别领域的“明星项目”。
项目地址：[Eumenides1/diting: 谛听 - 轻量级、可扩展的敏感词识别与数据脱敏组件]
邮件列表：[Jiapeng.Liu@111.com]
快来试用谛听吧！让我们一起“谛听”世界，打造更安全的数字未来！🚀
PS：如果你对敏感词识别感兴趣，或者只是想找一个“靠谱”的工具来提升系统的安全性，谛听都欢迎你！毕竟，开源的世界里，没有“敏感词”，只有“共创者”！😉
