全文搜索属于最常见的需求，开源的 Elasticsearch 是目前全文搜索引擎的首选。它可以快速地存储、搜索和分析海量数据。 维基百科、Stack Overflow、Github 都采用它。 Elastic 的底层是开源库 Lucene。 但是，你没法直接用 Lucene，必…

本篇主要介绍为何选用全文检索引擎，以及它的优势。 在介绍全文检索引擎之前，先来介绍下什么是搜索引擎。 搜索引擎（Search Engine）是指根据一定的策略、运用特定的计算机程序从互联网上搜集信息，在对信息进行组织和处理后，为用户提供检索服务，将用户检索相关的信息展示给用户的…

本篇主要介绍项目背景，项目需求 --- 与ES孽缘的源头。 项目用于处理风控规则引擎处理的进件信息，对进件信息进行决策，用以对风险高的贷款进件进行标记。 1.数据库采用mysql （5.7.21）。 2.项目进件主表数据量在500W左右，进件关联的联系人表数据量在3000W左右…

有几个概念是 Elasticsearch 的核心。 Elasticsearch 是一个近实时搜索平台。这意味着在将文档索引到可搜索的时间之前, 有轻微的延迟 (通常为一秒)。 集群是一个或多个节点 (服务器) 的集合, 它们一起保存整个数据, 并在所有节点上提供联合索引和搜索功…

在前面的文章中简述了solr与es的运用，本篇主要对比两款搜索引擎，并从中选取一款进行运用。 参考了几篇写的不错的文章，solr和Es各有优势，应该说都是非常好的全文检索引擎。对于系统需求来说都可以完美的满足，但是对于之后的其他需求的满足（比如日志分析等需求），es在分析方面做…

本篇主要介绍对es的初次体检，以及安装和初步使用。 Elasticsearch 是一个分布式的 RESTful 风格的搜索和数据分析引擎，能够解决不断涌现出的各种用例。作为 Elastic Stack 的核心，它集中存储您的数据，帮助您发现意料之中以及意料之外的情况。 1.El…

本篇采用mongo-connector进行mongodb与solr的同步。mongo-connector是用Python语言写的一个同步程序，使用mongo-connector可以在不侵入原有系统代码的情况下实现数据同步到solr（或者es）中。

结合上述文章，决定采用全文检索引擎进行功能的实现。目前市面上成熟的全文检索引擎有多种，本人挑选了目前最火的、用户最多的两款全文检索引擎solr与elasticsearch进行对比，从中选取更适合本系统的解决方案。 本篇主要介绍对solr初体验的一些步骤和见解。 Solr 是建立…