hi,我是蛋挞,一个初出茅庐的后端开发,希望可以和大家共同努力、共同进步!
- 起始标记->Elasticsearch入门(15讲):「23 | 基本概念:第一部分总结」
- 结尾标记->Elasticsearch入门(15讲):「22 | 基本概念:第一部分总结」
第一部分总结
第一部分总结与回顾:产品与使用场景
- Elasticsearch是一个开源的分布式搜索与分析引擎,提供了近实时搜索和聚合两大功能
- Elastic Stack包括Elasticsearch, Kibana, L ogstash, Beats 等一系列产品。
- Elasticsearch是核心引擎,提供了海量数据存储,搜索和聚合的能力。Beats 是轻量的数据采集器,Logstash用来做数据转换,Kibana 则提供了丰富的可视化展现与分析的功能。
- Elastic Stack主要被广泛使用于:搜索,日志管理,安全分析,指标分析,业务分析,应用性能监控等多个领域
- Elastic Stack开源了X-Pack在内的相关代码。作为商业解决方案,X- Pack的部分功能需要收费。Elastic公司从6.8和7.1开始,Security 功能也可以免费使用
- 相比关系型数据库,Elasticsearch 提供了如模糊查询,搜索条件的算分第等关系型数据库所不擅长的功能,但是在事务性等方面,也不如关系型数据库来的强大。因此,在实际生产环境中,需要考虑具体业务要求,综合使用
第一部分总结与回顾:基础概念
- 一个Elasticsearch集群可以运行在单节点上,也支持运行在多个服务器上,实现数据和服务的水平扩展
- 从逻辑角度看,索引是一些具有相似结构的文档的集合
- 物理角度看,分片是一个Lucene的实例。分片存储了索引的具体数据,分片可以分布在不同的节点之上。副本分片除了提高数据的可靠性,还能-定程度提升集群查询的性能
- Elasticsearch的文档可以是任意的JSON格式的数据
- 将文档写进Elasticseach的过程叫索引(indexing)
- Elasticsearch提供了REST API和Transport API两种方式,建议使用REST API
第一部分总结与回顾:搜索和 Aggregation
- Precosion指除了相关的结果,还返回了多少不相关的结果
- Recall一衡量有多少相关的结果,实际上并没有返回
- 精确值包括:数字,日期和某些具体的字符串
- 全文本:是需要被检索的非结构文本
- Analyis是将文本转换成倒排索引中的Terms的过程
- Elasticsearch的Analyzer是Char_filter -> Tokenizer -> Token Filter的过程
- 要善于利用_analyze API去测试Analyzer
- Elasticsearch搜索支持URI Search和REST Body两种方式
- Elasticsearch提供了Bucket / Metric / Pipeline / Matrix四种方式的聚合
第一部分总结与回顾:文档CRUD与Index Mapping
- 除了CRUD 操作外,Elasticsearch还提供 了bulk, mget和 mseach等操作。从性能的角度上说,建议使用,以提升性能。但是,单次操作的数据量不要过大,以免引发性能问题
- 每个索引都有一 个Mapping定义。包含文档的字段及类型,字段的Analyzer的相关配置
- Mapping可 以被动态的创建,为了避免一些错误的类型推算或者满足你特定的需求,可以显示的定义Mapping
- Mapping 可以动态创建,也可以显示定义。你可以在Mapping中定制Analyzer
- 你可以为字段指定定制化的analyzer,也可以为查询字符串指定search_ analyzer
- Index Template可以定义Mapping和Settings,并自动的应用到新创建的索引之上,建议要合理的使用Index Template
- Dynamic Template支持在具体的索引.上指定规则,为新增加的字段指定相应的Mappings
自测题(一)
- 判断题: ES支持使用HTTP PUT写入新文档,并通过Elasticsearch 生成文档Id
- 错,需要用POST命令创建。
- 判断题: Update一个文档,需要使用HTTP PUT
- 错,Update文档,使用POST, PUT只能用来做Index或者Create
- 判断题: Index一个已存在的文档,旧的文档会先被删除,新的文档再被写入,同时版本号加1
- 对
- 尝试描述创建一 个新的文档到一个不存在的索引中,背后会发生一些什么?
- 默认情况下,会创建相应的索引,并且自己设置Mapping,当然,实际情况还是要看是否有合适的Index Template
- ES 7中的合法的type是什么?
- _doc
- 精确值和全文的本质区别是什么?
- 精确值不会被Analyzer分词,全文本会
- Analyzer由哪几个部分组成?
- 三部分,Character Filter + Tokenizer + Token Filter
自测题(二)
- 尝试描述match和match_ phrase 的区别
- Match中的terms之间是 or 的关系,Match Phrase 的terms之间是 and 的关系,并且term之间位置关系也影响搜索的结果
- 如果你希望match_ _phrase 匹配到更多结果,你应该配置查询中什么参数?
- slop
- 如果Mapping的dynamic设置成“strict", 索引-一个包含新增字段的文档时会发生什么?
- 直接报错
- 如果Mapping的dynamic设置成“false", 索引一个包含新增字段的文档时会发生什么?
- 文档被索引,新的字段在 source 中可见。但是该字段无法被搜索
- 判断:可以把一个字段的类型从“integer" 改成“long”,因为这两个类型是兼容的
- 错 字段类型修改,需要重新reindex
- 判断: 你可以在Mapping文件中为indexing 和searching指定不同的analyzer
- 对 可以在Mapping 中为index和search指定不同analyizer
- 判断:字段类型为Text的字段,一定可以被全文搜索
- 错,可以通过为text类型的字段指定Not Indexed,使其无法被搜索
此文章为3月Day2学习笔记,内容来源于极客时间《Elasticsearch 核心技术与实战》