Elasticsearch——分布式文档系统之document

353 阅读4分钟

1. document 核心元数据

1.1 _index元数据

  • 代表一个document存放在哪个index中
  • 类似的数据放在一个索引,非类似的数据放不同索引:product index(包含了所有的商品),sales index(包含了所有的商品销售数据),inventory index(包含了所有库存相关的数据)。比如product,sales,human resource(employee),全都放在一个大的index里面,比如说company index,不合适的
  • ndex中包含了很多类似的document:类似是什么意思,其实指的就是说,这些document的fields很大一部分是相同的,你说你放了3个document,每个document的fields都完全不一样,这就不是类似了,就不太适合放到一个index里面去了
  • 索引名称必须是小写的,不能用下划线开头,不能包含逗号

1.2 _type元数据

  • 代表document属于index中的哪个类别(type)
  • 一个索引通常会划分为多个type,逻辑上对index中有些许不同的几类数据进行分类:因为一批相同的数据,可能有很多相同的fields,但是还是可能会有一些轻微的不同,可能会有少数fields是不一样的,举个例子,就比如说,商品,可能划分为电子商品,生鲜商品,日化商品,等等。
  • type名称可以是大写或者小写,但是同时不能用下划线开头,不能包含逗号

1.3 _id元数据

  • 代表document的唯一标识,与index和type一起,可以唯一标识和定位一个document

  • 我们可以手动指定document的id(put /index/type/id),也可以不指定,由es自动为我们创建一个id

    • 手动指定document id

      一般来说,是从某些其他的系统中,导入一些数据到es时,会采取这种方式,就是使用系统中已有数据的唯一标识,作为es中document的id。举个例子,比如说,我们现在在开发一个电商网站,做搜索功能,或者是OA系统,做员工检索功能。这个时候,数据首先会在网站系统或者IT系统内部的数据库中,会先有一份,此时就肯定会有一个数据库的primary key(自增长,UUID,或者是业务编号)。如果将数据导入到es中,此时就比较适合采用数据在数据库中已有的primary key。

    • 自动生成id

      数据产生出来以后,可能就没有id,直接就放es一个存储,那么这个时候,可能就不太适合说手动指定document id的形式了

      自动生成的id,长度为20个字符,URL安全,base64编码,GUID,分布式系统并行生成时不可能会发生冲突

  • 代码示例

    • 手动指定唯一标识

      PUT /test_index/test_type/1
      {
        "test_field": "create id by myself"
      }
      
    • 自动生成id

      POST /test_index/test_type
      {
        "test_field": "create id by es"
      }
      

1.5 _source元数据并定制返回结果

_source元数据:就是说,我们在创建一个document的时候,使用的那个放在request body中的json串,默认情况下,在get的时候,会原封不动的给我们返回回来。

PUT /test_index/test_type/2
{
  "name": "Tom",
  "age": 12,
  "gender": "M" 
}

执行GET请求,返回数据:

GET test_index/test_type/2

{
  "_index": "test_index",
  "_type": "test_type",
  "_id": "2",
  "_version": 1,
  "found": true,
  "_source": {
    "name": "Tom",
    "age": 12,
    "gender": "M"
  }
}

定制返回结果

  • 定制返回的结果,指定_source中,返回哪些field

    GET /test_index/test_type/2?_source=name,age
    {
      "_index": "test_index",
      "_type": "test_type",
      "_id": "2",
      "_version": 1,
      "found": true,
      "_source": {
        "name": "Tom",
        "age": 12
      }
    }
    

2. document的全量替换、强制创建和删除

2.1 全量替换

  • 语法与创建文档是一样的,如果document id不存在,那么就是创建;如果document id已经存在,那么就是全量替换操作,替换document的json串内容
  • document是不可变的,如果要修改document的内容,第一种方式就是全量替换,直接对document重新建立索引,替换里面所有的内容

2.2 强制创建

  • 如果需要新建文档,不想替换文档,就需要强制进行创建文档。

  • 语法:

    PUT /index/type/id?op_type=create
    PUT /index/type/id/_create
    

    两种都可以,但是如果 document id 已经存在,则会报错

2.3 删除

  • 语法

    DELETE /index/type/id
    
  • 不会立即物理删除,只会将其标记为deleted,当数据越来越多的时候,es会在适当的时机在后台自动删除标记为deleted的document