Docker部署Elasticsearch和kibana

149 阅读3分钟

前言

【摘自百度百科】

Elasticsearch 是一个分布式、高扩展、高实时的搜索与数据分析引擎。它能很方便的使大量数据具有搜索、分析和探索的能力。充分利用Elasticsearch的水平伸缩性,能使数据在生产环境变得更有价值。Elasticsearch 的实现原理主要分为以下几个步骤,首先用户将数据提交到Elasticsearch 数据库中,再通过分词控制器去将对应的语句分词,将其权重和分词结果一并存入数据,当用户搜索数据时候,再根据权重将结果排名,打分,再将返回结果呈现给用户。

Elasticsearch是与名为Logstash的数据收集和日志解析引擎以及名为Kibana的分析和可视化平台一起开发的。这三个产品被设计成一个集成解决方案,称为“Elastic Stack”(以前称为“ELK stack”)。

Elasticsearch可以用于搜索各种文档。它提供可扩展的搜索,具有接近实时的搜索,并支持多租户。Elasticsearch是分布式的,这意味着索引可以被分成分片,每个分片可以有0个或多个副本。每个节点托管一个或多个分片,并充当协调器将操作委托给正确的分片。再平衡和路由是自动完成的。相关数据通常存储在同一个索引中,该索引由一个或多个主分片和零个或多个复制分片组成。一旦创建了索引,就不能更改主分片的数量。

Elasticsearch使用Lucene,并试图通过JSON和Java API提供其所有特性。它支持facetting和percolating,如果新文档与注册查询匹配,这对于通知非常有用。另一个特性称为“网关”,处理索引的长期持久性;例如,在服务器崩溃的情况下,可以从网关恢复索引。Elasticsearch支持实时GET请求,适合作为NoSQL数据存储,但缺少分布式事务。

Kibana是一个开源的分析与可视化平台,设计出来用于和Elasticsearch一起使用的。它可以搜索、查看存放在Elasticsearch中的数据,并以各种不同的图表、表格、地图等直观的方式展示数据,从而达到高级的数据分析与可视化的目的1。Kibana让海量数据更容易理解。

部署

1.docker拉取镜像

docker pull elasticsearch:7.12.1
docker pull kibana:7.12.1

2.启动单点模式的Elasticsearch服务

创建docker网络

docker network create es-net
docker run -d \
--restart=always \
--name es \
--network es-net \
-p 9200:9200 \
-p 9300:9300 \
--privileged \
-v /root/docker/elasticsearch/data:/usr/share/elasticsearch/data \
-v /root/docker/elasticsearch/plugins:/usr/share/elasticsearch/plugins \
-e "discovery.type=single-node" \
-e "ES_JAVA_OPTS=-Xms512m -Xmx512m" \
elasticsearch:7.12.1

docker run -d: 这部分表示在后台运行容器。

--name es: 为容器指定一个名字,这里是 “es”。

-e "ES_JAVA_OPTS=-Xms512m -Xmx512m": 设置 Java 虚拟机的参数

-e "discovery.type=single-node": 单点模式启动

-v /root/docker/elasticsearch/data:/usr/share/elasticsearch/data:挂载目录

-v /root/docker/elasticsearch/plugins: 挂载目录

--privileged: 赋予容器一些特权,可能会有一些安全风险,需要慎用。

--network es-net: 将容器连接到名为 “es-net” 的网络上,目的是为了与其他容器进行通信。

-p 9200:9200 -p 9300:9300: 将容器内部的端口映射到宿主机上

elasticsearch:7.12.1: 指定要运行的 Docker 镜像的名称和版本号,这里是 Elasticsearch 7.12.1 版本。

当启动后,我们可以通过ip:9200来访问服务,出现如下信息说明服务启动成功:

3.部署kibana服务

docker run -d \
--name kibana \
-e ELASTICSEARCH_HOSTS=http://es:9200 \
--network=es-net \
-p 5601:5601  \
kibana:7.12.1

这个命令会在启动 Kibana 的同时连接到 Elasticsearch 服务,并映射 Kibana 的 Web 界面端口到宿主机,以便通过浏览器访问 Kibana 的用户界面进行 Elasticsearch 数据的可视化和管理。

通过ip:5601访问kibana的可视化界面