elasticsearch+kibana+logstash

本文主要是介绍了在安装了 elasticsearch + kibana 8.3 版本之后，证书突然过期之后如何更新证书的操作

linux 环境下直接常规启动 kibana 会报错无法获取 es 信息，因为linux 环境下无法进行到在浏览器将 enrollment token 注入到 kibana 的环节，这需要爬坑

本文主要记录了 mac 安装 ES 8.0.0 、安装 Kibana 8.0.0 、 ik 8.0.0 、 pinyin 8.0.0 、 dynamic_synonym 7.16.0 等过程

1.就是主副分片的数据不一致，es 查询默认情况下会随机选择分片或者其副本，所以导致同样的查询结果不一致。此情况产生的原因复杂，默认情况下，写入数据时，会先写入主分片，主分片成功后，再并发写入副本分片，当所有副本分片成功后，才会返回成功。所以要找出数据不一致的原因并解决，这种情…

准备工作：三个节点 112 节点、105 节点和 103 节点已经成功安装并配置好了和集群有关的配置信息。 需要输入文件名，可回车跳过使用默认的文件名。 推测是因为该节点之前启动过 ES ，已经创建了 data 文件夹，与要加入的集群冲突。集群配置完成前建议不要启动单个 ES …

重启 es ，在 head 文件夹下运行以下命令，浏览器访问 100.100.100.66:9100 ，如果集群健康值为 green 则表示安装成功，使用即可。 集群运行过程中，如果停掉其中一个 es 节点，不影响数据的使用，重启也会自动连入集群。

定时使用 logstash 从 postgres 数据库中将数据同步到 elasticsearch 中

使用脚本，您可以在 Elasticsearch 中评估自定义表达式。例如，您可以使用脚本在搜索请求中返回“脚本字段”或评估查询的自定义分数。 默认的脚本语言是 Painless 。其他 lang 插件使您可以运行以其他语言编写的脚本。在可以使用脚本的任何地方，都可以包含 lan…

通过使用 suggester ，根据提供的文本来建议外观相似的字词。建议功能的某些部分仍在开发中。 提示功能通过使用 suggester 来根据提供的文本提示外观相似的术语。请求部分在 _search 请求中与查询部分一起定义。如果查询部分被忽略，则仅返回建议。 NOET: _…

此族中的聚合基于从要聚合的文档中以一种或另一种方式提取的值来计算指标。 这些值通常从文档的字段中提取（使用字段数据），但是也可以使用脚本生成。 数值指标聚合是一种特殊类型的指标聚合，可输出数值。 一些聚合输出单个数字指标（例如 avg ），称为单值数字指标聚合，其他聚合生成多个…

桶聚合不像度量聚合那样计算字段的度量，而是创建文档桶。每个桶都与一个标准（取决于聚合类型）相关联，该标准确定当前上下文中的文档是否“落入”其中。换句话说，桶有效地定义了文档集。除了桶本身之外，桶聚合还计算并返回“落入”每个存储桶的文档数量。 与指标聚合相反，桶聚合可以保存子聚合…

汇总会将您的数据汇总为指标、统计信息或其他分析结果。 汇总可帮助您回答以下问题： Metric aggregations：从字段值计算指标（例如总和或平均值）的指标聚合。 Bucket aggregations：桶聚合，根据字段值、范围或其他条件将文档分组为桶（也称为箱）。 P…

Kibana 的 Index Management 功能是管理集群的索引、数据流和索引模板的简便方法。练习良好的索引管理可确保您的数据以尽可能最具成本效益的方式正确存储。 查看和编辑索引设置。 查看索引的映射和统计信息。 执行索引级操作，例如刷新和冻结。 查看和管理数据流。 创…

内容层节点：处理诸如产品目录之类的内容的索引和查询负载。 热层节点：处理诸如日志或指标之类的时间序列数据的索引负载，并保存您最近，最常访问的数据。 暖层节点：保存的时间序列数据访问频率较低，并且很少需要更新。 冷层节点：保存时间序列数据，这些数据偶尔会被访问，并且通常不会更新。…

内容可能会经常更新，但是内容的价值会随着时间的推移保持相对恒定。您希望能够快速检索项目，无论它们有多老。 时间序列数据会随着时间的推移不断累积，因此您需要一些策略来平衡数据的价值和存储数据的成本。随着时间的流逝，它变得越来越不重要，访问频率也越来越低，因此您可以将其移至价格较低…

您可以将快照还原到正在运行的集群，该集群默认情况下包括快照中的所有数据流和索引。 但是，您可以选择仅从快照还原集群状态或特定的数据流或索引。 如果您的集群启用了 Elasticsearch 安全功能，则还原 API 需要 manage 集群特权。还原过程没有定制角色。此特权是非…

只有在 .security 索引的快照是在同一主要版本的先前次要版本中创建的，才可以还原该快照。每个主要版本的最后一个次要版本都可以转换和读取其主要版本和下一个索引的格式。 还原安全配置时，可以选择完全还原所有配置（包括非安全配置），也可以只还原 .security 索引的内容…

安全配置信息位于两个位置：files 和 indices。 Elasticsearch 安全功能是使用 elasticsearch.yml 和 elasticsearch.keystore 文件中的 xpack.security 命名空间配置的。此外，在同一 ES_PATH_C…

除了备份集群中的数据外，备份其配置也很重要，特别是在集群变大且难以重构时。 配置信息驻留在每个集群节点上的常规文本文件中。在二进制安全容器 elasticsearch.keystore 文件中指定了敏感设置值，例如 Watcher 通知服务器的密码；某些设置值是指向相关配置数据…

要备份集群的数据，可以使用 snapshot API 。 快照是从正在运行的 Elasticsearch 集群中获取的备份。您可以对整个集群进行快照，包括其所有数据流和索引。您还可以仅对集群中的特定数据流或索引进行快照。 必须先 register a snapshot repo…