浮云_

普罗米​修斯写入问题：api无法直接指定数据写入时间，我们的数据统计又需要指定写入时间，所以使用Remote Write协议直接写入。 ​ 示例代码 使用示例： 1.k，v的结构及缓存 2.数据上报

es索引管理，索引从手动管理，平滑升级到生命周期策略（ilm）管理。索引模板，及索引生命周期配置示例。

Es聚合查询 使用es查询数据的时候不可避免需要按照某些字段聚合，下面是一些简单示例,不废话，直接写代码。 代码使用golang，库github.com/olivere/elastic/v7 v7.0

es 为一批索引生成别名 目前通过logstash采集的数据，未使用默认的生命周期策略，直接写入自定义的索引，err-2024.07.23,err-2024.07.22,err-2024.07.21,

Elasticsearch Scroll 取出所有满足条件的数据. Elasticsearch默认只能查询10000条数据，获取超过的数据需要特殊处理

openresty 参数调优 sndbuf,把下载速度从20M/s~50M/s提升到150M/s~250M/s.

Elasticsearch, kiban安装部署，并使用logstash实时采集nginx日志到Elasticsearch 中。

Elasticsearch大数据聚合的时候会用到 类似于mysql的group by sum的实现。

Elasticsearch 数据处理问题（upsert操作），唯一key存在就更新，不存在就插入问题处理。