日志平台-ES架构设计

142 阅读1分钟

remote cluster

www.elastic.co/guide/en/el…

冷热架构(等机器资源申请到位的时候)

www.elastic.co/cn/blog/imp…

ES Client Node

什么鬼?

• node.data: false

• 处理index和bulk request

• 处理查询请求、负责结果汇总

为何独立出来?

• 避免和data node争用资源

• 故障时容易定位故障点

• 我们生产环境client node同时也作为master node

⽇志增量索引推荐个数保存天数ES集群配置
10G1天1~2个5天~10天3台4c8g 200G~500G
100G1天10个~20个5天~10天master/data分离 master:2c4g data:5台8c 16g 1T~2T
500G1天30~40个5天~10天Hot-Warm Hot:5台16c 32g 4T Warm:4C 16G 4T

拆分完了之后,需要路由正确的kibana