1、问题引出来自星球同学的提问：的确我们比较关心集群的节点角色的划分。包括：集群应该几个节点？几个节点用于数据存储？要不要独立Master节点、协调节点？但是Ingestnode的场景用的比较少。2、

大家好，我是皮蛋二哥。 “ELK”是 ElasticSearch、Logstash、Kibana 三门技术的简称。如今 ELK 技术栈在互联网行业数据开发领域使用率越来越高，做过数据收集、数据开发、数据存储的同学相信对这个简称并不陌生，而ElasticSearch（以下简称…

user.first 和 user.last 扁平化为多值字段，alice 和 white 的关联关系丢失了。导致这个文档错误地匹配对 alice 和 smith 的查询

接触 Elasticsearch 已经有几年的时间, 从一开始在自己的普通台式机上搭建单实例来简单记录测试环境的日志, 到现在生产上用 9 个 Elasticsearch 实例搭成的集群来记录商城后台服务的全量日志. 使用场景没变, 都是用了记录日志, 并做实时检索和统计. 但是随着每天记录的数据量快速递增, QPS 快速递增, 我们经常会碰到一些性能问题, 这些问题一直在驱动我们对 Elasticsearch 集群进行持续优化, 这里是有必要记录一下我们在使用 ES(后续文章中用 ES 代替 Elasticsearch) 的过程中积累的经验.

在云原生时代和容器化浪潮中，容器的日志采集是一个看起来不起眼却又无法忽视的重要议题。对于容器日志采集我们常用的工具有filebeat和fluentd，两者对比各有优劣，相比基于ruby的fluentd，考虑到可定制性，我们一般默认选择golang技术栈的filbeat作为主力的…

Elasticsearch基本概念Clusternodeindexshardreplica分片策略1.1分布式架构的透明隐藏属性分片机制分片的副本集群发现机制(clusterdiscovery)扩容机

平台内的产品有一个数据分析，统计平台内某个商户某个时间段内（今天、昨天、7天内、30天内……）的各种数据分析，这种分析显然用MySql的count、sum、GroupBy之类的去查询是很不靠谱的，尤其是在数据量很大的情况下效率就不言而喻了，本来想着用HBase的MR来做，或者直…

一个中等的电商平台，每天都要产生百万条原始数据，上亿条用户行为数据。一般来说，电商数据一般有3种主要类型的数据系统： 关系型数据库 ，大多数互联网公司会选用mysql作为关数据库的主选，用于存储商品，用户信息等数据。 关系型数据库对于事务性非常高的OLTP操作(比如订单，结算等…