本文为原创文章，转载请注明作者及出 作为中国最大的在线教育站点，目前沪江日志服务的用户包含沪江网校，交易，金融，CCtalk（直播平台） 等多个部门的多个产品的日志搜索分析业务，每日产生的各类日志有好十几种，每天处理约10亿条（1TB）日志，热数据保留最近7天数据，冷数据永久保…

最近群里有小伙伴有说到自己的日志存储路径先是从客户端到Kafka，再通过消费kafka到ElasticSearch。现在要将ES换成Loki面临需要同时支持Kafka和Loki插件的工具。小白查了下当前市面上满足需求且足够可靠的工具分别为Fluentd、Logstash以及Ve…

一、简介 今天我们要介绍的是漫威旗下的 Loki。 不好意思，串戏了，是 Grafana 旗下的 Loki。 Loki 是受 Prometheus 启发可水平可扩展，高可用的多租户日志聚合系统。 它被

同时，也欢迎关注我的微信公众号 AlwaysBeta，更多精彩内容等你来。 上篇文章介绍了 如何在 Django 中优雅的记录日志，这篇来谈谈怎么管理以及查看日志。 说到查看日志，这么简单的事情还值得写篇文章吗？文件已经有了，直接 vim 打开不就完了。话虽如此，但有时候这样做…

在云原生时代和容器化浪潮中，容器的日志采集是一个看起来不起眼却又无法忽视的重要议题。对于容器日志采集我们常用的工具有filebeat和fluentd，两者对比各有优劣，相比基于ruby的fluentd，考虑到可定制性，我们一般默认选择golang技术栈的filbeat作为主力的…

最近在开发业务网关，我们期望将网关的多维度日志搜集起来供作统计分析，其中就包括网关请求日志，监控日志等。抱着尽量少引入外部组件依赖，同时期望稳定性好的思路，最终选择了Filebeat+Elasticsearch这种组合的方案。 注：文中提及的Filebeat、Elasticse…