大数据干饭人

话说本周拖了几天没写完，昨晚发现发布了新版本。。。 Kafka 她是一个咖啡的品牌，额。。不对。她最初是由领英开发，是一个分布式消息传递和流平台。（这个也必须要登记到阅读源...

本文介绍 Kafka 中的数据是如何存储的，了解这个有利于理解 Kafka 中的数据过期机制、容错机制以及优化相关配置，希望对你有用。 1. 物理存储概述 Kafka 通过...

在传统关系型数据库中，优化关系 SQL 查询的一项基本技术是，将外层查询块的 WHERE 子句中的谓词移入所包含的较低层查询块（例如视图），从而能够提早进行数据过滤以及有可...

最近受部门的邀请，给入职新人统一培训IDEA，发现有很多新人虽然日常开发使用的是IDEA，但是还是很多好用的技巧没有用到，只是用到一些基本的功能，蛮浪费IDEA这个优秀的I...

test和[]中可用的比较运算符只有==和!=，两者都是用于字符串比较的，不可用于整数比较，整数比较只能使用-eq，-gt这种形式。无论是字符串比较还是整数比较都不支持大于...

Flink Kafa Connector是Flink内置的Kafka连接器，它包含了从Kafka Topic读入数据的Flink Kafka Consumer以及向Kafk...

正则表达式一直是困扰很多程序员的一门技术，当然也包括曾经的我。大多数时候我们在开发过程中要用到某些正则表达式的时候，都会打开谷歌或百度直接搜索然后拷贝粘贴。当下一次再遇到相...

Kafka由LinkedIn公司于2011年推出，自那时起功能逐步迭代，目前演变成一个完整的平台级产品，它允许您冗余地存储巨大的数据量，拥有一个具有巨大吞吐量（数百万/秒）...

前面几篇以spring作为主题也是有些时日了，高并发分布式这个主题也挺大能说挺多东西的，也是再开了个坑，然后分P来慢慢跟进吧。 我和大部分人一样是一名学习者，不是布道者，更...

研发线上使用最多的编辑器，就是vi。无论是最快查看某个文件内容，还是快速编辑某个文件，vi都能帮上忙。 软件世界貌似有一些非常长寿的东西，vi算是一个。本篇文章聚焦的是研发...

随着大数据的快速发展，业务场景越来越复杂，离线式的批处理框架MapReduce已经不能满足业务，大量的场景需要实时的数据处理结果来进行分析、决策。Spark Streami...

这次讲的是 bash 命令行中的外部命令 grep 的一些事情。 grep是一个最初用于 Unix 操作系统的 命令行 工具。在给出文件列表或 标准输入 后，grep会对匹...