目前一些互联网公司会使用消息队列来做核心业务，因为是核心业务，所以对数据的最后一致性比较敏感，如果中间出现数据丢失，就会引来用户的投诉，这时就要考虑使用Kafka到底会不会丢消息，那又该怎么做补偿呢？

有时候我们需要带过期时间的消息，然而Kafka消息并不自带TTL选项，因此我们需要自己实现。其主要原理就是在`消费者端`使用`拦截器`过滤掉已经过期的消息。

延迟队列是一个非常有用的工具，我们经常遇到需要使用延迟队列的场景，比如延迟通知，订单关闭等等。 这篇文章主要是使用Go+Kafka实现延迟消息。

近段时间，业务系统架构基本完备，数据层面的建设比较薄弱，因为笔者目前工作重心在于搭建一个小型的数据平台。优先级比较高的一个任务就是需要近实时同步业务系统的数据（包括保存、更新或者软删除）到一个另一个数据源，持久化之前需要清洗数据并且构建一个相对合理的便于后续业务数据统计、标签系…