丢数据查错记录

77 阅读1分钟

2022年2月20日,客户发了很多数据,但是数据库只有4条数据

原因:

接收的时间不一样,但是ts一直是一样的,所以去重后只有一条数据

查错过程:

1、首先查看mqtt2kafka日志,有日志且已注册

2、查看kafka topic数据,有大量数据

3、查看ck,数据缺失,只有4条数据

4、客户发的数据ts全部都是一个时间,ck去重后只留了一条数据 image.png

image.png