解决金仓KingbaseFlysync kafka目标端有kufl日志,但在kafka中没查到数据

70 阅读1分钟

关键字

KingbaseFlysync ,KFS,KAFKA,同步服务,topic

问题描述

Kafka做为目标端,数据正常同步,KFS状态正常,但是在目标端kafka对应的topic中没找到对应的数据

问题分析

Kafka做为目标端时候,如果不指定topic名称,那么DML数据就是进入“模式_表“的topic中(会自动创建),比如在源端创建一个表mytest. table_jgw,同时插入一条数据,就会自动创建mytest_table_jgw的topic,并且数据会进入这个topic:

图片.png

图片.png

图片.png

同样ddl默认进入flysync_ddl这个名字的topic中,

图片.png

现场没指定topic但是有参数replicator.applier.dbms.txninfoTopic,导致客户误认为指定的topic是此参数指定的名称,此参数其实是记录事务开头和结尾信息

解决方案

在ini中配置参数 property = replicator.applier.dbms.singleTopicName=test3 更新KFS(进入解压目录的tools下,执行./fspm update), 源端再插入数据,如下图,数据没有进入mytest_table_jgw,进入指定的test3这个topic

图片.png