当前位置:  开发笔记 > 大数据 > 正文

重置JDBC Kafka Connector以便从时间开始开始拉行吗?

如何解决《重置JDBCKafkaConnector以便从时间开始开始拉行吗?》经验,为你挑选了1个好方法。

Kafka连接器可以利用主键和时间戳来确定需要处理的行。

我正在寻找一种重置连接器的方法,以便从时间开始进行处理。



1> 小智..:

因为要求是在分布式模式下运行,所以最简单的方法是将连接器名称更新为新值。这将提示您在connect-offsets主题中输入一个新条目,因为它看起来像是一个全新的连接器。然后,连接器应重新开始读取,就好像尚未将任何内容写入Kafka。您还可以手动将逻辑删除消息发送到与该特定连接器相关联的connect-offsets主题中的键,但是重命名比处理它要容易得多。此方法适用于所有源连接器,不仅适用于此处描述的JDBC连接器。

推荐阅读
echo7111436
这个屌丝很懒,什么也没留下!
DevBox开发工具箱 | 专业的在线开发工具网站    京公网安备 11010802040832号  |  京ICP备19059560号-6
Copyright © 1998 - 2020 DevBox.CN. All Rights Reserved devBox.cn 开发工具箱 版权所有