快速,持续,稳定,傻瓜式
支持Mysql,Sqlserver数据同步

logstash jdbc 增量同步到kafka

请联系QQ:1793040 索取软件

做增量同步主要是更具sql_last_value的值做判断,如果符合条件才开始同步

配置文件如下:


插件将以sql_last_value存储在配置中的元数据文件的形式持久保存参数last_run_metadata_path。在查询执行后,该文件将被更新为当前值sql_last_value。下一次管道启动时,该值将通过从文件中读取来更新。如果 clean_run设置为true,则该值将被忽略,sql_last_value并将设置为1970年1月1日,如果use_column_value为true,则为0 ,就像没有执行任何查询一样。

如果数据库是非实时数据库,不能以时间作为追踪属性,不然同步的数据要么多要么少。

相关推荐

咨询软件
 
QQ在线咨询
售前咨询热线
QQ1793040