otter 做数据同步

最新推荐文章于 2025-09-14 07:31:03 发布

原创

最新推荐文章于 2025-09-14 07:31:03 发布 · 2.4k 阅读

0 ·

CC 4.0 BY-SA版权

本文介绍了使用 Otter 版本4.2.18进行数据同步的环境配置，包括Java 1.8和CentOS 6.8上的MySQL 5.7.29。文章提到了与MySQL 5.1.x版本的兼容性问题可能导致的SocketTimeoutException，并提供了异常堆栈信息。建议使用单个Node的单向同步或双Node的双向同步策略。文中引用了多个参考资料以供深入学习。

otter版本4.2.18
java版本1.8
linux系统版本centos6.8
建议MySQL版本为5.6以上，达到与canal兼容，避免有异常信息，5.1.x的话可能会有一些报错异常,测试过5.1.7的会报异常，本次测试安装5.7.29，暂无发现bug
典型的是网络超时异常:

pid:1 nid:1 exception:canal:example:java.net.SocketTimeoutException: Timeout occurred, failed to read total 4 bytes in 25000 milliseconds, actual read only 0 bytes
    at com.alibaba.otter.canal.parse.driver.mysql.socket.BioSocketChannel.read(BioSocketChannel.java:124)
    at com.alibaba.otter.canal.parse.inbound.mysql.dbsync.DirectLogFetcher.fetch0(DirectLogFetcher.java:174)
    at com.alibaba.otter.canal.parse.inbound.mysql.dbsync.DirectLogFetcher.fetch(DirectLogFetcher.java:77)
    at com.alibaba.otter.canal.parse.inbound.mysql.MysqlConnection.dump(MysqlConnection.java:169)
    at com.alibaba.otter.canal.parse.inbound.AbstractEventParser$3.run(AbstractEventParser.java:279)