在实际项目使用中,java项目连接的是TIDB数据库,TIDB是使用了3个服务节点,生产环境时不时的出现如下错误:
The last packet sent successfully to the server was 3600000 milliseconds ago. The driver has not received any packets from the server.com.mysql.jdbc.exceptions.jdbc4.CommunicationsException: Communications link failure
起初还以为是连接超时的问题,不断地调整连接池的配置,结果都还是于事无补,后来经过分析每个TIDB服务的集群节点日志,发现是TIDB的数据库资源不足,主动杀掉了数据库连接,后经过增加服务器资源问题得以解决。
经过分析整理,产生Communications link failure原因的问题如下:
(1)java应用连接池是否没有做连接检查和定期发送 test query 保活连接。
(2)lvs、Haproxy等中间件的空闲存活时间是否设置过短。
(3)如果 n milliseconds ago 中的 n 如果是 0 或很小的值,则通常是执行的 SQL 导致 TiDB 异常退出引起的报错,推荐查看 TiDB stderr 日志。
(4)TIDB的节点资源是否不足。例如当内存不够导致OOM异常时,也会出现上述的通讯连接失败错误信息,应特别关注。