在k8s环境里跑canal的docker镜像,连mysql数据库,将数据导入kafka。数据量小时没什么问题,但一次对一个120万行记录的表进行update时,发现canal会死掉。 具体现象:在mysql客户端show PROCESSLIST,发现canal的连接处于Writing to net状态;一段时间后连接断开,不会重连。查看canal的容器,确认java进程还在。 canal的内存配置:buffer.memunit=1024(1024字节?),buffer.size=256。 求大神指导。
原提问者GitHub用户shengmingzhu
建议对canal的内存配置进行调优,可以适当增大buffer.size,同时也要考虑到机器配置和系统负载,避免内存占用过高导致canal崩溃。此外,可以检查网络连接是否稳定,以及MySQL的负载情况,是否存在其他进程占用了MySQL的资源。
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。