后台技术汇_个人页

2024年06月

• 06.06 16:11:56
  发表了文章 2024-06-06 16:11:56

  上云业务的k8s容器排障与思考

  本文主要讲述了在完成业务上云后，面临因业务请求量激增导致的系统复杂故障和挑战。作者通过排查分析，发现了一个长时间处于“进行中”状态的异常任务，客户端（APP2）进程卡死，而服务端（APP3）进程正常结束。进一步分析发现，问题出在kube-proxy代理的会话超时机制，由于请求处理延迟，kube-proxy清理了会话记录，导致服务端回包异常，客户端无法识别，从而形成进程假死。 最后，作者强调了在成本控制背景下，通过分析流量增长原因、优化技术架构和调整运营策略来改善系统性能和稳定性的必要性。