高明网站开发,网站开发技术应用领域,企业解决方案ppt,cnzz统计一、问题
跑自动化用例的时候#xff0c;uat-sg环境#xff0c;发现SGW经常会返回 502 Bad Gateway响应
二、原因
经过SRE和BE Dev共同排查#xff0c;502 是从ALB-- 后端服务 后端服务无法响应导致#xff0c;ALB会直接给客户端返回502。 服务端#xff1a;由于c…一、问题
跑自动化用例的时候uat-sg环境发现SGW经常会返回 502 Bad Gateway响应
二、原因
经过SRE和BE Dev共同排查502 是从ALB-- 后端服务 后端服务无法响应导致ALB会直接给客户端返回502。 服务端由于cgroup升级到v2java无法正确识别内存配置(设置32G,实际物理内存只有16G)导致内存溢出服务重启一直没响应给ALB所以返回502 检查实际启动参数内存分配 检查grafana CPU监控发现有波动 检查grafana 内存监控发现有用完情况 检查服务重启日志有对应重启记录
三、解决办法
将Java启动参数-jar -XX:InitialRAMPercentage80.0 -XX:MaxRAMPercentage80.0 -XX:MinRAMPercentage80.0 修改为-jar -Xms12g -Xmx15g
四、效果
修改后所有自动化未返回502
五、影响
live xx地区可能会有相同现象发版解决
六、监控告警
思考建立live环境服务器资源阈值告警体系及时发现问题
