MTg2NTMyMTc5MzBAMTYzLmNvbQ==

支持一波

@SgtPepper 我切了美国的梯子 ，ip 显示也是美国的，还是访问不了，真蛋疼了

你们是用啥梯子访问 chatgpt 的，为嘛我用 亚太的 AWS ，ip 是日本的都访问不了

@angeltop 非常感谢

@linvaux 这兄弟在作死的路上 意志坚定的狠

@cwcc “在生产环境装上调试工具以备不时之需” 这个想法不错

@corcre 同样遇见过空调问题 😂

1 、生产服务器遇到了 DDOS 攻击

生产环境是 gitlab 和其他中间件共存的服务器，由于 gitlab 属于被高频率漏洞攻击的中间件，发现被植入了 ddos 肉鸡病毒，每当肉鸡操控者想攻击某某的时候就会调用各肉鸡的流量去攻打，此时 CPU 和内存会瞬间拉至封顶。
解决方案：首先是人工清除，定位异常进程，找到进程触发的病毒脚本，然后逐个清理后，恢复正常。
之后采用阿里的安全组件，10 分钟结束战斗，每月每台服务器多花 120 块钱的样子。

2 、生产数据库参数被某某修改，查询贼拉拉慢，各种请求超时

呼叫了集团 DBA 半天才定位某个参数，各种拉日志定位问题。

3 、前端 Nginx 转发异常，请求各种不通

这个还是由于公司一些工程师经验不足导致 nginx.conf 配置错误，但是又没有很好的备份上个版本。
建议处理方案：采用 nginx web ui 记录每一次修改记录，也可以快速回滚到上个版本

最后想说的是：一定要敬畏生产环境，才能睡个好觉，睡的安心。

不要嫌麻烦，各类监控组件一定怼上！ 告警一定要先于业务发现，否则惨兮兮

@LawlietZ

@NoString 经历丰富的很啊，老兄

@orzwalker111 哈哈哈哈哈哈哈哈，狠好的经历

@kestrelBright 遇见的事儿多了，经验就来了，都是这么积攒的泪史

@u21t20o15 这个思路简洁有效

@demoBastard 线上排查 有尝试过阿里的 arthas 工具么

@guanzhangzhang 超级赞

@xyloading 这个是内伤，哈哈哈

@chenqh 这个很典型