原创设计:小姐姐味道(微信公众平台ID:xjjdog),热烈欢迎共享,非公众号转载保存此申明。
不久前,单位已经开本年度的汇总大会。此刻,手机响了,电話那里传出了关键各个部门责任人紧促的响声:“寻求帮助!大家的某一Java服务不断产生请求超时,早已无法正常的工作中5钟头了,状况十分少见,大家沒有工作经验,必须架构组的帮助”。
5个钟头的服务出现异常,早早已超出了全年度的SLA指标值,再维持下来,各个部门的其它指标值也不可以挽救,这对一个主要业务流程而言显然是不可以承担之痛。根据会议电话指引的领导干部临危不惧,标示务必运行linux紧急专用工具开展清查,应用bcc专用工具跟踪資源应用状况,必需时可dump好几份core文件。通过架构组的应急解决,服务的中断问题总算有一定水平的减轻,所有人松了一口气,希望服务渐渐地修复。
不如人意,服务再次发生请求超时,紧急情况。伴随着時间增加,服务的不断不能用会导致山崩,不良影响无法预料。架构组几个高手具体分析了core文件,觉得服务的长期请求超时与互联网插孔的松脱相关。可以应急联络计算机房工作人员,检查服务器的网络线是不是插紧。网口松脱这类涉及到好几千台几万元台服务器的检查,且有的服务器不仅一块网口,实际操作十分具备趣味性。更高的问题是一部分设备年代已老,早已开展过多次检修,假如再度检查出问题会开启设备的回收利用体制。
公司领导紧急召开视频会议系统,全部开着视频语音开展指引。总裁软件设计师亲自打的狂奔计算机房,逐一开展了网口检查。架构组领导干部根据视频语音发言细心的引导着每一个无线路由器、网络交换机、设备网口的网线水晶头操作过程。检查全过程井然有序,总算经历一个半小时,好几千台网络接口都早已插紧,全部队伍都沉浸在成功的喜悦当中。
通过1天的观查,网口再也没有发生过松脱,经全部单位评定后,风险消除。与此同时,单位立过新的每日任务,把全部网络线的网线水晶头拆换为带锁扣的,以绝后患!
在产品研发全年度KPI考核的紧要关头,应对错综复杂的数据中心自然环境,产品研发同学们坚持不懈顾客至上、业务流程优先选择,在紧要关头勇于担当,有所作为,齐心合力打胜了这一场“Java争夺战”,全力以赴守卫了服务的身心健康!
与此同时,架构组也提示,之后在寻求帮助时,不必刻意提名是“Java服务”,只是表明是哪个服务出问题就可以了。我们不把问题抛向Java的身上,对别的语言表达的服务问题也是一视同仁!
作者介绍:小姐姐味道 (xjjdog),一个不允许程序猿迷失方向的微信公众号。对焦基本架构和Linux。十年架构,日千亿总流量,与你讨论分布式系统全球,让你不一样的味道。
阅读推荐:
1. 轻松玩Linux2. 哪些味道音乐专辑
3. 手机蓝牙似梦4. 追凶!5. 失去联系的架构师,只留有一段脚本制作6. 架构师写的BUG,非同一般7. 有一些程序猿,实质是一群羊!
小姐姐味道不羡鸳鸯戏水不羡仙,一行编码调大半天 331篇原创设计內容 -->