第二十八章,重大事故-《与沙共舞》


    第(2/3)页

    重大事故的根因分类要么是因为客户或者网络上的第三方设备导致的“非供方原因事故”,要么是因为“伟中”的设备原因或者现场服务人员操作错误导致的“供方原因事故”。

    最糟糕是被定性为现场服务人员操作错误导致的“人为事故”,当事人往往会受到严厉的处罚,例如一年多以前,也门子公司的人为重大事故之后,当事工程师被辞退,子公司服务主管被撤职、调离,连地区部的老韩、老谢都负连带责任被通报批评并被罚掉一笔“巨款”。

    几个人已经不存在吃午饭这回事了,也忘记了晚饭。

    他们一直忙到深夜才把事故的来龙去脉梳理清楚,“st电信”的这套预付费系统的核心数据网络未与客户维护人员的维护操作网络做有效隔离,客户维护人员的网络也没有与客户办公室的办公网络做有效隔离,正是其办公室网络上的异常网络流量,也就是所谓的网络风暴导致核心系统受到影响,从而导致事故发生。

    事故中断时长三十分钟,五十万用户呼叫受影响,也就是说当天中午苏丹有五十万手机用户在三十分钟内打不通电话。

    事故的导火线是客户办公室网络的网络风暴,客户的维护团队也不想把账算在自己头上。他们和“伟中”的团队一起写了报告,把事故原因归结在了其办公网络的管理上。

    再加上陈永生跑上跑下地做着几个关键客户的关系,两边的管理层对曹松他们并没有太大不满,只是责令双方技术团队完成数据网络的整改。

    过了两天,曹松、钱旦召集团队所有成员开事故总结会。

    小伟讲解了事故回溯报告,他说:“这次幸好是客户原因造成的事故,影响不算太大,我们要提高警惕,不能再出事故。”

    曹松站起来走到门口望望外面,把门关上,等不及回到座位上就开口了:“没有外人,别客户原因事故了,我一世英名差一点就毁在苏丹了!这就是人为事故,几年前在国内就发生过因为网络没有隔离,客户维护人员在维护终端上用‘金山影霸’看电影把网络搞瘫了的事故。早几年公司就发过预警要求全网整改,现在都是哪一年了?亏得是在苏丹,要是在国内现在出这种事故我就死定了。都算我的错,下不为例,我明天请大家好好吃一顿去。”

    钱旦说:“这颗雷好歹是被我们自己踩了,没有留给后人。不仅是‘st电信’的数据网络要整改,我们要组织检查北非中东的所有数据网络,有隐患的都得整改。另外,我这两天琢磨,我们要把维护工作的要素总结出来,提高警惕,抓好‘三个k’,第一个‘k’是‘key        network’,我们把区域内需要重点保障的关键网络识别出来,重点盯防;第二个‘k’是‘key        actions’,明确每张网络日常维护要做的关键动作,包括日常的检查;第三个‘k’是‘key        time’,每张网络都要有应急预案,维护人员要熟知事故发生时的应对方法,还要不时演练。”

    林汉说:“‘三个k’,好!我现在就提一条‘key        action’,今后所有兄弟都要有两个手机,而且必须是两个不同运营商的手机,万一再出这种业务全断了的事故不能再互相联系不上了。”

    小伟说:“我也提一条……”

    既然曹松表了态要请大家好好吃一顿,大家没有理由不热烈拥护。

    他们去了喀土穆新开张的一家中餐馆。曹松带着钱旦,林汉等人先到,不一会儿,陈永生带着小伟、小军,一个人抱着一箱啤酒,走进了包间。

    钱旦直勾勾望着三箱啤酒:“青岛啤酒,你们从哪里弄来的?”

    陈永生得意地说:“还惦记你那瓶芝华士不?我这反正不是放在行李箱中大摇大摆拖进来的。”

    曹松在一旁说:“他从‘中铁’的人那边买过来的,珍藏一段时间了,今天居然舍得全部抱出来?”

    “那当然,我的家底全在这里,你们还喝不到位我也没办法了。”

    酒过几巡,钱旦觉得肚子涨了,起身去洗手间。

    走到洗手间门口,他正要推门进去,门被从里面拉开,出来一人,差点没和他撞个满怀。

    他定睛一看,那人却是张旺。

    张旺看到他,也是意外的表情:“这么巧,你也来苏丹了,来处理事故的?”

    钱旦张口就问:“谁告诉你我们出事故了?”

    他下意识地把重音放在了“谁”字上。

    张旺走到洗手盆前,低下头,慢条斯理地洗着手:“还要谁告诉我吗?你们大中午的断了三十分钟,五十万人打不通电话,苏丹人民没去砸客户的营业厅算你走狗屎运了。”

    “你知道得这么清楚?”钱旦借着酒意,语气中明显流露出了不友好。

    “我去‘st电信’随便找个人,就能看到你们写的事故分析报告,你以为呢?”张旺关了水龙头,把手甩了甩,仍然没有望向钱旦。

    钱旦心里有话,不知道怎么说。

    他推开洗手间的门,又停下了脚步,突然转过身来冒出一句没头没脑的话:“旺哥,你别老缠着曾子健啊!”
    第(2/3)页