我在ZL的日子-20090814

2009年8月14日

注:昨天回到家,身心俱累,今日补上,同时预告,周末两天合并为一天,明天晚上写。

闷热的天气依然在继续,让人无精打采,精神困顿,好像没睡醒似的。不管怎么样,今天还得上班啊,明天就可以好好休息了。

努力打起精神,像打仗一样挤上公交车,抢到一个还算凑合的位置站着。人怎么就这么多呢?

上午又被叫去听一家供应商的介绍,实在是打不起兴趣,类似的产品听得够多的了。

为啥总在我在会议室的时候有若干人给我打电话呢?正好,不用听无聊的介绍了,闪身出了会议室,打了若干电话,处理了几个问题。等我回到会议室,已经在结束语了,哈哈,太好了。下次当我参加无聊的会议时尽管给我打电话吧。

回到座位,继续处理问题,苏州的同事反映苏州的部分用户访问我们网站图片有问题。向苏州同事要到了相关的信息,测试了一下,判断是CDN节点的问题,打电话找CDN的客服,让他们处理一下。一直折腾到中午12点多,CDN的工程师也只验证了问题的存在,没找到原因。从现象判断,可能是南京节点的网络有某些限制或路由有问题。最后,换了一组节点,解决了问题。

中午吃饭高峰,饭店都是人,再加上对那家常去的饭店炒菜有阴影了,于是和老K两人跑去吃碗面算了,速度快,中式快餐。

下午本来一切相安无事,14点48分,突然从办公室连不到服务器了,我这一阵紧张,不会服务器出问题了吧?于是迅速又从别的链路测试了一下,服务器没问题,看来是办公室到服务器的链路故障了。打电话给老K,让他查吧。

14点58分,链路恢复正常了。这十分钟,老K同志的电话基本被打爆了,北京,上海,广州的同事都打电话询问情况。

查原因吧,基本判断了故障出现的位置,IDC的专线传输机房设备有问题。和IDC的客服沟通了,让她们彻查故障原因。很明显不是链路的物理故障,否则不会这么快恢复。只能是人为故障,肯定是有什么人在这个时间段做了什么操作,导致了故障。两个小时后,IDC客服打电话来说明了情况,果然和我们的判断一致。唉,这种事都能有,太不像话了。

等吃完饭晚上回到家,一阵困意袭来,这一天的事可真多啊。不是体力累,还主要是精神累。领导定的目标是99.99%,要实现这个目标,压力太大了,总有N多我不可控的因素导致各种问题。只能想尽各种办法冗余,备份,主动监控,自动切换,这一切还要在不增加成本的前提下实现,MGD。