移动互联时代,告别单机,让设备智能协同运维
|
器械区那股铁味混着前台老歌的调子,老张蹲在深蹲架边上擦杠铃片,突然甩了句:“现在这网络运维啊,跟以前练硬拉似的——光自己猛没用,得整个链子都顺。”我原以为他又要扯什么“系统协同”,结果他指了指手机里跳的告警:“去年二月那回,核心交换机宕机,备用设备没自动切,整个园区断网两小时,老板差点把我键盘砸了。” 那阵子我刚好在给会员调硬拉姿态,他弓背得像只虾,我让他先压肩再顶髋,结果他反手来了句:“你们运维不也这样?设备各自为战,出问题全靠人肉跑。”我愣了下——他说的还真对。去年二月那场事故,主备交换机型号不同,配置没同步,主设备挂了,备用设备还在傻等心跳包,等人工发现时,监控系统已经堆了三百多条告警。后来查日志,发现备用设备其实在宕机后第十秒就尝试接管了,但VLAN划分没对齐,流量全卡在二层,活生生憋死了。 老张把杠铃片往地上一撂,“哐当”一声,镜子上那块手印都震得晃了晃。“现在谁还玩单机?我手机里装着五个设备的APP,核心交换机、无线AC、防火墙,哪个指标超了直接弹消息,比以前蹲机房盯着屏幕强多了。”他说的“单机”,我懂——就是那种设备只管自己跑,出了问题全靠运维一个个查日志、登CLI、手动切配置的年代。那时候最怕半夜电话响,迷迷糊糊爬起来,先得摸清是哪个设备挂了,再查关联设备有没有受影响,等问题定位完,天都亮了。 去年二月之后,我推了套“智能协同”的方案:所有设备接上SDN控制器,主备配置自动同步,流量异常时自动切换路径,连无线AP的信道都能根据干扰情况动态调整。那阵子能推个大概,但真落地时,问题一堆。比如有台老防火墙,不支持OpenFlow协议,得写脚本把它“骗”进控制器;还有次无线AC和交换机的时间没同步,切换时流量丢了半秒,会员练着练着突然断网,差点把哑铃砸地上。 最搞笑的是有回测试自动切换,我故意拔了主交换机的电源,结果备用设备倒是接管了,但监控系统没收到切换通知,还在报“主设备在线”。后来查发现是SNMP陷阱没配置对,老张蹲在机房里骂了半小时“这破系统比会员的深蹲还难调”。不过骂归骂,方案还是跑了三个月,现在园区断网次数从每月两三次降到几乎为零,连前台小姑娘都夸:“最近网络稳得像老张的深蹲,杠铃片都不晃了。” 地上有个用了一半的粉笔,是昨天给会员画动作轨迹时掉的。我蹲下捡起来,突然想起上个月老李的遭遇——他负责的园区用的还是单机模式,有天无线控制器挂了,备用设备没启动,整个园区无线全瘫,会员们举着手机在拉伸区打转,有人急得直跺脚。后来老板直接扣了他半年奖金,说他“连个备用设备都管不好”。老李找我喝酒时,眼睛红得像刚做完离心训练的肱二头肌:“现在这时代,光会调设备不够,得让设备自己会‘代偿’——主设备挂了,备用设备得能无缝顶上,就像深蹲时股四头肌不行了,臀大肌得赶紧补上。” 我原以为“智能协同”就是个噱头,结果跑下来发现,它真能解决单机时代的“代偿”问题。以前设备出问题,全靠运维“离心收缩”——用肌肉代偿动作,现在设备自己会“代偿”,运维只需要盯着控制器,看哪个设备“活动度”不够,及时调整策略就行。就像老张的硬拉,以前他总靠腰力代偿,现在学会了用臀腿发力,重量没涨,但动作稳多了,也不容易受伤。 不过有个问题我还没完全想明白——智能协同的“智能”到底该到什么程度?比如流量异常时,是让设备自己决定切换路径,还是先报给运维确认?上次有台服务器突然流量暴增,控制器直接把它从主路径踢出去了,结果发现是会员在集体刷短视频,虚惊一场。老张说:“这就像深蹲时,臀大肌突然发力,把股四头肌的活抢了——虽然动作完成了,但发力顺序不对,容易受伤。”我点点头,这问题确实得再琢磨——设备太“聪明”了,运维反而可能变成“摆设”;设备太“笨”,又得回到单机时代的人肉运维。优胜劣汰的规则在这儿也适用:能自适应、能协同的设备,活下来;只会自己跑的,迟早被淘汰。
文章配图,仅供参考 有人把杠铃片摔了一声巨响,是隔壁教练在带会员做高翻。老张站起来拍了拍裤子上的粉,“走,去调下无线AP的信道——最近会员投诉信号差,估计是旁边新开了家健身房,干扰大了。”我跟着他往机房走,突然想起昨天会员问我:“你们运维是不是跟教练一样,得一直学新动作?”我笑了笑:“差不多——以前学怎么调设备,现在学怎么让设备自己调自己。”(编辑:站长网) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |

