- 域控救援,百里佛山一日还
XX机器人有限公司成立于2014年10月,专注于架空高压输电线路巡检机器人研发、生产、和推广及相关数据处理、故障诊断识别、故障排除工作,在输变电系统故障诊断及故障排除智能化解决方案领域展开创新性工作,致力于打造成世界领先的智能化电力输变电系统故障识别与修复解决方案供应商。
公司以创新性技术提高工作效率、改善工作方式、促进社会进步,与不同的商业伙伴建立紧密的、建设性的、共赢的合作关系,关注所有利益相关者的利益,关心社区发展,争做良好企业公民。
【项目区域】:佛山市顺德区
【项目背景】:
客户通过官网看到SANTOM关于域控基础架构方案,IT部门负责人联系到业务老王洽谈。得知:客户IT部门人事变动,新运维工程师临危上任,现存在重大域控故障,急需恢复,否则影响全体公司正常办公。
【项目内容】:Windows AD域控救援
【项目难度】:★★★★
【项目实施】:了解故障→虚拟环境测试→输出解决方案→实施验收
一、灾难降临时,向来都是无感的。
几年前,互联网上曾经被一个句式刷屏“时代抛弃你的时候,连招呼都不会打一声”。同样,在IT运维界,我们也经常被一些无法用“科学”来解释的故障,昨天不是好好的吗? 怎么今天说坏就坏呢。┭┮﹏┭┮--! 这次项目的故障,起因就是这么莫名其妙。"故障不知所以起,一往而深。"
既来之则安之,面之处之豁然之。一种知识用途千变万化,同样,一种知识故障也变幻莫测。Windows域控在我们的基础架构中是经常部署的一种基础环境服务,用于集中管理局域网终端设备,统一认证,具备一定规模的企业,是比较常见的。本次项目遇到两大挑战:
-
主域控无法创建账号
-
辅助域控DNS服务故障
AD域控架构图
二、不幸有一二,万幸亦成双。
常言道,祸不单行。经历了那么多项目后,我们也深感天朝文化,博大精深,这些都是古人总结出来的精髓。我们在了解故障情况后,通过远程发现一些惊喜。也正所谓,”祸兮福所倚,福兮祸所伏“。
惊喜一:通过查询AD域控五大角色,个个健在。
惊喜二:主/辅域控为虚拟机,建立在Citrix虚拟化之上。
这也就意味着在不影响现有生产环境上,我们每一次的排障只会效果更好。结合虚拟化的快照特性,让我们的操作空间更大,可尝试的测试方案更加丰富多彩。
三、实践实验,数据说话,结果为王。
客户在百里之外的佛山顺德区,我们远程了解情况后,在客户提供的“堡垒机”环境下,我们进行了故障环境克隆,尝试去排障。

Yanbo
IT运维经理
从一线技术员披荆斩棘做到部门经理,离不开卓越的服务能力与执行力,擅于发现问题,对工作往往超出期望!
Alin.z
IT基础架构项目经理
丰富的网络、存储、安全、虚拟化实战经验,做事用心、严谨、精细,主导上百家IT基础架构项目的方案与实施。
颜同学在SANTOM不仅颜值担当,同时技术也相当了得,域控领域独当一面。具备中大型域控架构管理经验的颜同学,在模拟实验中发现五大角色确实健全,瞬间松了一口气。在角色健在的情况下,可以采用AD目录还原恢复,或者破而后立。考虑到生产环境情况下,还原会造成巨大伤害,毕竟时间相隔太久,还原后存在服务器不再信任现有已入域的终端。于是我们借鉴修复程序的思路逻辑,进行“破而后立”方案。
四、万里之船,成于罗盘,百里之行,始于龙华。
经过一天的实验测试,明确了项目实施方案可行后,我们也将驾驶线路规划好。早上9点出发,预计达到时间为上午11.30。
还是这两熟悉的本田,作为项目专用车,它每日“纵横鹏城”,功劳巨大。
颜同学是本次项目实施经理,从他的眼神中看出了一丝实验后疲惫的神态,但又从姿势上感受到一股自信的气息。(此时已经堵车1小时)
终于,在12.30左右达达目的地附近。此刻的我们,已经饥肠辘辘。。在项目经理的壕气宽带之下,我们点了几份“拼多多”快餐。据说这个餐厅在美团还获得了★★★.好评(希望满分应该不是10星那种)。
饱腹一顿后,我们驱车来到目的地园区大门。给我们第一个惊喜:停车不收费!-_^!一下子不知所措。想我们在大深圳,做项目的时候,经常是找地方停车都困难。一大片的停车位,我们随便选了个阴凉的停车位,速战速决。
客户是一家知名的机器人研发生产一体的公司,整栋楼分层作为研发中心+生产基地。
客户周六日休息,走进办公室,慢节奏的气氛弥漫开来,我竟然都产生了一丝消怠感。
客户IT负责任黎工(化名)见到我们,激动得雀跃(kua)欢(zhang)呼。让我想起小时候,看到那些伟大战役,革命队伍会师时那种满眶热泪的场景。几乎能想象到黎工此时此刻的心情,终于要解放了...(纯属个人YY)
客户细心在讲解IT设备情况,俩项目经理们认真记录,脑绘拓扑ing。
机柜里横竖堆满了服务器,横的是机架式戴尔高端型号(虚拟化用途),竖的是塔式联想品牌。
在机房了解情况完毕后,我们开始在真实生产环境中实施。因为我们已经在公司的测试环境模拟过,所以基本上来就可以“一顿操作”,当然也是有顺序,有节奏,有计划的。
通过切换角色操作,主域控恢复正常服务。
最后一步,验证辅助域控的可用性,确保备用DNS查询服务是正常提供的。
四、项目相遇,自是有时。项目完结,终须一别。
历经两个多小时的奋战,AD域控服务器救援成功,项目也顺利完成,此时已是下午4点。运气好的话,还能赶回去吃个晚餐。
再过虎门大桥,心里还是有所忐忑不安的,据说这桥有时候会“皮”一下,抖两抖。
五、既是庆幸也是庆祝,清茶也消愁。
佛山三人行,三字店,三杯清茶,三(da)碗(pen)饭。半个广东人在深圳多年项目的历练下,已然无辣不欢。去年的时候,依稀记得有个项目吃得泪流满面,那是倍感交集的,而这次,是真得辣!!
朴素的茶,朴素的杯,再加上朴素的水。
想不到,我也今生有幸吃上一次“盆菜”。
同是企业网管,我们在遇到很多IT项目,许多客户一心只求性价比。此次出行,难得遇到一位对于技术价值认可的“同道中人”。
同是天涯IT人,相逢必定长相识!你一码,我一码,我们码上是朋友。