史蒂芬·诺曼
在过去的几周中,我们一直在分享来自RBS Global Markets的长期CIO / CTO Stephen Norman的新犯罪惊悚片《 Trading Down》的摘录。这是他的处女作。
在这里,在第三部分也是最后一部分中,我们回到汉密尔顿数据中心危机中的行动。
在这里和这里赶上以前的摘录。
斯蒂芬·诺曼(Stephen Norman)的交易
汉密尔顿数据中心:东部标准时间01:00
曼妮没有答案。没有人有任何答案。巨大的故障安全空调阵列已在两个大厅停止工作。即使它们是独立且没有联系的。有力量。冷水机中有冷水,但没有冷空气喷出来冷却计算机。好像CRAC单位已经罢工了。
哈代(Hardy)的危机后来开始了,但似乎决心要赶上。曼妮走到那里,亲身感受到了炎热潮湿的气氛。那是二十四度,并且上升。桥上的人们开始谈论去DR,关于搬到威彻斯特。保罗·卡彭特(Paul Carpenter)鼓励他们。他听起来像搬家。
曼妮知道那不是那么简单。进行灾难恢复就像一只手用降落伞跳下悬崖。DR意味着关闭在Hamilton中运行的每个应用程序,并在Westchester中启动它-处理数据的镜像副本。有成百上千种应用程序,其中大多数是在日末批处理过程中进行的。去灾难恢复就像将城镇撤离到新的房屋和工厂中一样,转移半成品的汽车和半熟的晚餐,并期望一切正常。整个过程将需要一整夜,并且后果将持续数周。就汉密尔顿而言,这是全新的,他们甚至从未实践过,因为周末变更日历太满了。
他可以告诉AppDev家伙也有同样的感觉。他听过克里斯·彼得斯(Chris Peters)与木匠争论。
“保罗,我们必须修理冷却装置,好吗?相信我,我们会比接受灾难恢复好100%。”
是凌晨1点。麦奎德的工程师声称距离287十英里。来自IBM的一天中的两个工作人员到达了。他们冲进Hardy大厅看一下主机。
事件经理试图让Mike Tucker和Property Services参与其中。还没有运气。
来自IBM的Frank Castagnetto加入了此次电话会议,大概是在他的家中。Castagnetto听起来像一位高中理科老师。
先生们,给您一些事实。Hardy Hall的温度现在为28度,每五,六分钟升高一度。当它达到32度时,我们将关闭主机以保护它。你有20分钟的时间,给予或接受。银行需要做出一些决定。
“即使到那时我们还没有去灾难恢复?”那是保罗·卡彭特。TIS Americas的负责人赤身裸体坐在特里贝卡(Tribeca)的阁楼公寓里,面前是扬声器。他的白猫在他旁边的沙发上伸出来。尼尔·詹金斯(Neil Jenkins)去年迫使他将大型机支持外包给IBM,他一直都知道这是一个错误。他充满了清醒与公义的愤怒。
“是的,”卡斯塔涅托说。
“我们需要更多时间,”卡彭特说,“电工才刚到。”
Castagnetto说:“二十分钟,然后我们就完成了。如果要进行灾难恢复,则需要立即做出决定。一旦我们关闭大型机,您就无法将其摆放到Westchester。”
木匠没有回复。
“好吧,”卡斯塔涅托说,“那么尼尔·詹金斯在哪里?”
曼妮不记得过去一个小时听到尼尔·詹金斯的消息。他淹死了。和出汗。在Hardy Hall的大型机旁,他与Frank和年轻的IBM工程师站在一起,观察温度的升高。现在是29度。一些UNIX服务器已经关闭了自身。那是一场彻底的灾难。
他把手举到最近的CRAC单元的烤架上。通常情况下,它会吹出冰冷的冷空气,就像冰川中的冰一样。空气飘散了。那是温暖的微风,与其他所有东西一样的温度。一排绿灯从其状态面板闪烁。就此CRAC单元而言,一切都很好。
Mannie踢了CRAC单位几次,直到疼痛使他的眼泪流泪。“该死,”他喊道。“该死的你!你真是垃圾,你为什么不工作?为什么?你这人怎么回事?给我冷空气,该死!”
他看着最近的过道上的服务器机架,所有做饭,都散发着有毒的热量。它们混在一起,主要是针对全球市场的交易和风险系统。EOS处于中间阶段,但其他系统大部分是在夜间完成的。市场明天早上7.30开市。
他从眼角移开,看到温度表移动到30摄氏度。曼妮的脑袋里有些东西响了。
“坦率地说,关闭通道D和E中的所有东西。”
“好吧,”弗兰克说,“我会警告数据库准备好……”
坦率地说,我说要关机。像这样。
他搬到了第一个内阁。门框内有一个断路器。甩开警卫,他跳开了开关。什么都没发生。他用双电源严厉地提醒自己,没有单点故障。他找到了第二个破碎者并将其翻转。小灯停止闪烁,风扇熄灭。就像在杀东西一样。
“剩下的,弗兰克。现在。”
“曼妮,天哪,我们做不到。”
“我们不这样做,一切都将在二十分钟之内消失。我们需要时间,以便一些混蛋可以做出决定。弗兰克,随便吧。现在。”
他回到了NOC,找到了Luis,John和Karen。
“路易斯,约翰,打开所有的门。还有卷帘门,从送纸架开始。一切。我要轻风轻拂。”
“看门狗呢?”约翰紧张地问。“他们晚上不放手吗?”
“ F狗。狗不会产生足够的热量来担心。跑,跑,该死,大型机快要走了!”
汉密尔顿数据中心:美国东部时间01:23
听起来很压力,Marcie Schulman回到了科技桥。“与企业联系以决定是否要进行灾难恢复的电话现在正在发生。这项业务正在进行,但没有TIS代表。尼尔,你在吗?有人听说过尼尔·詹金斯吗?他在另一座桥上吗?”
没有人听说过尼尔。在寂静中,曼妮跳了进来。
“伙计们,这是汉密尔顿的曼妮·塞博维兹。麦奎德来了。”
“大型机呢?”问事件经理。“ IBM二十分钟了。”
“我们花了时间。我们关闭了一个sh * tload。”
“你能更精确吗?”
“电子邮件,全球市场交易系统,所有风险服务器,销售,随便你怎么说。在Hardy Hall大约有一半的装备。”
“哦,我的天哪,”事件负责人说,忘记了他的台词。
“ IBM表示大型机可能会持续30分钟,” Mannie说。“那肯定就消失了。”
汉密尔顿数据中心:美国东部时间01:33
“汉密尔顿,您有McQuade更新吗?”事件经理第四次说。曼妮(Mannie)跑到冷却室(Chiller Room),将麦奎德(McQuade)的高级职员拖回了NOC。他是一个穿着白色T恤的银发瘦弱的男人。他的手和指甲上沾有银色的油脂。他看起来像汽车修理工。
“好?”曼妮说。
该男子说:“有人更改了冷却器控件上的设置。”“所有泵都设置为手动。我们将它们改回来了。”
“和?”曼妮说,杀了弗兰克。
机械师就坐在那里。曼妮想打他一巴掌,想尖叫一声。
该名男子耸了耸肩。
“没有区别。没关系,水温很好,水泵很好,保险丝也很好,一切都很好。”
他抬起头,微弱的反抗。“这些冷却器没什么错。”
希望蒸发了。甚至事件经理也保持沉默。
“对不起,各位,我是克里斯·彼得斯。股票技术。”
克里斯坐在瑟利路(Thurleigh Rd)的家门口,黎明的阳光直射在脸上。事件报告称,他的美国交易系统全部瘫痪。EOS Americas股价下跌。美国的所有后台系统也是如此。十年来,他从未经历过类似的经历。他轻声说话,试图掩饰自己的绝望。
“伙计们,到目前为止,所有警报……都是来自服务器的。个人计算机。对?但是空调单元CRAC却在散发温暖的空气。他们正在吸入温暖的空气。他们没有警报吗?为什么不?”
您几乎可以听到Property公司的Mike Tucker试图弄清楚这一点。曼妮可以听到有人在后台对迈克窃窃私语。
“克里斯,CRAC的恒温器全部由印度的楼宇管理系统控制。中央,你知道。”
“那么,为什么CRAC不抱怨?”克里斯·彼得斯问。“他们的目标气温是多少?”
线路上突然响起一阵静电,并传来印度人的声音,浓重的南印度口音。
“这是钦奈的Murali。我可以回答这个问题。CRAC单位应设置为19度。但是我们正在检查……”
有一个痛苦的停顿。
“对不起,请问,这是穆拉利。我们已经调查了BMS。汉密尔顿的空调设置为六十六度。对于这个消息,我确实感到非常抱歉……”
“六十六摄氏度?”事件负责人说,不敢相信。
“是的,我确定要达到摄氏六十六度。因此,先前的发言人提出了正确的问题。没有警报,因为CRAC单元认为热空气是可以的。当温度达到六十七度时,它们将打开!”
乌兹加里斯说:“当他们将冷空气吹过一个死世界时,”他用诗作了陈述。
“好吧,耶稣基督,穆拉利,只要重新设定温度,好吗!”迈克·塔克大喊。
他有理由感到焦虑。除了对美国经济的损害外,如果由于房地产问题而导致损失下降,尼尔·詹金斯(Neil Jenkins)会在权力走廊中摧毁他。
两分钟后,穆拉利回来了,他听起来并不开心。
“权限存在问题。建筑物管理系统不允许。我们对其进行了更改,但随后将其重置为六十六度。我们之前从未见过。”
回到汉密尔顿时,有人轻拍曼妮的肩膀。他转过身来。那是年轻的IBM工程师,他的脸白而满头是汗。
“我们的温度高达33度。在E过道中。我们将降低大型机。”
“不,不,坚持下去。我们发现了问题。”
“我不能冒险。它可能已经损坏了。”
“银行将承担风险。”
“我需要书面形式。”
曼妮环顾四周。桌上已经打开了灾难恢复手册。他撕开一页,在空白处草草写着“ IBM必须运行大型机,直到另行通知”。
“就是这样,伙计。现在跑那个孩子,直到它变成硅水坑,好吗?
曼妮被抽了。他在太空如此遥远,他不担心会掉回地球。他正途经一个遥远的星球,无论生病还是生病。
汉密尔顿数据中心:美国东部时间上午01:40
玛西·舒尔曼(Marcie Schulman)重返科技桥,听起来很猛。
“执行委员会已要求对威彻斯特的备份数据中心进行全面的灾难恢复。IT要求延迟20分钟来解决汉密尔顿的情况,这使我们到凌晨2点。该企业已指示IT在凌晨2点执行完整DR。没有其他借口或延误。”
约翰·乌兹加里斯(John Uzgalis)说:“迈克,我们有20分钟的时间进入BMS并降低温度。”“我们可以帮忙吗?”
“我们正在努力,”迈克·塔克(Mike Tucker)说。“该系统由GE出售给我们,但由富士通制造。他们在横滨的工业控制措施。我们到处都有电话。到目前为止还没有喜悦。”
谁配置的?您必须有一个了解它的人。乌兹加里斯说。
“我们做到了。他是承包商。他在泰国度假。”
“我们可以关闭它吗?我们可以拔掉插头吗?”
“它管理着包括伦敦两个数据中心在内的八座建筑物。和交易大厅。不,我们该死的无法拔下电源。”
克里斯·彼得斯(Chris Peters)看着瑟利路(Thurleigh road)上空的牛奶漂浮,穆拉利(Murali)的话仍在他的脑海中响起:当温度达到六十六度时,它们将打开!
这个想法神奇地出现在他的大脑中,成熟,包裹着礼物。疯狂地,他搜索了尼尔·詹金斯(Neil Jenkins)的私人号码。银行基础设施的监护人听起来很沮丧。
“尼尔?是克里斯,听着……这怎么样?只是听着,对吗?”
争论的喧嚣散布在大街上。送牛奶者停下了车来听。坐在台阶上的小伙子在电话里恳求。他听起来好像快要哭了。
“尼尔,为什么不呢?只需让Mannie尝试一下即可。请帮助我们。请给他打电话。”
耸耸肩,送牛奶者继续他的回合。他那段时间看到了很多奇怪的事情,但通常会有一个女人参与其中。
两分钟后,曼妮回到汉密尔顿,打来了一个英国电话。
“曼妮?这是克里斯·彼得斯。这是个主意。不寻常,但这是您最后的机会。”
曼妮惊讶地听了。
最后他说:“你疯了吗?我没那么做尼尔会杀了我。”
“看在上帝的份上,这是尼尔的想法!”回复说:“我只是信使。尼尔说继续吧。”
我要失去什么?曼妮想,对凯伦,约翰和路易斯大喊。
“我们需要吹风机。在这里,越多越好。在接下来的十分钟内。走。”
“就这样做吧。”他对他们那令人难以置信的脸大喊。“路口旁有一家CVS药房,营业时间为24小时。购买他们拥有的一切,越大越好。别想,跑!”
斯蒂芬·诺曼(Stephen Norman)的《 Trading Down》由亚马逊预购,将于2017年11月9日在Kindle上交付。
版权及免责声明:凡本网所属版权作品,转载时须获得授权并注明来源“科技金融网”,违者本网将保留追究其相关法律责任的权力。凡转载文章,不代表本网观点和立场,如有侵权,请联系我们删除。