华为在海外做这类项目，基本都是九死一生_风闻

作者：秦志强          

      海外大型数据中心项目交付难度大、变更频繁、经营难控，同时合同条款苛刻，是海外最难做的项目之一。土耳其IDC6数据中心项目交付路上遇到的每一道坎，就像山路中的“十八道弯”，充满曲折和艰辛，只有经历过，挺过去，才能体会行到山穷处，坐看云起时的开怀与淡然。

最后一天敲定施工合同

      2016年8月，经过一路角逐，华为在土耳其电信数据中心（IDC6）项目招标中笑到了最后。还没来得及举杯相庆，巨大的交付压力就摆在面前：这是代表处集成的首个大型数据中心项目，2000平米的白区、2700KW 设计IT负载，当时没有数据中心领域交付专家，地区部的专家资源也集中在白俄罗斯的数据中心项目上，人力严重不足。

      经再三考虑，代表处决定任命C&SI部门本地骨干员工Mert Kilickap为项目PM，一名中方担任TD，C&SI部门主管黎明君（黎叔）则主动请缨担任项目PD。大家目标一致：一定要交付好首个局点，为土耳其数据中心业务发展立好样板。

       客户要求业务快速上线，需要华为在6个月内完成项目交付。工期十分紧张，原计划是11月份安排分包商进场施工，近一个月的时间，经过多次艰苦卓绝的谈判，我们和主分包商E最终达成了主要的采购目标，但一直未能对合同条款达成一致，谈判陷入僵局。

       离计划进场只有两天时，黎叔很焦急，如果再毫无进展，只怕要凉凉。项目组拟定了最后一轮谈判的策略，采购主管冯沙唱白脸，PD黎叔唱红脸，双方在关键条款上进行了长达7个小时的拉锯战，分包商老板还是坚持不接受延误罚款条款。

      黎叔从话里话外听出了E的意思：E首次与华为合作，并不完全相信华为的数据中心交付能力，所以不愿意在合同条款上承担太多的风险。为了打消E的疑虑，项目组展示了华为在全球丰富的数据中心项目交付成功案例，以及对于本项目投入的技术团队和充分的准备工作。这番展示给了E信心，E觉得和华为合作应该靠谱，最终接受了合同条款。

       签完合同已是深夜十二点多，按计划，分包商第二天就应该进场了，但是我们内部流程还未走完，来不及等到次日早上，凌晨一点，黎叔带着歉意打电话给公司内部各个流程节点的合同评审人，逐一解释并请求他们从被窝中爬起来评审合同。“折腾”到凌晨5点多，就差代表评审了，黎叔和冯沙得知代表会在早上6点多出差，他们又赶紧驱车赶到他居住的小区楼下，“逮着”他完成了合同评审。

       这个不眠夜，项目组完成了几乎不可能完成的任务。早上9点，分包PO顺利下发，分包商按计划进场，交付终于可以开干了！

一场百年一遇的暴雪

       2017年初，项目处于土建高峰期，现场上百号人正在进行紧张的交付。不巧的是，伊斯坦布尔下了一场百年不遇的暴雪。

      那场雪下了整整一夜，第二天积雪足有30公分厚，工人们还在为下这么大的雪兴奋，喝着茶抽着烟看着大雪纷飞，但转头就发现大事不妙，室外物料全部被大雪覆盖，其他计划的物料也无法发出，项目面临停工的风险。但离给客户的承诺时间越来越近，我们耽误不得。我找到工头，希望继续施工，工头一开始不太情愿，说气温太低，工人冻手冻脚容易产生EHS事故。

      办法总会比困难多，我灵机一动，让他们把宿舍的取暖器全部搬到施工区域来维持温度，这样施工得以继续，虽说进度慢一点，但是比起停工还是要好很多。当时气温零下十几度，走道和施工出入口寒风刺骨，现场几个交付兄弟轮番出去巡检EHS和施工质量，冻得扛不住了就回办公室取暖。这样持续了大概两周，积雪也慢慢融化，交付进度恢复正常。

      很感谢分包商伙伴，在如此恶劣的天气下，我们的项目并没有中断，进度也没有受太大影响。

​客户突然踩了刹车

       2017年2月3日，对项目组来说是一个黑色星期五。交付正热火朝天之时，项目组收到一个坏消息：客户新上任CTO不看好数据中心业务前景，要求项目暂停，在没有进一步通知之前，不允许继续施工。

      等待了一个多月时，还没有音讯，我们只好释放了大部分现场资源，这期间我们一直和客户保持沟通，但直到7月初，客户才通知我们项目正式重启。我们立即召集所有分包商商谈重新入场的计划，结果发现事情根本没有我们预想的那么简单：分包商认为合同签订都快一年了，不能接受原合同价，要求涨价并索要停工期间的误工补偿。

       我们查看了国际原材料价格趋势，发现从2016年10月到2017年7月，大宗材料价格确实有较大幅度的上涨，同时由于土耳其货币贬值，本地劳务价格也有上涨。如果按照原单价，项目将出现亏损。既然停工是客户发起的，那么客户理应承担这些停工损失。我们去找客户沟通，客户承诺不会让华为有损失，要求我们先入场再谈补偿之事，但我们坚持补偿损失后再入场交付是合理的诉求。

      僵持好几周后，经过代表处与客户商谈，落实了补偿，同时客户也给出了最后期限，要求2018年2月28日必须完工，如延误将巨额罚款。

客户说延误一天罚一百万美金

       2017年9-12月是项目的爬坡期，那段时间地区部负责数据中心的同事都在忙着土耳其BTK数据中心项目的交付，我们项目现场交付的只有本地PM、本地技术专家和我，三个人顶着这么大一个数据中心的交付，很多问题都跟丢了，项目到处冒火：分包商抱怨我们验收付款太慢，没法给工人支付工资，有几次甚至直接停工；我们采购的电缆迟迟不能到货，导致工人窝工，直接向交付副代表投诉；客户频繁提出变更，指定品牌，华为内部流程又比较慢，客户不断地跟系统部抱怨我们……

       到了12月底，从白俄数据中心项目中抽身出来的项目PCM张涛加入我们，担任副PD，协助黎叔进行项目交付管理。那时候项目中好多重大问题都需要强有力的推动，涛哥的到来真是雪中送炭，一来就很犀利地推动问题闭环。有一次，为了一份客户指定的文件审批签字，涛哥在领导开会的会议室前硬是等到晚上11点。这种雷厉风行的作风，让很多问题很快得到解决，分包商遇到问题也积极向他求助，项目交付也逐渐顺利了。

       客户项目Owner是一个非常严苛的人，特别注重承诺。眼看承诺的日期快到了，现场还有大量的硬装没完成，有一次他看完现场后，问黎叔：“你有能代表华为的官方授权吗？” 黎叔说有，他立即说：“2月28号那天请把你们华为的律师带到现场来，若项目没完成我们就签一下罚款文件，一天罚一百万美金，谢谢！”然后和黎叔象征性地握下手就走了。第二天，客户还邀请了法院人员来项目现场拍照取证。

       看来客户是铁了心了，为了赶在2月28日完成硬装，我们邀请了所有分包商老板到现场开会，督促他们增加资源投入。在最后的那几周，工人人数增加到300人，项目现场热火朝天。我们每天和分包商过进展，制定第二天详细计划，一直忙到凌晨。我们的努力让客户的现场管理人员看在眼里，他们都留下来和我们一起加班，有问题及时澄清和确认。

       到了27日，现场主体硬装完成了，只剩零星收尾。晚上，我们将主要区域打扫得干干净净，还找人连夜做了一段项目交付的延时摄像，在现场接待大厅循环播放，在紧张和期待中等待第二天的到来。28日，项目Owner来到现场检查，刚开始一脸严肃，系统部主管明剑纲给客户详细介绍每个系统的实施难度以及华为在交付过程中的努力，对于极少量没有完成的工作，也逐条解释了我们的下一步计划。

      一边听一边检查的客户最后脸上终于露出了笑容，看到那段延时摄像尤为惊喜，对华为表示了感谢。我们每个人心里那块石头终于落地了。

凌晨的简易火锅

       接下来就是准备测试，我们对质量和安全最大的担心就是冷冻水系统漏水和电缆连接短路。我爬到空调底下，一台台检查管道是否有漏水，同时将地板一块块掀开，检查地板下主管道阀门处漏水情况。53台空调加几百个阀门，检查完之后人基本累散架了，还好这些都没有问题。

       电气安全我们则投入了更多的精力。项目有60多套低压配电柜，300多个开关，我和机关来出差的宋晶逐一进行了检查，发现两台UPS接线存在相间短路，低压柜一些开关相序错误，幸亏在上电前发现，否则后果不堪设想。我们将全部配电设备检测了三遍，最终项目成功上电，没有发生任何电气事故。

       那一个月，现场有太多的工作：DCIM的安装调测、空调控制方式更改、UPS和直流电源设备故障处理、电池性能测试、柴油发电机和冷水机组整改、分包商验收以及其他分包PO谈判，现场几个中方同事基本都是忙到凌晨，连晚饭都顾不上吃，只能抽空多买一点肉、土豆之类的食材放在宿舍冰箱，凌晨回去后做简易火锅。虽然很累，但开心的是，我们的专业赢得了客户的认可。

一场与时间赛跑的整改

       2018年4月底，国际专业认证机构Uptime专家到项目现场进行建造认证测试，华为整体解决方案真正接受考验的时候到了。按照测试程序进行的每一项测试都很成功，项目组很欣慰。但是第二天下午，一个失败的测试狠狠地给我们浇了一头冷水：在系统满负载运行稳定后，我们需要进行冷冻水系统故障模拟测试，当一边的阀门关闭后，从BMS系统监控屏上显示机房温度却一直在上升，5分钟的时间从30℃上升到42℃，整个机房跟蒸笼一样。

      我们火速暂停测试，排查原因，原来是一段管路连接错误，本该接到A路的，分包商接到B路去了。现在进行管路连接更换，不亚于对冷冻水系统进行一次“大手术”。我们按照平时的交付进度初步估算，整改至少需要2天时间，而Uptime专家返程时间早已经安排好，要是这次测试失败，且不说得重新给Uptime下PO进行第二次测试，客户罚款肯定是免不了的。

       当时作为项目中方TD的我都绝望了，我们好不容易熬过2月28日那一关，如果因为此事导致客户罚款，那我在公司真是没脸待下去了。

      当时涛哥打电话给分包商老板，说明了事情的紧急性，要求他亲自到场组织整改，我们对着整改步骤倒排了紧锣密鼓的时间计划，分析认为时间是来得及的。

      第三天下午4点，整个系统停机，3辆大罐车开启两个泄水口，将50多吨的乙二醇水溶液泄至罐车内；晚上8点泄水完毕，开始更改管道，为了确保管路一次性连接正确，我和地区部的专家Vitaliy通宵监督施工情况；第四天早上6点，管道更改完毕；上午12点，压力测试正常。不得不提一下参与整改的十几个工人，连续高强度工作了20个小时之后，基本都累趴下了，倒地就睡。

       之后我们再次进行故障模拟测试，关掉阀门之后，机房空调制冷输出一切正常，问题被我们有惊无险地化解了。当天晚上10点多，Uptime专家完成了所有测试案例，这意味着我们通过了Uptime Tier III建造认证测试。

      技术专家Alexander说他认证过很多数据中心，其他项目也出现过一些问题，但没有哪一个项目能像华为团队一样，在这么短的时间内修复了这样棘手的问题。夜里12点，我们开车行驶在黑海之滨的高速公路上，我头倚着车窗，看着满天繁星，感觉到前所未有的放松。

       多少个日夜的坚守，终于换来了一点微薄的成绩，项目的过程虽然曲折，但我们的坚持迎来了最后的胜利。

        

      2018年5月，客户CEO和CTO来到现场，看到这座获得设计加建造双认证的现代化数据中心已经可以正式对外运营增收，同时客户内部的老旧数据中心也可以进行迁移整合，很惊讶华为在这么短的时间内完成了如此复杂的项目建设，当场对华为项目团队表示感谢！

       涛哥说，在海外做大型数据中心项目，基本都是九死一生。此言不虚，过程固然很痛苦，但多点磨难，多点挫折，未来，我们的结果会更好。

来源：华为心声社区

原文标题：《浪漫土耳其的“山路十八弯”——记IDC6数据中心项目交付》    

原文链接：http://xinsheng.huawei.com/cn/index.php?app=forum&mod=Detail&act=index&id=4233657