华为海外二三事:我们做了上千次项目测试,惊动了当地警察局

来源:《华为人》、心声社区  作者:仇政收藏
2017-10-25 10:42

近年,物联网发展迅速,市面上对应的解决方案也层出不穷。华为基于无线通信技术,历史上首次主导标准,推出了NB-IOT(Narrow Band Internet of Things,窄带物联网)解决方案。
和当前其他蜂窝物联网方案相比,NB-IoT技术的功耗更低,覆盖更好,广泛适用于各种低功耗广覆盖场景,但其商用之初并非一帆风顺。
由于该标准是由华为事实发起的,友商出于专利博弈考虑,刚开始并不是很支持,一些运营商因为存量被友商绑架的关系,也一度非常犹豫。赢得海外大国大T的支持,对商用来说就显得至关重要了。
这个时候,总部给我们在一线的产品管理部门下达了死命令:必须争取到德电的支持!
深夜上千次测试竟惊动警察
我就是在这个背景下,于2015年外派德电MIC(无线创新中心),担任该项目的项目经理。幸运的是,我们有技术方案,刚好德电也在思考如何通过技术创新,发力蜂窝物联网市场,我们一拍即合。通过提供E2E网络+商用演示case的方式,我们撬开了德电的大门。
与德电牵手的case就是智能停车。停车位难找是大城市的通病,我们通过在停车位下预埋集成了NB-IoT模块的传感器,使得车来车走的信号通过NB-IoT网络上报给云端,司机通过app就能实时看到停车位的占用状态了。
桌面版demo:智能停车
记得2015年10月这个智能停车demo刚上线时,NB-IoT还处于预研阶段,只能做功能验证,不适合做可靠性测试。
而客户迫于市场压力,三天两头的安排演示接待,我们心里捏了一把汗。演示至11月时,客户抱怨,说外场的demo不稳定,常常误报,怀疑我们产品设计有问题,扬言如不能在两周内解决,将放弃对华为NB方案的支持,大家非常紧张,连夜成立了专项攻关小组投入调研分析。
我们对各个网元排查下来,都没有发现问题,日志也一切正常。时间已过半,却没有任何进展,机关开发代表武亮平急了,抽调研发核心骨干们连续几个晚上攻关。在现场的一线兄弟,更是不分昼夜地跑各种测试用例,挖掘故障规律。我们累计重复测试打点上千次,甚至输出了温度、湿度和地磁值的变化曲线图。
上千次是什么概念?平均开车验证一次,需5分钟,上千次,就意味着一周之内,我们在客户的停车场开了83个小时。该举动把保安和当地警察局都惊动了—-以为我们是恐怖分子大半夜在埋炸弹。白天为了不影响停车场正常使用,我们只能在夜里见缝插针进行测试,才引起了这样的误会。
工不枉人,我们终于发现了故障规律:早晨故障率最高,其次是下班前,晚上最少,每个sensor(传感器)每天都有所不同。经过宏观统计分析,发现问题是普遍的。难道是温湿度引起的?测试专家关继文怀疑是下雨导致NB空口的传播特性发生改变,于是把车检器泡在冷水、热水、泥里做了各种对比,然而依然一无所获。看到我们做这么严酷的场景测试,供应商伙伴都惊呆了。
然而,问题仍然没有精确定位,客户VP威胁说,要在后天和产品线总裁的对标会上投诉我们,还扬言说要“send you back to China”,让我提前结束外派滚回国。
事到如今,一切可能的环节都检测过了,那么剩下的没检测的部分,哪怕再不可能,也不得不去怀疑了。既然客户横竖要投诉我,我就豁出去了。在机关专家的建议下,我指出,有没有可能是德电的频谱出了问题? 客户第一反应是,怎么可能?我们欧洲第一大T德国电信这么严谨,而且又是这么重要的项目,负责频谱规划的部门,怎么可能出错?而且,现网频谱是能随便动来动去的吗?! 当场拒绝了我们的提议。
我们给出推理依据并指出,如果是频谱配置发生变化,GSM跳频会带来干扰,在白天话务忙时,尤其明显,会影响到NB的工作,导致误检。德国人还是理性的。只要我们说的有道理,他们愿意验证。德电工程部门给我们借来了扫频仪,开机守候了不一会儿,兄弟们的眼泪就湿润了 --- 果然是频谱干扰。客户那边忙做一团,VP抄起手机叽里咕噜对着电话里一阵德语狂骂。而此时,距离CEO峰会开始,不到6个小时。
从那之后,但凡需要现场测试,我们再也不用等到夜里了。只要提前通知,客户就会提前联系物业,把停车位封闭好,留给我们使用。自己挣面子的感觉,真爽!
第一次demo成功上线后,和客户2个部门的VP合照。我是拍照的~
超期服役也不掉链子
按照约定,2016年4月底,NB-IoT的智能停车demo就圆满完成自己的使命,光荣退役了。谁知德电的客户又提出,为了接待一个亚洲运营商的CTO,要重启demo系统,延长服役期。但我们的demo是按预期使用寿命设计的,如果延长服役,除了电量不足以外,会遇到很多未知的问题,演示风险非常大。而且不巧的是,早在去年底,车检器为了防水,外壳都用防水胶封死了,电池没法更换。客户说,不管用什么手段,必须保证demo恢复,哪怕是DIY,也得必须搞定。
看到客户这么着急,我们也理解这是东西方大T联合推动产业的好机会,不能被小小的电池给难住。于是,我们笨人用笨办法,上锯子!
经过整整半天的折腾,我们把所有的车检器都给锯开了,我们的手也磨出了水泡。有时候成功和失败之间,往往就是差一个水泡。换好电池,启动系统,在测了将近一百次之后,客户对结果表示满意,大家悬着的心放下来了。
谁知,就在我们以为万无一失的时候,悲剧发生了。演示的前2天,所有的车检器都失联了!失联,就是什么响应都没有了,App上看不到任何状态。客户都快急疯了。VP直接给我打电话,一阵咆哮,“if it not work, I will kill you!” 我理解,这可是有史以来德电最重要的一次demo演示,对方的CTO不看好NB,而德电CTO想要借这个demo去说服他。如果这个demo黄了,不知道有多少人要丢饭碗。只有客户成功了,华为才能成功, 我们必须顶住压力,尽快解决问题。
2016巴展前,德电集团CTO Bruno带队验收NB-IoT live Demo
好在有了过去的无数经验,我迅速检查了sensor、频谱、射频、核心网、App server的状态,心里有了数,初步判断不是华为的问题,可能是传输故障。于是安慰客户说,别怕,跟我走一趟,我们去机房看看,是不是传输掉链子了。现网机房,平时不能随便进,安保流程非常复杂。出于对我们的信赖,客户二话没说,协调了一大圈,我们顺利进机房了。只用了一秒钟,问题就定位清楚了:友商的交换机挂了。灯不亮,风扇声音异常。交换机发出的刺耳的告警声,在我听来,就像是黄鹂鸟一样好听。客户连夜更换了新的设备,半夜11点发来短信,请求我们检查系统是否正常。我无比自信又自豪地告诉他:看看你手里的app,sensor状态已经恢复了。
发出消息的那一刻,我整个人都被感动了。一款超期服役,仅仅用于功能测试的原型系统,在经历诸多劫难之后,最终证明了自己的实力,没有一次掉链子,更没有出现过一次产品问题;而且竟然在断网之后还能自动E2E恢复。我们那么复杂的一套系统,可靠性甚至超过了友商的商用交换机。在几年前,这是不可想象的。
演示结束后,客户VP带着他们部门的全部同事,专程赶来,自掏腰包请我们喝咖啡,并致电MIC主任刘威表示感谢。在经历了这件事情之后,客户把德电集团欧洲大陆所有子网的NB- IoT trial项目,都交给了华为全网E2E独家,其中包括2个非华为区域的子网。
干过销售的兄弟们一定清楚,这意味着什么。
截止发稿时为止,因为我司在NB-IoT领域一骑绝尘,德电邀请我司在友商覆盖区域建网。
同时,我司NB-IoT已经在全球十多张网络上商用。
(本文来自《华为人》报,转载请注明作者及出处。原标题:记海外首个4.5G NB-IoT商用二三事)
责任编辑:仝亚娜

查看所有评论