“你们把这期网络搞坏了!”
2019年8月的一天,时任H省NPO( 网络性能责任人 )的张XQ(以下简称“老张”)坐在办公桌前,脑子里还嗡嗡地回响着客户的话语“你们把这期网络搞坏了!”
怎么办?2019年6月,Z客户计划在9月举办的国家级运动会前实现5G网络试商用,我司好不容易历史性地成为客户的独家设备与服务供应商,能否顺利完成这届运动会的保障对项目组至关重要。然而项目开始没多久,客户4G网络质量就出现断崖式下滑,投诉纷至沓来。
老张知道症结所在——客户网络从2G到4G时代主城区使用的大部分都是友商设备,现在为实现核心城区主干道十纵十横的5G信号覆盖,就需要大插花,除了要完成异厂家锚点搬迁替换及4G的D频段退网外,还要同步做天馈融合改造,这些会导致各个频段之间干扰过大,也相当于4G网络重造,当然会影响到网络质量。
老张揉揉太阳穴,想起前几天得知合作方骨干员工下个月要离开Z市了,真是一波未平一波又起。他知道项目组最近工作很累,而且兄弟们都在全力以赴地干活,结果却如此不尽如人意,任谁都会灰心。难道大家还没开始就要结束了么?
8月份开始接手Z市优化项目,经深入调查研究,老张逐渐梳理出一套应对策略,对团队骨干成员职责的重新划分也在慢慢进行。一会要开始的作战会议就是要和大家一起讨论这个事情。原本还有些信心,现在却有点迷茫了,进度停滞、士气低迷、时间紧张、骨干流失,“我们还能行么?”他在心里问自己。
他边整理会议资料边思考:“现在很多站点,退了友商的设备,但是5G站点没有建成、有些建成了但没有开通或者没有调测,5G用不了,4G回不去,网络通话和数据业务都频繁掉线,用户怎么能不投诉?得先把投诉降下来,有成效才是最好的鼓舞,要先让队伍看到希望。”这么想着,老张推开了会议室的门,项目组骨干成员都在会议室等着。
“兄弟们,这次面对的情况和以往都不同,不是单纯复制以前的搬迁和升级模式就可以的,我们必须采取新的方法。”
“什么新方法?”沉默的项目组内忽然有了声音。
老张打开投影机,指着屏幕说,“网优前置、信息拉通。这个方案我在以往的项目实行过,效果不错。但这一次我们需要把网优介入的控制点从两个增加到五个,规划阶段就和设计院对接,保证前台和后台的数据在第一时间就能互通;建设阶段,网优团队通过远程监控和现场稽查两种方式监控施工质量;优化阶段要快速地完成单站优化和网络质量调优,尽可能缩短新站开通和投入使用的时间。”
大家听了都觉得有戏。这样一来,新站点开通的速度就能够大幅提升,即使其他频段关闭,客户至少也能保留一层网络和数据,从而大幅降低此次站点建设对用户的影响。
后台负责人陈少林提出了建议;“当天如果无法开通5G站点,那么我们就在凌晨把网络回退到原来状态,这样第二天白天用户还能正常使用网络。”大家开始踊跃讨论可落地的方案细节。
会议结束后,老张悄悄舒了一口气,“士气和队伍这两关,算是过了。后面才是困难的开始,怎么才能让网优前置落地呢?客户能答应么?我们一直接触的是网优中心的客户,工建中心的客户能接受我们的方案么?”
老张刚接手项目组不久,就向领导推荐马英杰(以下简称“小马”)负责对接客户工建中心。小马以前负责过省、市多个网优团队,做事情有思路有想法,客户交代的事情她也都能跟踪闭环,得到客户的高度认可。老张非常希望她能借助以前的经验,进入客户工建中心,只有这样,网优前置才有实现的可能。已经过去两周了,那边情况怎么样了呢?
从“透明人”到“马姐姐”
小马已经在客户的5G联合作战室待了两周,还没找到机会和客户多说几句话。
“怎么办?”小马想,“网优前置能大幅度提高站点开通的效率,节约时间,也降低后期出现问题的概率,这是符合客户需求和目标的。现在关键是,如何能和客户说上话?”
小马只能按照以前的经验摸索,和客户共同上下班,每次汇报会和复盘会都提前准备很多材料,虽然还是没多少机会发言,但是客户已经慢慢知道,华为有个同事在这儿和我们一起办公,偶尔碰到还会主动和小马打招呼,“马工,这么早啊!”小马开始有了新的称呼“马工”,也终于开始摆脱“透明人”的身份。
但这还不够,网优前置这个大变动还没机会和客户讨论,小马开始分析能从哪些小地方着手,展现诚意和新的做法能够带来的效果。
小马是网优出身,第一想法是增强网优和工建之间的理解,双方理解得越深,合作才能越紧密。
于是她开始整理相关资料,运用思维导图等直观形式展现数据和进展,列出可能出现的风险;同时和客户一起建立和梳理流程,因为5G的网络建设是一个全新的挑战,没有可以照搬的流程,小马就跟着客户一点一点梳理。随着5G开站审核效率的逐步改善,工建中心客户对小马的称呼也从“马工”变成了“小马”,网优前置的方案也获得了各方的认可。
有了方案,还要落地才行。Z市夏天太热,中午的室外温度过高,不适合站点施工。小马跟着客户和施工队一起,清晨和下午太阳落山后才能站点建设,白天能够上塔作业的时间有限,所以常常得干到晚上12点,然后才能准确地统计出当天的数据:今天开了多少站,有多少没开,原因是什么,如何解决问题,有哪些风险,如何规避,针对当天无法开通的站点,回退至原来状态,确保第二天用户可以正常通话和使用数据。这些方案和数据都是全部内部共享,保证相关人员步调一致。客户和小马收工时,差不多都在凌晨2~3点,天又快亮了。
与此同时,项目组和客户一起成立了质量稽查队,每天根据整理出来的当天站点建设数据,随机去现场抽查站点建设和质量状况,对做得好的站点表扬和激励,帮助暂时做得不好的站点改进并跟踪直到闭环。种种举措下来,站点建设效率大幅度提高,客户开始开玩笑似地称呼小马为“马姐姐”。
网优前置终于顺利落地,在大建设大调整时期由于工程施工带来的网络质量波动得到了有效控制,助力客户保障了施工质量,在运动会召开前顺利完成1000多个5G站点的交付。运动会如期举行那天,现场由双方领导亲自带领的重保团队分工值守在各个关键点位模拟、摸排、复测,后台保障团队目光紧盯着看板上持续攀升的用户数与网络负荷。100、500、1000、10000、30000、50000……同时在线用户数定格在了50000余人,刷新了H省场馆保障用户数的最高纪录,终于完成了开幕式保障活动。 “华为5G网络质量远超我们的预期”,客户高层竖着大拇指说。项目组成员心中悬着的大石头,终于落地了。
要争十大优秀城市了!
首战告捷的喜悦刚过,更大的挑战接踵而来,中国移动集团为快速建设一张全球领先的优质5G网,在全国范围内开展“双十双百”竞赛活动。Z市的5G网络建设刚刚起步,短时间内海量站点插花入网、70%的天馈融合改造、传输、电源、铁塔配套等等难题,客户和不少同事都发出了疑问:我们真能入围十大优秀城市么?
在誓师大会上老张用古语激励团队:“有志者事竟成,破釜沉舟,百二秦关终属楚;苦心人天不负,卧薪尝胆,越甲三千可吞吴!”H省C&SI部长齐阳用上了当时正火热的电影里的一句话:“我命由我不由天。”代表处交付与服务部长毕利银说:“没有不困难的项目,再难的项目也是由一个一个小项目组成的,咱们抽丝剥茧,各个击破。”
团队上下齐心,各模块开始自领任务,投入战斗。面对测试设备资源受限、50天内3000+站点入网,项目组举行“赛马”活动,按照行政区域组成六大突击队:雄鹰、鲲鹏、猛虎、战狼、飞龙、雪豹,张文杰牵头、老将丁星、记顺利、蒋敬尊采用老带新方式,每周制定计划、每天晾晒进度,人休设备不休展开了车轮战。外场王琦、薛军联合后台创新采用“单站单优、滚动优化”新模式,保障“同步建、同步核、同步查、同步入、同步优”,将新开站入网时长由7天压缩至24小时以内,由此也造就了文产23楼东边后台团队24小时不熄灭的灯。
同时客户与我们一样加班加点,也在积极备战,一举解决四大关键制约问题:关键站点入网、关键10GE改造、关键故障清理、大面积广电干扰清频。
几个月后,项目组成员和客户一起,一点一点地搭建起整个Z市的5G网络,实现了主城区的5G覆盖,大幅减少了以前出现的空白区域和线路断点。
项目进展顺利,大家也摩拳擦掌准备开始下一阶段的网络质量再提升的筹备工作,可谁知一场突如其来的疫情打乱了全部的计划。
疫情肆虐、交通不便、出行困难,评选验收的倒计时牌还在一分一秒地流逝着,新的紧急任务又来了。医院是防治疫情的重要阵地,保障医院的网络和远程医疗无异于为阵地输送炮弹。项目组分出一部分力量投入医院的网络保障工作中,剩余的成员则继续投入到全市的网络建设和优化中。
3月份,疫情有所缓解,之前投入疫情保障的人员也得到了释放,高鹏、向阳和喻奎赶紧拉着兄弟们一起加快进度,22个网格22组队伍你追我赶拼质量,每天的日常就是测试、分析、优化、提升、再测试、再分析、再优化、再提升……
新网络新系统,新测试设备,往往是第一天解决了一个问题,还没来得及开心,第二天又出现了一个新问题,循环往复。
终于到了收官阶段,却又出现了新问题——精品网格要求忙时平均车速最少xx公里/小时的数据,但Z市老城区的几个网格道路狭窄,人流量大,就算是组里的老司机,竭尽全力也无法在早晚高峰时达到这个车速。平均车速几乎成为达成精品网格的唯一瓶颈,大家紧锁眉头,恨不能自己长个翅膀,带测试设备飞过拥堵路段。
这时,老张突然想到认识的一个司机朋友,其车技了得。“要不找她来试试,她更熟悉Z市的道路,也许能找到不同的路线,知道哪里可以变道,哪里可以抄近路,哪个地方转弯更优,这样车速能快点。”
事实证明,这确实是一个好方法。后续在技术专家李志超的支撑下又克服了各种问题,在3个月内全网滚动优化了15个轮次、调整了1000多个小区的天馈、优化12多万条参数、测试总里程超过两万公里,可环绕地球1/2圈,终于在4月底为客户参与的“十大5G优秀城市”网络质量测评画下了句点。
7月15号中午一点,这本是午休时间,那天老张却仿佛有感应般,没有休息,而是拿起了手机,刚好看到进来一条微信,“Z市第二名!”内容不多,但随着微信群内消息不断弹出,老张突然有点哽咽,在“有诗有酒有繁花”的微信群里发出邀请:“兄弟们,今晚一起喝酒吧!”
太阳正高,花香正浓,新的项目正在等着大家。
破釜沉舟卧薪尝胆,金戈铁马战5G。
以梦为马不负韶华,有诗有酒有繁花。