【IT168专稿】对于普通用户，运营商是我们日常生活中密切相关的公司。我们在移动互联网时代，对运营商的普遍看法就是3G网络的支持，如今移动终端的迅速发展让智能手机成为了网络消费的重要端口。各种丰富的应用程序几乎都需要网络的支持。但是在IT技术运维领域，我们很少对运营商们有太多的关注。中国移动浙江公司顺利完成了CRM系统全部四个中心七套核心数据库从ORACLE10G至ORACLE 11G的升级操作，引发了业界的普遍关注。

▲浙江移动信息技术部业务支撑中心副主任王晓征

　　今年8月，中国移动浙江公司顺利完成了CRM系统全部四个中心七套核心数据库从ORACLE10G至ORACLE 11G的升级操作。本次CRM核心系统数据库升级是目前国内通信行业最大规模的单次数据库升级。在短时间内升级成功也获得了人民邮电报的报道。

　　王晓征有很多的头衔，但是他更看重“1997年中国足球乙级联赛注册球员”这个履历。有门将经验的王晓征很幽默的表示，无论是自己从开始的数据库管理员到现在分管IT运维的主管都和“门将”的职责类似。

　　王晓征认为，尽管在大家的眼中，移动都是高富帅，拿着AK47对付联通的三八盖，实际上，例如现在流行的3G，联通和移动的通信协议的区别就类似土豪金和小撸妹。移动完全是凭着一帮人的顽强拼搏，才保持了现在在通信行业的领先地位;联通使用的WCDMA技术是世界上最成熟稳定的技术。

　　中国移动通信集团浙江有限公司的IT基础

　　在网用户数超过全省人口数;生产系统中硬件、基础软件规模大，品牌多。

　　硬件设备4000余台，包括3000余台主设备以及近1000台网络设备;

　　软件套数近1000套，其中近200套各类数据库、接近500节点;

　　机房10余层，分布于六个不同的物理地点，可装机面积近10000平方，已安装机架近2000个;

　　王晓征表示：业务流成百上千，部分核心业务流程复杂、横跨多个系统分类，模块内外部相互交互，任何一个主机数据库异常，作业、程序异常，业务逻辑异常，工单接口积压，数据不一致，都可能造成业务中断、用户投诉。如何保障系统平稳运行，如何提高系统管控能力，如何减少用户投诉，给我们系统维护人员带来深深思考。

　　什么样的系统最棘手

　　李正茂总说，按照垄断的定义，运营商之间竞争激烈，不存在垄断，微信才是垄断。张维迎说，垄断的定义有问题，不能看市场占有率，应该看市场准入条件，所以你们运营商不叫竞争，叫混战。

　　某省移动产品种类数量繁多，资费科目体系复杂，目前系统存在产品数以万计(其中流量产品数以百计)，某些省公司甚至上百万。并且持续增长，无论是用户订购、客户服务还是计费出账环节，都与产品相关，给系统开发和运维带来较大压力。是运营商系统开发维护的最大压力，这一点和其他行业差异较大

　　什么样的系统最棘手：钱有关、政治有关、规则复杂、变化频繁

　　运营商全占

　　银行：前三样

　　互联网：1和4

　　系统升级中的小插曲

　　王晓征举了一个小例子，此前他们出现了一个小问题，凌晨12点钟发现了一个话费余额显示不正常的问题，在凌晨2点的时候就已经解决了。但是巧合的是，有一些人就在这个点上发短信给10086查询话费余额，发现余额增加了，于是以为发短信中国移动就给送话费，以讹传讹，通过移动互联网快速的传播，统计了一下，当天晚上短信业务暴增，这一下影响不小。因此，稳定是国有企业最关注的。

　　国企管理中 稳定压倒一切

　　因为国企的IT系统虽然千差万别，但实际上有一些东西却是相同的。例如国企的IT，首先讲政治，然后求稳定，再然后谈管理，创新根本就排不到前三。

　　国企的IT系统一旦发生故障，极易引发群体性事件，容易上升到政治高度;

　　民间维权，死磕律师，愈演愈烈。某种程度上可能也有其进步的一面。但维权就往往有激烈的举动，就往往容易引起群体性事件。群体性事件就上升到政治问题高度了。国家讲究稳定，不希望出现群体性事件，咱国企自然要做排头兵，要求稳。

　　求稳定就势必讲管理。习惯以管理视角看问题，技术视角易被忽视。在稳定和创新之间，很容易选择稳定。

　　国企的IT系统的变更流程非常完善，严格遵守ITIL的管理流程，并接受审计，但流程也显得冗长和复杂;

　　王晓征表示，运营商技术升级最大的风险在于不升级没事儿，升级就是找死。

　　浙江移动数据库升级-需要掌握的四种平衡

　　技术 or 管理：升级主要的问题，不是技术问题，而是管理问题，甚至是政治问题。升级全过程，考验的是整体的管理水平，而非技术水平。

　　敲命令不难，难的是要保证成功，而且要可复制的一直成功

　　研发技术 or 运用技术：运营商不会去研发技术，只会去运用技术，管理技术。会选择合理的技术来完成升级目标，而不是去研发新技术。

　　新技术 or 老技术：使用成熟稳定的新技术完成升级操作，对于新技术会持谨慎的使用态度。技术不存在新技术还是老技术，能在多方平衡后，最有效的实现升级的，才是最好的技术。

　　局方 or 合作伙伴：局方主动升级过程，在合作伙伴的大力协助下完成升级过程。浙江移动局方有5名DBA，其中维护仅有2名DBA，借助合作伙伴的力量完成升级是必经之路

　　数据库升级-需要处理的四种困难

　　驱动力：运营商升级数据库，成本巨大，为什么要升级，驱动力何在?

　　割接失败风险：如果割接失败，会造成政治影响，严重可能会引发社会恐慌，如何避免?

　　割接后出Bug：割接上线后，出现bug，无法进行回退，如何保障业务延续性?

　　技术团队掌控：升级过程复杂，各技术线队伍庞大，如何有效管理?

　　一个技术老兵的感悟

　　1.空谈误国实干兴邦。在运营商，现状就是缺乏技术土壤，但仍有技术小组在顽强地抗争，生存和呐喊。技术团队要生存和发展下去，就必须融入公司的氛围。技术发展必须找到与公司业务发展的直接契合点。这确实不公平，但你要么接受，要么走人。

　　这句话的另外一个含义是，想法再好不落实等于零。所以请用行动说话，光说不练假把式。

　　2.勇于拥抱变化，拒绝鸵鸟心态。面对困难今天你退避一次，以后可能就步步退让积重难返。拒绝变化可免一时之风险，却也杀死了创新，失去了进步的机会。非常庆幸自己能够一直拥有多次数据库升级的机会，庆幸这么多年来浙江公司一直有勇于承担的领导，感谢他们。

　　3.就数据库升级而言，最大的感触是必须转变思维，以被动的维保心态转向主动的创新心态。要勇于尝试，一次升级会让你将升级这条道路持续下去，迈不过升级这个坎就永远没有升级的信心。

　　4.没有完美的个人，只有完美的团队。