编者按：
针对某省运营管理系统存在的数据问题和现状，中国移动江苏有限公司网络部赵恒特撰写《基于大数据的M运营商运营管理信息系统应用》一文，该文有针对性地提出了Hadoop处理框架和数据集市云化的架构应用，描述了基于大数据平台的某运营商运管管理信息系统，其内部优化了KPI管理、产品管理、决策管理、生产服务、客户服务、投诉管理、市场营销等管理流程，在项目实施过程中形成了统一大数据中心管理模式，打破了部门壁垒和信息鸿沟，效果良好，获得运营商集团公司科技与业务创新一等奖。可供相关技术人员学习、参考。
摘要：
针对某省运营管理系统存在的基础数据问题和现状，有针对性提出了Hadoop处理框架和数据集市云化的架构应用。本文描述了基于大数据平台的某省运营商运管管理信息系统，在内部优化了包括KPI管理、产品管理、决策管理、生产服务、客户服务、投诉管理、市场营销等在内的管理流程，在项目实施过程中形成统一大数据中心管理模式，打破部门壁垒和信息鸿沟，产生了良好的效果，获得运营商集团公司的科技与业务创新一等奖。
关键词：
大数据；运营商；运营管理；管理信息系统
1大数据运营管理信息系统的实现
大数据运营管理信息系统采用新技术，运营商采用业界先进且成熟的技术，考虑技术产品升级时的平滑度，保证所选的软硬件具有较长的生命周期，满足需求，立足应用，构建大数据生态体系。先进成熟技术包括Hadoop处理框架、实时流式数据处理框架等。（1）Hadoop处理框架（见图2）一个分布式系统架构，充分利用集群的威力高速运算和存储，提供高传输率来访问、计算已存储的海量数据；是大数据处理架构的事实标准。部署x86Hadoop平台，在聚合层存储海量源数据，并针对海量、非结构化/半结构化数据提供大规模处理的计算能力，在数据资产层存储离线数据资产，提供高效查询的资产存储管理能力。（2）流数据处理框架（见图3）一种分布式、容错的实时计算系统，实时处理消息并根据处理结果提供相应的处理机制。部署x86流数据处理平台，在聚合层对接源系统实时数据接口，实时采集源信息并进行处理与分析；结合数据资产层的数据应用模型、数据应用层的规则引擎及时做出业务目标的响应（实时BI、实时事件触发式营销等）。（3）业务规则引擎规则引擎将业务决策从应用程序代码中分离出来，并使用预定义的语义模块编写、解释业务规则，并根据业务规则做出业务决策。将数据按照一定的业务规则分类，匹配业务系统的数据需求场景；定义事件与流程，面向其他业务平台将数据中心的能力按照规则主动式提供。（4）数据服务枢纽（见图5）按照数据开放公共语义模型，将数据资产封装成共享业务数据模型，形成上层服务；屏蔽系统接口的技术差异，使用ESB统一协调服务运营。实现企业数据中心的数据与应用分离，提高数据安全性与复用性。通过ESB服务枢纽对其他业务系统开放标准化的服务接口，形成系统间的有效互动。（5）数据集市云化架构构建云计算x86资源池，提供按需伸缩的基础设施架构；承载分布式MPP数据库系统，提供平滑扩展的强大并行计算能力。利用x86资源池的低成本，提供数据集市的所需要的易扩展、分布式、高并发的数据计算能力；面向应用存储在线高热度访问、海量实时计算的数据。
2大数据运营管理信息系统解决的问题
大数据运营管理信息系统平台的应用，解决了M运营商原有平台的相关问题，丰富了大数据的基础数据源，加强了数据分析能力，通过统一存储和管理，打破了数据鸿沟，提高了系统效率。
2.1增加网络数据采集，丰富大数据的基础数据源
运营商产品包括传统通信、上网、内容和应用。传统通信有通话、短彩信、开关机和停复机。用户上网途径有3种：2G、3G、4G的手机上网方式；WLAN无线宽带上网方式；有线宽带上网方式。内容和应用有手机邮箱、手机游戏、手机视频、手机音乐、手机电商和应用商店等。通过在相应的网络上增加网络信息采集器，实现数据采集。比如：针对通话，可以采集到的信息有主叫号码、被叫号码、主叫开始时间、被叫开始振铃时间、被叫接通时间、主被叫挂机时间、主叫发起呼叫位置、被叫振铃位置、被叫挂机位置、主叫挂机位置、呼叫转移号码、主叫手机类型、被叫手机类型和通话质量。M运营商增加了上述的各种产品的数据采集，每天采集数据量约30TB。这些数据的价值体现在可以用来指导网络的维护和优化，可以用来提高服务质量，可以通过针对性的营销提升效果，可以与第三方合作增加数据的挖掘价值。
2.2加强基础数据分析，生成大数据次级数据字典
通过基础数据分析，加工生成二级数据丰富数据字典，分析汇总指标体系包含指标3000多个，针对公司各部门各分公司和各业务产品订制报表500多张。继续以通话为例，为了指导和考核网络维护与优化工作，通过对全网所有通话行为的分析，提炼出如下指标：呼叫接续时长=被叫开始振铃时间-主叫开始时间，加上主叫所在位置联合分析，可以对所有网络小区的平均呼叫接续时长进行统计分析，得出需要优化的小区、派发优化任务给维护部门、并可以跟踪优化效果；同样呼叫接续时长、主叫位置、主叫手机类型联合分析，可以得出手机和网络配合情况，指导问题手机生产商进行手机的质量改进。继续以通话为例，为了指导和考核营销部门的优惠购机入网套餐销售质量，通过对一定时间区间内各个渠道销售的优惠手机通话分析，提炼出如下指标：渠道销售终端次月活跃度=Count（主叫号码&主叫手机类型in渠道a终端销售库）/sum（渠道a终端销售库）。这样分析可以对渠道销售质量进行指导和考核，并能有效发现渠道通过假销售套取销售佣金的欺诈行为。
2.3统一存储和管理，打破数据鸿沟提高系统效率
M运营商的大数据系统当前存储数据量超过30PB。在统一存储和数据管理的基础上，通过联合关联，把以前分散在各个信息系统中的数据汇聚拼接出用户真正的全貌。通过泛在挖掘，把握单个用户的真正需求，挖掘潜在用户群的行为特征。系统能力增强的实时应用，能及时地反应到用户服务上。
作者：赵恒 单位：中国移动江苏有限公司网络部
