赵晶

（中国移动通信集团设计院有限公司北京分公司，北京 100038）

针对运营商的大数据建设方案研究

赵晶

（中国移动通信集团设计院有限公司北京分公司，北京 100038）

随着大数据应用在互联网行业的蓬勃发展，大数据逐步成为国内外运营商的关注焦点。首先基于电信运营商面临的挑战和建设难题，分析建设大数据平台的重要性和必要性；然后，结合运营商实际需求，提供了大数据平台建设的关键技术分析、系统架构、设备配置方法和组网方案等，对运营商进行大数据平台的规划、设计以及建设具有很好的借鉴意义。

大数据；运营商；Hadoop；MPP

1 概述

大数据(Big Data)指的是所涉及的资料量规模巨大到无法通过目前主流软件工具，在合理时间内达到撷取、管理、处理，并整理成为帮助企业经营决策更积极目的的资讯。大数据具备4“V”（Volume，Variety，Value，Velocity）特点。

第一，数据体量巨大。从TB级别，跃升到PB级别，甚至EB和ZB级别。

第二，数据类型繁多。包括结构化、半结构化、非结构化数据。例如网络日志、视频、图片、地理位置信息等。

第三，价值密度低。以视频为例，连续不间断监控过程中，可能有用的数据仅仅有1～2 s。

第四，处理速度快，实时获取需要的信息。这一点也是和传统的数据挖掘技术有着本质的不同。

大数据已经席卷了每个行业和业务功能，如今已成为重要的生产要素，大数据正在通过多种方式创造价值。

2 运营商建设大数据平台的必要性

2.1 降本需求驱动架构调整

中国移动目前的分析系统使用的都是传统的“小型机＋关系型数据库＋高端磁盘阵列”的模式，这种传统模式建设成本高昂。……