刘青

【摘要】    隨着大数据行业的兴起和生活上的广泛运用，以大数据的理念和技术，持续完善通信企业数据的汇聚和治理，有利于加强数据核心能力建设，提升平台智能化水平;持续加强大数据能力开放，深化大数据智慧应用，促进市场使能、提升管理效能、加强一线赋能、助力通信企业全面智慧化。

【关键词】    需求分析    建设方案    大数据平台

一、企业大数据平台

当前企业正处于大数据时代环境中，通信企业对拥有海量数据要合理利用，在经营决策过程亟需加快创新，当前已经具备了明显的数据驱动特点，业务部门对于数据的时限要求越来越高，这些要求给IT系统带来的是海量待处理的历史数据、复杂的数学统计和分析模型、数据之间的强关联性以及频繁的数据更新产生的重新评估等挑战。同时，随着相关技术的发展，如何利用大数据赋能，构筑企业数字化能力，提升中台能力，夯实智慧运营基础，高效支撑企业智慧运营，是亟待解决的问题。

二、构建大数据平台的需求与可行性

2.1必要性分析

一方面，目前随着通信企业对数据应用的深入，已完成DPI、信令、网优、客户接触、B/M/O域等数据的全面汇聚，数据量大、数据种类多、数据应用实时性要求高，但通信企业现有数据处理和分析系统已经无法全面满足要求，需要完善的大数据平台，建设大数据能力，来满足大批量数据处理和应用需求。

另一方面，数据驱动企业建立协同推进的智慧运营体系，企业的智慧运营涉及到企业的营销服务、网络运营、企业管理和开放合作等各个领域，大数据应用需求旺盛，需要IT部门与业务部门紧密协作，深入开展精准营销服务、精益网运、精确管理等大数据应用，构建通信企业大数据平台可以促进企业智慧运营，充分发挥数据在日常运营工作中的价值，助力业务发展，营造企业智慧运营的良好环境。

2.2需求与原则分析

通信企业大数据平台主要在于解决企业在数据能力开放、基础能力、运维管理、安全管理、关联处理和数据挖掘建模6大方面的基础能力的需求，因此，基于“集中、开放、云化”，按照“平台+应用”的模式，大数据平台建设将以应用驱动、数据集中、能力开放、使用安全为原则进行建设。

应用驱动：以业务应用为驱动，统一汇聚和处理企业各类数据，并逐步丰富大数据应用。

数据集中：构建统一架构、统一标准、统一元数据、统一质量的数据体系，实现企业数据的集中采集、集中存储、集中处理，实现跨专业的数据关联。

能力开放：构建开放化的能力平台，以支撑多团队的应用开发。通过数据能力开放、服务能力开放、应用能力开放，满足企业数据应用需求。

使用安全：在数据采集、存储、处理、应用等环节强化数据安全管理。

2.3可行性分析

技术可行性方面，当前大数据平台技术具备了离线批处理、实时处理、高速查询能力，具备网优、OSS域、CRM域、大数据应用等系统提供公共大数据处理支持的条件。

社会可行性方面，国务院先后出台了《中国制造 2025》、《国务院关于积极推进“互联网 +”行动的指导意见》等政策，《中国电信大数据平台技术要求》也提出建设指引，需继续对企业数据分析系统平台进行架构优化，加快向“平台+应用”的模式转变，尽快完成IT大数据平台向互联网架构的演进，并增强大数据平台基础能力和数据深加工能力以及对外应用支撑能力。

三、企业大数据平台建设思路与目标

本大数据平台的总体架构如下图1所示。

建设目标包括如下几点：

1.统一平台基础能力，强化计算、挖掘及系统管理能力;2.统一核心处理能力，整合各系统的数据分层体系;3.加强数据管理，强化元数据、数据标准和数据质量管理，落实主数据管理;4.加强安全管理，完善安全相关功能，实现数据开发、测试、应用的安全;5.完善数据、服务和集成开发环境的能力开放;6.统一数据门户，整合数据交换平台/核心处理系统/大数据门户入口。

四、通信企业大数据平台建设内容

通信企业大数据平台建设内容主要基于原数据分析系统的应用层、中间层、整合层和接口层四个方面的改进升级，其中整合层包括优化整合层基础模型，扩展整合力度，新增O域、B域交易类等整合宽表，完善DPI行为类整合宽表，统一数据清洗，统一转换规则，提升数据准确性，降低系统负载压力;中间层主要从业务主题、应用业务场景等多角度构建中间层模型，完善用户标签体系，提升应用成效，为支撑精准管理、精准营销奠定基础。

大数据平台建设包含了能力开放、基础平台、运维管理、数据关联处理能力4大能力，分别如下：

1.能力开放：基于大数据Pass平台能力，完善服务开发框架，构建服务提供方OPEN API服务、服务消费方API/HTTP服务管理界面，优化服务目录管理，提升生产注智能力、服务安全保障等级。

2.基础能力：扩容平台基础能力，完善并升级数据治理平台与能力建设，加强平台数据安全管理，加固各组件漏洞，提升平台组件的安全防控能力。。

3.运维管理：完善平台运维管理能力，探索新型监控指标管理工具，优化现阶段监控指标，提升监控可靠性。

4.利用大数据平台，构建以政企客户为中心的指标体系，增加5G业务模型，围绕5G用户、收入、行为轨迹，5G+应用等进行模型建设，提升无线网优大数据建设能力。

五、通信企业大数据平台应用研究

5.1 完善能力开放体系，扩大能力开放范围

通过统一数据交换流程，开放数据采集及计算程序的调度能力，提供大数据基础平台从数据采集到定时调度处理的功能开放，提供更为便捷的开发者用户工具，实现用户开发脚本管理、版本维护、可视化脚本编辑等，提高开发效率，开放服务开发能力，基于大数据平台的实时查询服务提供，开放便捷高效的数据并发查询能力。

5.2 加强基础能力建设，优化平台运行效率

提升了集群存储与计算能力，优化整合大数据平台基础组件，升级大数据组件版本，提升集群运行效率，通过完善Spark实时计算框架，优化平台数据处理引擎，提升应用数据计算处理效率，统一并整合大数据各基础组件模块至大数据门户，构建数据可视化工具，整合并优化数据展示工具，基于自定义报表与图形化方式优化大数据展示能力，提供可配置动态拖拽的数据可视化引擎以及加挖掘组件能力，支持Python数据挖掘能力与建模，优化调度能力，完善大数据平台与传统关系型数据库处理能力的串联调度引擎，实现数据处理流程的统一。

5.3优化运维管理能力，提升平台效率与安全

通过完善统一运维管理与监控平台，优化平台运维管理能力，提供了运维指标的配置能力，扩展运维监控管理，提供服务器、组件、服务等基础平台监控。基于用户访问、应用连接、服务查询等平台操作使用提供有效的运维监控。

基于大数据基础平台及集群组件的密钥管理能力，和基于多租户的用户KDC授权认证与访问管理能力，为通信企业大数据平台提供了密钥的管理及自动化运维分发能力。构建应用大数据平台提升了通信企业的数据使用安全，实现数据授权分离，完善平台运营及权限租户管理，分离生产与开发数据权限，提供数据同步与加解密访问机制，保障数据安全。

5.4完善企业大数据挖掘能力，支撑模型构建

构建应用大数据平台进一步完善了通信企业大数据标签体系构建，提供基础标签处理以及实时标签处理结果输出。以应用为驱动，通信企业可以构建用户标签体系，协助构建用户策反、终端营销、位置营销、O2O营销模型，协助O2O营销工作。帮助企业加强用户互联网行为洞察，深化电渠精准营销场景构建，助力互联网卡业务发展。

另外，基于用户渠道行为数据，通信企业可以进一步优化用户偏好渠道识别，刻画用户偏好渠道及偏好程度等标签，支撑精准营销。通过分析用户使用支付宝、爱奇艺、百度等APP的行为及流量数据，结合用户当前的消费记录，构建基于客户细分的精准营销模型。

六、结束语

大数据平台的不断改进、完善和发展，将为通信企业带来如下一系列的经济效益：基于大数据平台能力组件、数据目录及应用服务，以资源隔离、数据权限独立的形式进行第三方租户的接入访问与使用，减少系统建设的重复性;从集群、平台、组件、租户资源、数据交互、应用查询等访问建立起一套高效的运维管理监控机制，可靠地保障了大数据平台及应用支撑的稳定运行;面向精准营销服务、智能决策支持、精益网运提供营销服务商机、辅助决策知识、客户感知指引，通过注智能力嵌入生产执行系统，让数据贯穿企业生产、经营、管理的全过程，促进企业的智慧化运营。带来的社会效益包括：通过企业大数据平台的建设有助于汇聚各域数据，避免重复的系统建设与资源的浪费，有利于运营商发展和开拓新市场，提升经济效益，有效地使用人力、物力、财力等各项资源，满足不同消费者不断变化的需求。

对通信企业来说，大数据代表的不仅是一种先进的数据处理技术，而更多的是一种管理理念的变革。搭建大数据平台可以帮助通信企业构筑企业数字化能力，提升中台能力，夯实智慧运营基础，高效支撑企业智慧运营。

参  考  文  獻

[1]段旭哲.浅析大数据在移动通信中的应用[J].科教导刊：电子版，2016（24）：135-135.

[2]黄倩蓉.大数据在移动通信中的应用[J].黑龙江科学，2015（3）：28-29.

[3]丁洪涛.大数据在移动通信中的应用研究[J].中国新通信，2016，18（11）：97-97.

[4]中国电信大数据：打造数据综合平台能力[EB/OL].[2017-03-13].

[5]姚逴炯.大数据在电信运营商市场分析及精确营销的应用研究[J].商业经济，2014