张小龙 黄传彬 王剑侠

【摘要】    大数据技术和5G通信网络技术是两个相对独立但息息相关的模块，是计算机和互联网发展至今的先进产物，5G通信网络技术有着更大容量、更广连接、更高速率、更低时延的特点，配合大数据技术用来收集、存储、处理5G通信网络技术中所产生的海量数据，挖掘数据背后的价值，根据数据反应进行更加合理的资源调控，可以说大数据技术使得5G通信网络技术数据“产能”大大增强，普及和应用更加科学，而5G通信网络技术也使得大数据发挥出其更大的价值。本文首先简单介绍大数据技术和5G通信网络技术，其次围绕大数据技术在5G通信网络中的数据收集、存储和处理等应用模块展开详细的阐述，以供参考。

【关键词】    大数据技术    5G通信网络技术    应用探析

一、大数据技术介绍

1.1大数据技术

社会已经正式进入了“大数据”时代，社会资源和现象都被网络化和数据化改造并呈现，大数据技术就是对这些海量数据的收集、存储、处理和运用，深度挖掘大数据价值，当然，这里面难免会涉及“云计算”的概念，大数据和云计算就好比一枚硬币的正反面，有着密不可分的关系，这里不再过多深究。

1.2大数据的“4V”特征

1.2.1 Volume（容量）

大数据的容量非常之大，已经从TB升级到了PB（1024TB=1PB），未来必然会跃升到EB（1024PB=1EB）或ZB （1024EB=1ZB）的级别。

1.2.2 Variety（多样）

大数据的来源是多样的，包括结构性数据、非结构性数据、源数据和处理数据等，有音频源数据，有视频源数据，有文字源数据等，小到人们生活衣食住行，大到航天航空等都会被数据化改造。

1.2.3 Value（价值）

这里的价值指两方面，一方面从大范围讲，大数据中蕴含有不少的价值，挖掘大数据能够创造更大的价值，另一方面从单个来讲，数据太过海量，单个数据的价值密度却比较低，如何从大数据中挖掘有效、有价值数据成为主要探究方向。

1.2.4 Velocity（速度）

大数据的处理速度要求较高，需要有极强的大数据处理速度，最快响应，最快处理，实时分析数据。

二、5G通信网络技术介绍

2.1 5G通信网络技术

5G通信技术是第五代移动通信技术的简称，具有更大容量、更高速率、更广连接、更低时延等特点，在5G通信网络技术加持下，物联网将进入全面发展时期，同时5G通信技术也会为人工智能、区块链、大数据等技术提供技术支持，再往大范围说，5G通信技术将体现在生活的方方面面。

2.2 5G通信网络技术特点

对于5G通信网络技术，并不能简单的将其看做4G通信技术的优化，其是一次翻天覆地的革新。

2.2.1更大容量

大容量主要体现在物联网方面，虽然以前喊出“万物互联”的口号，但以前的通信网络技术还不足以支持物联网发展，物联网节点太多、功耗较强，5G通信网络技术大容量、低功耗的特点，优化物理层技术，降低了使用带宽，降低终端发射功率，为物联网提供技术支持。

2.2.2更快速率

其峰值理论传输速度可达每秒数十Gb，这比4G网络的传输速度快数百倍，极强用户体验，为加强数据的处理速率奠定基础。

2.2.3更广连接

5G通信网络技术支持多终端连接，实现多人协同，比如集体会议，比如上网课等，在更广连接作用下，未来会有更好的发展。

2.2.4更低时延

5G通信技术的低时延可以作用实时性要求比较高的应用如游戏，视频，数据电话等方面，作用最强的在于远程操控领域和无人自动化领域，比如说远程医疗，如果网络延迟较大，远程医疗命令下达会有延时性，会影响手术效果，比如汽车自动化驾驶，如果延时性较大，会造成意外伤害，这些都將在5G通信网络技术加持下得到解决。

三、大数据技术在5G通信网络中的作用

首先来看5G通信网络技术对大数据技术的作用，5G通信网络技术是实现大数据技术的基础，依托于5G通信网络，大数据的数据收集、存储、处理、索引、查询算法，流数据分析算法等都会变得更快更好，也为机器学习奠定了基础，可以说随着5G通信网络的应用，对大数据技术是很好的补充和强化。

其次来看大数据对5G通信网络的作用，相当于大脑的作用，主要作用在两个方面，一个在于数据的产出，随着5G通信网络的架构，各行各业都在逐步和大数据接驳，所产出的大数据是海量的，大数据技术就是对这些视频、音频、文字等类型的海量数据进行收集，相当于虚拟听觉系统、视觉系统、感觉系统、运动系统，其次在于数据的应用，随着5G通信网络技术大规模普及和应用，大数据挖掘数据的价值，再创造出更大的价值，给用户提供良好的服务、完善5G通信网络架构等。

四、大数据技术在5G通信网络中的应用

4.1大数据的收集和筛选

数据的收集指的是ETL理念：将数据从来源端经过抽取（extract）、转换（transform）、加载（load）至目的端，对5G通信网络中所产生的各类型数据，收集数据的主要工具有各类传感器，如音频采集器、视频采集器等，同时以一个关系型数据库来保存，例如MySQL ，Oracle ，Postgres等，而数据的提取工具则包括ETL工具或Sqoop等。顾名思义，对数据源的数据进行收集，并根据覆盖的范围、设置问题、选项的描述、背景设置等进行简单的过滤和筛选，将繁复的数据初步归纳整理，明确数据的结构以及其他特点。

4.2大数据的存储

数据存储一般会存储在云端数据库中，比如阿里云、AWS（亚马逊）、AZURE（微软）、DINDINCLOUD（丁丁云）、KTC、GOOGLE CLOUD（谷歌云）等，一些框架结构如同Hadoop也具有简单的存储功能，根据不同的数据类型构建不同类型的数据库，包括关系型数据库、非关系数据库、图数据库和内存数据库等，方便对大数据的转移、存储和计算，在数据的存储中也具有进行简单的分类功能。

4.3大数据的计算

数据的计算涉及到云计算概念，云计算和大数据是紧密相关的两种技术，各家高端互联网企业都在致力于开发自己的大数据和云计算系统，是集合分布式计算、效用计算、负载均衡、并行计算、网络存储、热备份冗杂和虚拟化等多种计算机技术在内的混合技术，用来对收集并存储的海量数据进行计算处理，归纳分类并分析，深度发掘大数据中价值，进而创造出更大的价值。除了优秀互联网大厂的云计算外，一些开源框架如Hadoop、Mapreduce、Tensorflow（深度学习框架）、Spark、Pentaho BI等也可承担大数据计算处理的作用，其中Hadoop开源框架是非常优秀、非常实用的开源框架，被全球几大IT公司用作其云计算环境中的重要基础软件。

4.4大数据的可视化呈现

通过对数据一系列的收集、存储和计算，可以对数据进行基于图表或模型的可量化分析和可视化处理，筛选出有效信息，并进行直观而具体的分类，使得数据真正具有“可视化”的特点，能够更好的被相关工作者利用，相关工作者观看、使用、调度起来都会非常方便，优秀的大数据处理系统能够在短短数秒时间内处理数以万计的数据。

4.5大数据的应用

在挖掘出數据中的价值之后，对数据的应用也至关重要，让大数据以图表或模型等形式反映出来，对多维数据进行了分类、加工、处理，分析师再结合目标人群的需求，从而利用5G通信网络进行有针对性的服务，切实提高5G通信网络的服务质量和信息数据增值价值。同时，大数据的应用，基于用户的行为特征来说，很难对应数据和序列，通过智能运营，也会反作用于5G通信网络的架构，使得5G通信网络符合用户的行为习惯和喜好特点。

4.6大数据的安全

随着“大数据”的日益发展，大数据的安全性又成为人们热议的话题，人们的日常行为被数据化改造并收据利用，那么是否存在泄漏问题呢？如果用户的兴趣、行为、情感等被泄露，那么还是否愿意自身数据被收集呢？答案自然是否定的，因此大数据技术中还有至关重要的模块就是大数据的安全保护，国家在2019年5月13日发布等保2.0，可以以此来分析对大数据的安全保护，需要明确通信网络、区域边界、计算环境等，对大数据的安全保护有技术要求和管理要求两方面的考虑。

五、结束语

综上所述，身处大数据时代和5G通信网络时代，大数据和5G通信网络是相辅相成的两个存在，5G通信网络给大数据提供基础的技术基础，而大数据也让5G通信网络数据产出更有效用，数据应用更有价值，上述分析了大数据在5G通信网络中应用的数据采集、存储、计算、可视化、应用、安全管理六个方面，希望能有参考之用。

参  考  文  献

[1]杨洪平.大数据技术在5G通信网络中的应用研究[J].江西通信科技， 2020，No.152（04）：14-16+19.

[2]姚永波，张振杰.大数据技术在5G通信网络中的应用[J].装备维修技术， 2020，No.176（02）：71-71.

[3]周国亮.浅析大数据技术在5G通信网络中的可行性应用[J].科技视界，2019，000（032）：115-116，120.