□杜 伟

一、什么是“大数据”

“大数据”建立在互联网技术基础上，指的是信息量巨大的统计及技术操作。简单来说，“大数据”其实就是海量资料巨量资料，这些巨量资料来源于世界各地随时产生的数据。

在“大数据”时代，任何微小的数据都可能产生不可思议的价值。“大数据”有4个特点，为别为：Volume（大量）、Variety（多样）、Velocity（高速）、Value（价值），一般被称之为4V。

1.大量

大数据的特征首先就体现为“大”。随着时间的推移，存储单位从过去的GB到TB，乃至现在的PB、EB级别。随着信息技术的高速发展，数据开始爆发式增长。社交网络（微博、推特、脸书）、移动网络、智能工具、服务工具等，都成为数据的来源。迫切需要智能的算法、强大的数据处理平台和新的数据处理技术，来统计、分析、预测和实时处理如此大规模的数据。

2.多样

广泛的数据来源，决定了大数据形式的多样性。任何形式的数据都可以产生作用，目前应用最广泛的就是推荐系统。日志数据是结构化明显的数据，还有一些数据结构化不明显，例如图片、音频、视频等，这些数据因果关系弱，就需要人工对其进行标注。

3.高速

大数据的产生非常迅速，主要通过互联网传输。生活中每个人都离不开互联网，也就是说每个人每天都在向大数据提供大量的资料，并且这些数据是需要及时处理的。大数据对处理速度有非常严格的要求，服务器中大量的资源都用于处理和计算数据，很多平台都需要做到实时分析。数据无时无刻不在产生，谁的速度更快，谁就有优势。……