关于大数据应用对统计工作的几点思考
2020-05-22石岩
科学导报·学术 2020年17期
关键词:统计数据
石岩
大数据是现今社会一个热点话题,我们每个人都置身其中。就像前几年出现的云计算一样,大数据已经逐步引起各行业的广泛关注。那么,什么是大数据?如何对大数据进行相应的分析?它在以数据为主要工作内容的统计中又如何应用?本文将对以上问题作一些初步的探讨。
一、大数据的概念与特征
(一)大数据的概念、特征与基本技术
1、大数据的概念
什么是大数据(big data)?大数据或称巨量资料,指的是所涉及的资料量规模巨大到无法透过目前主流软件工具,在合理时间内达到撷取、管理、处理并整理成为帮助企业经营决策等更积极目的的咨询。大数据技术的战略意义不在于掌握庞大的数据信息,而在于对这些含有意义的数据进行专业化处理,也即是处理分析数据的能力。
2、大数据的特点
(1)数据体量巨大。从TB[1]级别,跃升到PB级别,大型数据集规模一般为TB[1] 级左右,而大数据一般是 PB级至 EB 级。截至目前,人类生产的全部印刷材料的数据量约为200PB,而历史上全人类所有说过的话的数据量大约为5EB。
(2)数据类型繁多。大数据类型很多,不再是传统结构化数据,更多是非结构化、分布式和单调模式,如网络日志、音频、视频、图片、地理位置信息等。
(3)价值密度低。大数据价值普遍偏低,以行车记录仪为例,在连续不间断监控过程中,可能仅有一两秒是有用信息。
(4)处理速度快。大数据的数据挖掘技术与传统数据采集技术有所不同,其处数据处理速度非常快。……
登录APP查看全文
