大数据系统和相关技术分析
2014-10-21邹金萍谢晓东
电子世界 2014年24期
邹金萍 谢晓东
【摘要】本文运用统计学原理,综合了文献法、调查研究法、数理统计法,对大数据进行了调查分析与研究,详细的介绍了大数据以及大数据的特点、大数据的技术以及大数据的发展前景,提供了一套科学合理、完整全面的参数。
【关键词】大数据;数据库;数据储存;传统数据处理
一、大数据
在2011年5月,麦肯锡做出了《大数据:下一个创新、竞争和生产力的前沿》的报告,报告中明确指出“大数据”就是“大小远远超过标准数据库软件的收集、储存、整理和评定能力的数据集”。从这一定义中可以总结出大数据的两个显著特点:一个是在信息量高度膨胀的现代社会,传统的数据处理方式已经不能跟上发展步伐,因此需要新技术的诞生来改变这一现状:另一个是由于数据在膨胀,数据的存在与表现形式也在随之变化,因此新技术也应跟上这种变化。
1.关于大数据
最早应用大数据技术的是天气预报、气象侦测、地震预测、物理领域、天文领域、生物领域、军事、金融、通讯等部分,随着网络语通信技术的高速发展,大数据也逐渐应用于民用之中。大数据在互联网中拥有非常大的规模,据国际数据公司的统计,全球在2008年产了0.49ZB,到2012年,仅仅4年时间就增长到1.82ZB,以此计算,全球人均上网数据达到300GB。由人类诞生至2012年,所产生的全部文字资料的数据达到约200PB,全人类额语言数据量达到了5EB。经过IBM的调查研究发现在人类文明史中额全部数据中,有90%的数据量都产生于过去的两年,由此可以预计再未来的十年,数据量将以40%的速度飞速增长,那么到2020年将达到35ZB。……
登录APP查看全文