Haboop在企业中的应用现状分析

2013-07-21王少亚河北大学管理学院

商场现代化 2013年18期

■王少亚河北大学管理学院

一、Hadoop概述

Hadoop作为最受欢迎的一种大数据技术，是一个分布式系统的基础架构，主要由HDFS、MapReduce组成，是一个能够便捷的开发和运行处理大数据的软件平台。HDFS采用Master/Slave架构，由一个NameNode节点和一组DataNode节点组成。MapReduce在HDFS的支持下实现分布式数据处理，也是一种总从的构架。

二、Hadoop在企业的应用优势

1.应用经济效益突出

Hadoop的应用成本低，一方面由于其开源，研发和采购成本远远低于商业软件。另一方面，Hadoop为普通的硬件设备而设计，可以基于异构的廉价硬件来搭建机群，硬件投入成本低。此外，hadoop还可提高数据价值，有利于企业精益管理。例如沃尔玛通过Hadoop分析顾客搜寻商品的行为，在Facebook、Twitter等社交网站上对商品的讨论，从而竞争对手提前一步发现顾客需求，智能规划下一季商品的促销策略。

2.高效处理大数据

对海量数据深度分析并迅速发现趋势是Hadoop的另一巨大优势。Hadoop可以在几分钟内处理TB级的数据，在几小时内可以处理完PB级的数据。Facebook利用hadoop每30分钟分析一次105T以上的字节。另外，传统关系型数据库技术对于绝大多数非结构化数据无能为力。Hadoop可以对海量的结构化和非结构化数据进行批处理，充分发掘和利用数据背后的商业价值，使企业做出更好的决策。