方小龙

摘要：Hadoop作为一个开源分布式计算平台，具有高容错性和伸缩性等特点，允许用户将Hadoop放置在PC上，利用集群的计算和存储能力，对海量的信息进行处理。该文结合企业不断增长的业务数据，而现有业务数据处理能力不足的现状，构建Hadoop分布式数据处理平台，为企业的发展提供良好的技术支撑。

关键词：Hadoop；企业；云存储；技术

中图分类号：TP311 文献标识码：A 文章编号：1009-3044（2016）04-0079-01

随着企业的不断发展，业务量的增长，一些业务数据也出现了爆炸性的增长，并且对数据访问的速度和宽带提出了更高的要求。企业现有的数据处理系统拓展能力差，数据的访问效率低下，因此难以满足企业逐渐增长的业务数据的存储需求。因此为了满足企业的发展要求，基于Hadoop技术为企业构建一种高效、低成本的存储平台，帮助企业在发展中满足业务数据的存储需求。

1 Hadoop概况和基本构架

Hadoop是一种开源分布式的计算机平台，利用HDFS和MapReduce作为系统的支撑中心，在运行的过程中给用户提供最底层的透明的、细化的分布式结构框架。HDFS在用户使用的过程中发挥着高容错性和伸缩性的特点，并且能够将Hadoop在不同的硬件上使用，组建成不同的构架用于云存储。MapReduce是一种分布式变成模型，用户在使用过程中对底层的系统的细节和构架不清楚，因此在程序的开发中便于正确的使用，可以利用Hadoop对计算机中的资源进行统一的整理，在搭建平台的过程中给平台提供分布式的构架。例如在2008年Yahoo应用了Hadoop，并且运用的规模庞大，在上万个节点上实现对Hadoop网页上的信息进行处理，在运行过程中给用户提供了很多便利的服务。……