张效尉，陈亚峰，秦东霞

(1.周口师范学院 计算机科学与技术学院，河南 周口466001；2.河南省轻工业学校 信息工程系，河南 郑州 450006)

基于Hadoop的云存储系统研究与实现

张效尉1，陈亚峰2，秦东霞1

(1.周口师范学院 计算机科学与技术学院，河南 周口466001；2.河南省轻工业学校 信息工程系，河南 郑州 450006)

大数据时代，各种信息数据日益迅猛增长，Hadoop为海量数据的处理提供了良好的解决方案.针对云计算环境中的海量数据存储问题，介绍云存储技术的概念和体系结构，分析Hadoop两大核心机制HDFS和MapReduce，利用Hadoop成功搭建分布式计算平台，并将其应用到海量社交网络数据的存储.实践证明，系统运行良好，为未来进行社交网络大数据分析提供平台和数据保证.

Hadoop；云存储；HDFS；社交网络数据

近年来，随着网络规模的不断扩大，互联网需要处理的业务和数据量也在快速增长，云计算作为一种新型服务计算模型，能有效地为用户提供方便，快捷的服务，正在成为互联网发展的新模式[1].云存储位于云计算体系架构的最底层，承担着以服务形式收集、存储和处理数据的任务，并在此基础上对上层的云平台、云服务等业务提供支撑.不同于传统的存储硬件，云存储提供的是一种服务，用户向云存储服务提供商申请存储空间，通过网络将本地数据存放在云存储系统中，按照所需空间规模支付一定的费用，避免了购买昂贵的软硬件设施[2].云存储具有高可靠性、可扩展性、海量存储、低成本和易于管理等……