姚 晔 常广炎

（辽宁行政学院，辽宁 沈阳 110161）

基于云计算异构环境的Hadoop性能分析

姚 晔 常广炎

（辽宁行政学院，辽宁 沈阳 110161）

针对当前云服务发展中遇到的数据量急速增加为后台数据中心带来的数据处理问题，本文实施了Hadoop的性能测试。首先对云计算异构环境的Hadoop性能进行了描述，其次对Hadoop集群中两种节点的性能差别进行了分析，并给出了实验异构的平台的设计和实验结果。

云计算；异构环境；Hadoop

1 引言

以往的以物理节点而设立的数据中心正在面临变革，在上个世纪诞生的被用于大型机的虚拟化技术，正在被逐渐部署到廉价通用硬件构成的基于X86的PC服务器上。和以往的物理机器不同，虚拟机中的中间层操作系统和上层的应用不会直接和底层硬件进行交互，而是需要通过VMM层和hypervisor才能和底层的硬件接触。通过在传统的数据中心中应用虚拟化技术，能够有效分配计算资源，催化了云计算服务在今天的广泛应用。本文研究了一个由虚拟机节点和物理机节点混合而成的异构云平台，并且在平台中实施了Hadoop的性能测试，分析了Hadoop在物理机和虚拟机混合环境下读写数据的实际性能，探究了在Hadoop集群中两种节点的性能差别，并且阐述了接下来需要开展的工作。

2 虚拟化技术和云平台

虚拟化技术能够实现虚拟机从当前的节点上向另一个节点无缝迁移，同时确保在实际迁移的过程中，相关机器中的程序还可以正常运行。虚拟化技术会在数据中心形成一个较大的资源池，这样相关的用户则是根据动态调整，进行资源的整合。……