蔡劲松

（安徽新闻出版职业技术学院计算机中心，合肥 230601）

基于Hadoop的大数据处理策略研究

蔡劲松

（安徽新闻出版职业技术学院计算机中心，合肥 230601）

大数据为数据挖掘提供了丰富的数据源，从中挖掘出的信息更加具有商业价值.以Hadoop的大数据处理为核心，通过查找相关文献资料，实证分析了大数据处理的策略，从而为未来大数据处理路径提出更好的指导.

Hadoop；大数据；处理；策略

我们处在一个数据爆炸的时代，随着云计算技术的流行，互联网技术的发展，传统产业的自动化和信息化提升以及人类正在被数字化的生活，大数据已经逐渐将我们包围.数据的不断增长在给人们带来巨大价值的同时，也给人们带来了巨大的挑战.大数据处理已经成为很多大型企业所关注的焦点.

1 大数据处理研究现状

大数据处理虽然刚刚兴起，但数据在企业中一直处于核心地位，传统的数据产品，如数据库、报表系统等，在企业中部署运行多年，为企业的经营决策贡献巨大.

Hadoop、NoSQL这样的开源大数据解决方案能够节省资源、提高系统利用率，是性价比极高的选择.调查显示19.82%的企业用户正在使用开源大数据处理技术，22.97%的企业用户计划于1年内部署，9.91%计划于2年内部署，没有相关计划和不确定的人群占到47.29%.由此看出，Hadoop等开源大数据处理技术相当热门，已经有至少52.71%的企业用户已经或计划部署相关解决方案.

Hadoop由5大构造模块构成，分别为：NameNode（名字节点）、Secondary NameNode（次名字节点）、DataNode（数据节点）、TaskTracker（任……