胡琴琴

摘要：信息科技时代，电子商务给人类生活带来极大便利的同时也产生了大量的商业数据，如何存储和管理这些数据，挖掘其潜在价值已成为各大电商研究的重要方向；随着数据量的爆炸性增长，传统的关系型数据库系统已无法满足大规模数据的分析和可视化任务，该文在研究了HDFS的分布式文件存储以及MapReduce的并行化计算的基础上，提出了基于Hadoop平台构建商业数据可视化分析模型的系统方案。通过搭建Hadoop平台，建立Hive数据库，构造分析模型，可视化分析结果展示，研究了Hadoop云平台的搭建过程，实现了Hadoop环境下基于Hive数据库的离线数据分析和数据可视化。

关键词：数据可视化；电子商务；Hadoop；Hive；分析模型

中图分类号：TP311 文献标识码：A 文章编号：1009-3044（2016）06-0003-04

1 概述

当今信息时代，形式各异的信息载体如移动智能设备、电子商务网站等，几乎每时每刻都在产生并传递大量商业数据，数据的背后隐藏着信息，而信息之中蕴含着知识和智慧，及时地发现这些知识并将其应用于现实的生产环境中可以为人们正确分析形势和作出决策提供依据。数据可视化是从大型数据集中以某种概要形式抽提信息，并将其以图形图像的形式表达呈现，是数据的一种视觉表现形式。在商业智能中，决策者通常需要根据历史数据总结出经验教训，以便在未来竞争中处于有利地位。但是人工地从纷繁复杂的数据中抽取关键信息是一件费力费时的工作，相对于从一堆数据中去抽取和抽象出具体信息而言，人类更善于处理图形化的信息，通常能够一眼洞悉图片中所传达的信息，因此数据可视化技术是商业数据分析的不可或缺的一部分。……