王帅，万小霞

（盐城师范学院信息工程学院，盐城224002）

0 引言

淘宝、京东以及世界各地的大型商场和连锁门店，每日都有大量的交易清单产生，一个购物狂欢节就有过亿交易金额要处理。快递、物流每天也有各种数据产生如国内外物流清单、发货退货记录等，医院、诊所也有药物清单、病人资料、就诊记录等，就连日常聊天一段时间下来也是篇幅巨大。腾讯的数据中心内有大量的会话信息，基于这些数据进行新型应用开发。总之，这些数据不可避免地成为了一个新平台，大数据时代要求我们在以数据为中心的平台上进行分析并去开发新型数据管理系统和相应的应用系统[1]。

1 系统分析

大数据分析平台由商城系统和数据可视化系统组成。具体来说，商城系统有离线日志发送、实时数据转发两大功能；数据可视化系统具有用户总人数及活跃度统计、热销商品分析、广告实时点击量以及地域分布统计等功能。

1.1 商城系统

（1）离线日志发送

将商城的离线数据发送给Flume 日志系统并在本地备份

（2）实时数据发送

将商城的实时数据发送给Kafka 消息管理中心。

1.2 数据可视化系统

（1）用户统计

表格展示商城用户总人数、新增用户人数、昨日活跃度、昨日活跃率。

（2）标签点击量TOP5

环状图展示点击数量最多的前5 个分类。

（3）商品点击量TOP5

半环状图展示点击数量最多的前5 个商品。

（4）热销商品TOP5

环状图展示购买数量最多的前5 个商品。

（5）收藏商品TOP5

柱状图展示加入购物车数量最多的前5 个商品。……