基于Hadoop平台的大数据应用系统架构设计思想
2018-03-28朱立
中国科技博览 2018年10期
关键词:大数据
[摘 要]在常规的数据平台设计中,其数据存储量相对较小,并且存在查询数据时间长等缺点,难以满足现阶段的使用需求,在此情况下,需要建立基于Hadoop云平台的大数据应用系统,以此来提升信息的处理以及存储效率。本文主要探究基于Hadoop平台的大数据应用系统架构设计,通过总体设计、功能设计、联网平台设计以及数据库设计来实现系统的整体功能,从而提升大数据系统的设计质量以及管理需求。
[关键词]Hadoop平台;大数据;应用系统
中图分类号:S996 文献标识码:A 文章编号:1009-914X(2018)10-0176-01
前言
在传统的卡口信息处理中,其对信息处理的需求相对较低,因而仅仅需要存储数天的数据资料,但是随着社会的发展,人们逐渐提升了对信息的查询速度以及存储量需求[1],在此情况下,传统的数据平台技术已经难以满足使用需求。因而需要通过Hadoop云平台的大数据应用来设计系统,以此来提升数据的存储和查询效率。
1 总体设计方案
在系统的设计与改造过程中,需要通过三个方面的工作来完成,其主要表现在以下几个方面:第一,在系统的设计中,需要对存储系统的硬件进行升级,扩大计算速度以及空间,将硬件设施池化;第二,需要对软件系统进行设计,主要体现在数据库的升级[2],且通过Hadoop技术来确定接口标准,提升系统的稳定行。第三,在系统的设计中,需要对软件设施进行设计,包括数据接收服务器。另外,在卡口的设计中,需要将其与各级子系统进行连接。在卡口的设计中,需要通过云计算联网平台将多个卡口服务器以及数据库连接起来,同时通过服务器将分级卡口接入到平台中,将提升整体的服务质量。……
登录APP查看全文