APP下载

基于Hadoop的大数据处理系统分析与研究

2020-07-09卢爱芬

现代信息科技 2020年2期

摘  要:针对当前很多医院或者企业在面对庞大数据处理过程中存在能力缺乏的问题,研究提出基于Hadoop的数据分析系统,该系统能够用于医院辅助诊断以及数据比较分析,同时该系统融合多节点分布式计算技术,能够依据医院患者医检结果生成初步诊断结果,可显著改善传统医疗过程中数据信息处理效率较低的问题。

关键词:Hadoop;大数据处理系统;大数据分析

中图分类号:TP311.13       文献标识码:A 文章编号:2096-4706(2020)02-0109-03

Abstract:In view of the lack of ability of many hospitals or enterprises in the process of huge data processing,this paper proposes a data analysis system based on Hadoop,which can be used for hospital auxiliary diagnosis and data comparative analysis. At the same time,the system integrates multi node distributed computing technology,it can generate preliminary diagnosis results according to the medical examination results of the patients in the hospital,which can significantly improve the low efficiency of data information processing in the traditional medical process.

Keywords:Hadoop;big data processing system;big data analysis

0  引  言

近年來,互联网技术以及计算机技术的发展,在一定程度上改变了人们的日常生活和工作方式,使人类社会逐渐进入了大数据时代,使医疗信息化逐渐加速,根据有关部门统计数据显示,在2018年,我国医疗信息化建设共投入资金300多亿元,同时多种医疗信息数据量扩大,且呈现爆炸增长的方式,过去主要是通过数据仓库的方式进行储存,相应的医院信息系统由于受到硬件等多种因素的影响,对于一些数据量较大的非结构化数据在处理过程中很容易出现问题,无法获得良好的储存能力和计算效果。因此本研究在当前大数据背景下设计了Hadoop的数据分析系统,能够更好地帮助企业或者医院实现数据整合加工和定性分析。

1  大数据及其处理技术

最早的大数据是由全球麦肯锡公司提出的,大数据是指能够超出常规数据库或者数据处理能力,被迫采用一些非常规方式的数据集,同时大数据具备四大特点,包括较大的体量、处理……

登录APP查看全文