实时大数据成现实
2014-09-09卜娜
中国计算机报 2014年10期
卜娜
自2012年英特尔发布Hadoop发行版(IDH)后,基于Hadoop架构的大数据应用已陆续在行业开花。从电信到交通,从医疗到金融,通过计算平台的架构革新与软件助力,英特尔已让大数据实时采集、实时分析变为现实。大数据的真正实力开始显现,它正在渐渐改变这些行业的面貌。
从“拖死系统”到“零”影响
大数据分析的需求在智能交通领域由来已久,但实现大数据的实时采集和实时分析却并不像想象得那么简单。对智能交通应用而言,长久以来,大数据分析只能作为延迟的“智慧”。
杭州诚道科技有限公司销售总监陈海涛告诉记者,为了从几百TB的数据中找到交通行业用户需要的信息,借助数据分析的结果帮助用户开发实时应用,他们花了很多年时间进行研究,但始终未果。开始采用大量的PC集群,但因计算能力“跟不上”,很多有价值的信息无法通过关系型数据库细化、挖掘出来。后来又尝试了“小机+存储”模式,结果做一个分析应用有时能‘拖死整个系统。直到他们找到了Hadoop和英特尔,通过制定专门的行业解决方案,才逐渐完成了计算架构的改革升级,渐渐解决了大数据从实时采集到实时分析的一系列问题。
陈海涛所在的公司是做“智能交通”系统集成的,以前一到“五一”、“十一”,他们就会进入加班“黄金周”。因为,只有在这段业务相对空闲的时间里,他们才敢从系统中实时调取数据做一些分析,而不会让系统因此受影响。而现在,从768TB的数据中寻找那些昼伏夜出的可疑车辆、发现套牌车,几秒钟即可完成实时分析,且完全不会影响正常业务系统的运行。……
登录APP查看全文
