APP下载

基于海量数据自动计算装载、分配的方法与装置

2013-04-29邵杰胡波杨丽娟

科协论坛·下半月 2013年7期

邵杰 胡波 杨丽娟

摘 要:随着移动互联网的快速发展,以及电信行业自身业务的不断增长,企业数据存量已达到PB级,海量数据模式对存储系统的性能及可靠性提出了更高层次的要求。当存储数据增加到一定规模时,会导致系统中某一个或多个存储设备性能降低、I/O响应时间较长、无法满足海量数据的存储需求。提供一种基于海量数据的数据分配方法、装置的方案,能够有效解决现有技术中无法根据数据的重要程度及当前存储设备的性能进行自动分级存储等问题,从而降低存储设备I/O响应时间,提升设备存储利用率。

关键词:异构数据 分级存储 海量数据存储 业务存储优先级

中图分类号:TP311.13 文献标识码:A 文章编号:1007-3973(2013)007-078-02

1 引言

随着移动互联网的快速发展,智能终端的普及,以及物联网、云计算等新兴产业的兴起,海量数据成为当前最显著的特征。预测数据显示,到2015年,每秒钟将有100万分钟的视频内容跨网络传输;从2010年到2015年,全球移动数据流量将增长26倍。面对海量数据来袭,目前业界仍采用根据数据业务情况事先规划存储的方式,即为分属于不同业务的数据事先分配不同的存储设备,数据生成后直接按照事先分配的存储设备进行存储。

传统方式进行海量数据的存储时,一般需要单独部署数据主控服务器来进行(所述数据主控服务器中预先存储了事先规划的数据存储规则),当系统中的数据增加到一定规模,导致系统中某一个……

登录APP查看全文