海量卫星遥感数据实时存储与交换技术设计与实现
2017-10-21周正钟志农李军伍江江
电脑知识与技术 2017年18期
周正 钟志农 李军 伍江江



摘要:随着人类对地观测卫星系统的发展,卫星遥感数据量爆炸性增长。海量的遥感数据对当今存储系统存储容量、数据可用性以及I/O性能等方面提出了越来越高的要求。针对需要持久化存储与高速交换的数据,该文设计并实现了一种基于共享文件系统和文件编目消息推送的海量卫星数据实时存储与交换方法。实验测试表明,该方法针对海量卫星遥感数据的实时存储与交换取得了很好的效果。
关键词:海量;遥感数据;消息推送;实时存储;实时存储与交换
中图分类号:TP311 文献标识码:A 文章编号:1009-3044(2017)18-0009-05
1绪论
随着人类对地卫星观测系统的发展,遥感数据逐步呈现多源、多尺度、多时相、全球覆盖和高分辨率特征,数据量呈爆炸性增长,数据存储规模达到TB级甚至PB级,IDC预计,到2020年全球数据量将达到40ZB。如何更加有序、更加高效地存储与管理海量遥感数据,实现遥感信息的快速共享与分发,已经成为空间信息科学领域研究部门、业务应用部门和相关机构重点关心的问题。
同时,气象灾害实时监测预报、天基遥感信息实时侦察监视、军事情报数据实时挖掘等业务应用对海量卫星遥感数据的实时分析和处理提出了更高的要求。上述实时分析处理业务在实现对海量卫星数据高效存储的同时,更需要在多个处理节点间实现海量卫星数据的实时共享和更新。针对此问题,不但需要利用存储系统在存储容量、数据可用性以及I/O性能等方面提供支持,更亟需对海量卫星遥感数据高速实时存储和数据交换机制展开研究。……
登录APP查看全文
