APP下载

基于地震资料处理的lustre并行存储系统的研究构建

2017-05-06张娟

大陆桥视野·下 2017年3期

张娟

【摘 要】随着我院GPU集群的引进,迫切需要构建一个“优异的存储系统”,两者共同建设一个“高速运算、高速通讯、高速存储”的地震勘探系统,解决长期困扰我院的勘探难题。本文通过Lustre技术研究,构建一个Lustre并行存储系统,测试结果及生产应用验证了该系统与GPU集群是一个完美的匹配,叠前时间偏移等耗时的技术纳入常规化,进行规模化生产,解决了我院油气勘探复杂构造成像难度大的的勘探难题。

【关键字】 Lustre;OSD;MDT

1 .引言

我院勘探任务主要在老区,老区勘探程度高,勘探面临的对象复杂,且新区勘探开发难度大,勘探现状需要采用多项高端地球物理成像技术,包括Kirchhoff叠前时间偏移、逆时偏移(RTM)等,有助于解决油气勘探复杂构造成像难度大的问题,运算时间长却是长期困扰我院的难题,为此,我院引进了GPU集群,将叠前时间偏移等耗时的技术纳入常规化,进行规模化生产。

GPU集群具有高速运算、高速通讯和高度稳定的特征,要求高速存储与之保持同步,建设一个“高速运算、高速通讯、高速存儲”地震勘探系统,才能解决我院勘探难题。本文采取开源的高性能分布式并行文件系统Lustre和低延迟、高带宽的InfiniBand网络实现“高速存储”,Lustre确保存储系统的内部数据的高速存取,InfiniBand确保存储系统和GPU集群的高速数据通讯。

2 .技术研究

Lustre是应用广泛的开源性的集群分布式并行文件系统,采用了数据和元数据分离技术、智能存储技术和高速区域网技术,由OSD、MDD和client组成, OSD负责实际对象数据的存储及智能管理,多个OSD以并行的方式被直接的访问,增加更多的OSD会增加存储的容量,同时线性增加数据吞吐量。……

登录APP查看全文