基于开源软件zabbix实现对处理解释高性能集群整体CPU利用率的监控
2021-10-22陈涛梁妍曹士炳张卫华
科技信息·学术版 2021年12期
陈涛 梁妍 曹士炳 张卫华


摘要:随着石油勘探地震资料处理、地质综合解释新技术的发展,带来了更大的数据量、更复杂的数学运算等问题,必须借助高性能计算机集群方可解决,而集群的利用率及耗电等使用成本对项目的经济性具有重大影响。通过探索,实现了基于开源软件zabbix对集群CPU利用率的有效监控,可充分利用集群资源,使高性能计算机集群系统运行在最佳状态,提高了作业运算效率并节约成本。
关键词:集群监控;高性能计算集群;CPU利用率;Zabbix
1、引言
在石油地震勘探和开发的过程中,面对勘探目标向复杂地质构造、地层岩性等领域转移,东方物探创新采用了“宽方位、宽频带、高密度”即“两宽一高”三维勘探技术,地震数据的采集量变得越来越大。在与某国家合作的勘探项目中,每天数据量达到2T左右,项目整体数据量达到PB级别,这就需要大规模的高性能计算机(HPC)集群对采集到的数据进行并行处理[1]。
HPC集群,是由高性能计算机节点与存储通过高性能交换机连接,具有较强的运算速度和信息处理能力。通过并行算法和开发相关软件,解决大规模科学问题的计算和海量数据的处理。在石油勘探领域,用于地震勘探资料处理解释的高性能计算集群称之为处理解释集群。
大数据量的作业要求充分利用高性能计算资源,使处理解释集群运行在最佳状态。CPU利用率,正是衡量高性能计算集群运行效率的重要指标。它指的是HPC节点在某一时间点CPU繁忙程度,对于处理解释集群来说,CPU的利用率即是处理解释作业效率的表现,并且在机房中的处理解释集群,其耗电量是成本的很大一部分。……
登录APP查看全文
