并行集群环境下迭前时间深度偏移作业的运行效

并行集群环境下

迭前时间／深度偏移作业的运行效能研究

大庆油田有限责任公司勘探开发研究院冯保民魏锐李建霞集群技术应用现状

地震数据处理领域一直是高性能计算服务器应用的重要领域。基于队架构的高性能集群并行机是伴随着计算机芯片技术、网络技术、系统集成技术和Ｌｉｎｕｘ的发展而出现的新产品。这些高性能集群并行机主要应用于地震数据处理、全三维可视化数据体解释、油藏模拟计算，尤其在三维叠前深度偏移及高分关辨率地震资料处理得到了很好的应用，高性能集群并行机和三维叠前深度偏移理论的发展，极大地提高了复杂地质构造的地震资料的成像持量和油气勘探目标的准确识别，成为了三维叠前深度偏移及高分辨率地震资料处理的首选平台。二ｏＯ三年，大庆油田公司研究院引进了１２９个节点的高性能集群并行机系统，运行Ｐａｒａｄｉｇｍ公司的ＧｅｏＤｅｐｔｈ三维迭前处理软件。目前，已经完成了１５００ｋｉｎ２三维迭前深度偏移处理任务，实现了实际地震资料处理的工程化。二影响偏移作业运行效能的因素及保障作业稳定运行方案

三维迭前深度偏移工作大致分为三个阶段：预处理、提取速度建立模型、偏移。从工作方式上三个阶段的差别是：预处理为单节点批量处理；速度建模为单节点交互处理；时间偏移和深度偏移为多节点并行批量处理。从作业运行时间上，三个阶段的差别是：预处理作业用时少，单作业时间一般不超过一两天；速度建模则为处理解释人员的人工劳动；偏移阶段根据数据体大小，短则两周，长则一到两个月。偏移阶段的特点是：一次分发任务给上百个节点，这些节点同时参与并行计算。当第一次分发的数据在所有计算节点上全部计算完成后，主节点回收结果数据并进行第二次数据分发，直至作业结束。在这个循环过程中，如果其中某个节点出现问题，则会导致节点计算速度慢，造成其它节点的等待，直到该节点处理完当前任务，回收后才进行下一次任务的分发。所以在确保并行各节点正常稳定工作的同时，应避免某一节点因用户访问数目过多或提交其他作业争夺系统资源而导致该节点计算速度缓慢，造成集群并行系统整体性能下降，如我们后面要重点介绍的屏蔽其它用户对偏移作业运行节点访问就是通过保证该节点用户数目的合理性方面，来提升系统整体性能的实例。

影响偏移作业运行效能的因素有网络延迟、ＣＰＵ速度、内存大小、倍频参数、死进程、文件系统限制、临时交换区、系统负载等。

工作中我们分析了影响偏移作业运行效能的主要因素并摸索出一套行之有效的方案避免了上述问题的发生，保障了作业的稳定运行。

保障作业稳定运行、提高效能的方案：

（１）在大偏移作业提交之前，彻底清除用户死进程和系统死进程。保证正常的系统初始环境。（２）检查所有计算节点的ＣＰＵ数、倍频参数、内存大小是否一致。

（３）检查所有计算节点的临时空间是否满足计算需要，删除无用的文件，释放更多的缓冲空间。（４）检查所有计算节点的管理网络和计算网络是否畅通，有无延迟时间太长的节点。（５）检查所有计算节点是否存在文件大小限制问题。一７７—