项目背景
石油勘探地震资料处理是一种数据密集型和计算密集型相结合的应用,对计算和I/O的处理能力都有较高的要求。而在使用PC Cluster进行数据处理的时候,一个最主要的问题就是数据的I/O瓶颈问题。如果PC Cluster中的节点无法获得高速率的数据传输性能,其计算性能也无法获得充分发挥。随着国内外地震物探高、新技术的快速发展,目前大数据体三维项目越来越多,处理的单个数据文件越来越大,数据量也越来越大,特别是连片处理方式的使用。原始连片数据达到10TB以上,这样,对于存储容量和I/O的要求更高了。存储环境已经成为未来石油勘探资料处理规模发展的关键因素。
方案描述
以BWStor CSA为核心的地震资料处理系统存储解决方案由以下几个部分组成:
1、地震资料处理用PC Cluster作为BWFS的客户端,对后端共享存储平台进行并发读写。
2、选择光纤盘阵+IO节点模式进行数据存储,通过以太网接入以提供较经济的接入成本。
3、元数据服务器以带外方式进行整个文件系统的元数据管理、提供文件级共享的集中存储。

BWStor CSA石油勘探地震资料处理存储系统解决方案拓扑图
方案价值
相对于传统的独立存储和文件共享方案,该解决方案具有以下优势:
1、统一命名空间带来的数据统一存储与管理。
2、BWStor CSA系统能充分利用多个存储节点进行并发数据传输,向集群中的众多节点提供高性能的数据传输服务和数据共享服务,充分发挥PC Cluster的计算能力和地震资料处理软件的性能。
3、系统容量和性能皆可线性扩展。
4、使用BWStor CSA系统完全兼容NFS语义,在NFS上运行的应用程序,不必进行任何修改,就可在BWStor CSA上运行。