论文研究 一种数据本地化存储与处理系统.pdf

简述了当前大型数据中心普遍采用的计算节点集群与存储系统模块化设计的系统结构，说明了部署在各模块上的主要集群系统。分析了具有独立性的结构化数据本地化存储于计算节点的可能性，给出了系统基本框架，从总体拥有成本（TCO）的角度分析了其价值。结合高能物理研究的原始数据特点，认为数据本地化存储在节点上，有利于提高整体利用率，指出了关键部件——文件元数据管理系统的设计要点，分析了PBS作业批处理系统集成文件元数据管理系统的三种方案，给出第一种方案的详细设计，相应的用户提交作业方式的改变。在测试环境下，初步部署了文件元数据管理系统，测试了三种集成方案，给出了简要的分析比较。