Spreader:一种基于元数据的机群文件管理系统

摘要：

随着机群计算能力的增长和应用的深入,机群系统中的文件数量也随之急剧增加。在拥有海量文件的大规模机群中快速搜索进而操作所需要的文件,已成为机群研究面临的重要问题。本文提出一种新颖的基于元数据的智能机群文件管理系统--Spreader。Spreader以对单机文件系统透明的方式实现了单一系统映像的机群文件管理,利用成熟的关系型数据库技术实现海量文件的快速定位,和传统的文件系统相比提供了更丰富的描述文件语义的扩展文件属性机制。实验表明,Spreader在提供了方便、灵活的机群文件查询和管理机制的同时,能够将上亿规模的文件查找性能提高到数百毫秒。

关键词： 机群文件系统 数据库技术 文件元数据

作者: 金翊 洪学海 詹剑峰 孙凝晖

作者单位: 中国科学院计算技术研究所国家智能计算机研究开发中心,北京 100080 中国科学院计算机系统结构重点实验室 北京 100080 中国科学院研究生院信息科学与工程学院 北京 100080 中国科学院计算技术研究所国家智能计算机研究开发中心,北京 100080 中国科学院计算机系统结构重点实验室 北京 100080

会议类型: 国内会议

会议名称: 2007年全国高性能计算学术年会

会议地点: 深圳

会议语种:中文

页码: 51-58

在线出版日期: 2007-10-26（万方平台首次上网日期，不代表论文的发表时间）