SMDFS分布式海量小文件系统的大空间聚合存储技术
海量小文件聚合存储技术大多以目录或逻辑目录为单位,将小文件聚合为实际存储的大文件并建立小文件的元数据信息,实现小文件的快速访问.传统小文件聚合存储技术读写操作性能受目录结构的影响差别较大.在现有研究成果的基础上,分析不同目录结构聚合空间的特征,提出大空间聚合存储技术和元数据分裂技术,为不同目录结构的海量小文件存储提供通用的解决方法,并基于开源分布式文件系统HDFS实现了一个分布式海量小文件系统SMDFS.测试表明,大空间聚合技术能有效支持不同目录结构的海量小文件数据,相较于SMDFS早期版本,小文件数据装载和访问性能均有很大程度的提高.
海量小文件系统 聚合存储 分布式元数据管理 目录结构
严巍巍 何连跃 李三霞 成颖佼
国防科学技术大学计算机学院 长沙410073
国内会议
长沙
中文
29-34
2015-09-17（万方平台首次上网日期，不代表论文的发表时间）