会议专题

海量小文件存储系统的聚合空间技术

基于目录聚合的分布式海量小文件存储技术能有效提供百亿级以上的海量文件存储与买时访问,主要适用于每个目录下有大量文件的情况.但在网络地理信息系±g(WebGIS)中,海量的栅格数据以四叉树方式组织,目录数多、每个目录下的文件数只有数个,采用基于目录聚合的海量文件存储技术存储四叉树文件时面临支持文件数量少、文件存储和访问效率低等问题.针对这些问题,本文提出聚合空间的概念和局部化优先的对折聚合存储方法,买现了基于聚合空间的海量小文件系统.测试表明基于聚合空间的海量小文件系统可以有效地支持大规模四叉树栅格数据,存储和访问性能也提高了数倍.

数据存储系统 聚合空间技术 海量小文件 访问控制

刘俊 何连跃 李姗姗 屠放 刘磊

国防科学技术大学计算机学院,湖南省长沙市410073 国家信息保障重点实验室,北京,100072

国内会议

2013全国高性能计算学术年会

桂林

中文

32-38

2013-10-29(万方平台首次上网日期,不代表论文的发表时间)