面向地理信息系统的海量小文件存储系统设计与实现
本文提出了一种面向地理信息系统的海量小文件存储系统设计与实现,扩展了分布式文件系统HDFS,能够高效地存储海量小文件。本存储系统具有4个特性:1)支持海量小文件数据的分布存储;2)分布放置海量小文件的元数据,消除单一元数据服务器造成的瓶颈;3)对小文件的元数据进行容错,以应对节点失效带来的元数据丢失的问题;4)提供易用的小文件操作接口,使用户透明地访问小文件。经过系统性能测试表明该系统能够很好地支持海量小文件的存储,并且系统经过优化后大幅地提高了小文件的访问效率,增强了系统的可靠性。
海量小文件存储系统 地理信息系统 方案设计 性能优化
Xu Ye 徐叶 Wang Lei 王蕾 He Lianyue 何连跃 Li Shanshan 李姗姗 Wu Qingbo 吴庆波
Computer science department, National University of Defense Technology, Changsha Hunan 410073 国防科学与技术大学计算机学院 湖南 长沙 410073
国内会议
无锡
中文
191-196
2012-07-12(万方平台首次上网日期,不代表论文的发表时间)