基于Ceph的海量小文件存储的优化方法

摘要：

分布式文件系统Ceph因其优秀的架构设计,已被很多大型企业广泛研究.但是由于Ceph本身的设计造成数据的双倍写入,随着大量小文件的同时访问时,会使得Ceph系统性能下降.为了提高Ceph存储和访问小文件的效率,本文把一组相关文件归档为一个大文件来减少文件的数量,然后使用2-3-4树来建立一种索引机制,使得小文件能够灵活添加文件、快速定位文件.实验结果表明该优化方法提高了存储和访问大量小文件的效率.

关键词： 分布式文件系统 小文件存储 文件合并 索引机制

作者: 张毕涛 辛阳

作者单位: 北京邮电大学信息安全中心,北京,100876

会议类型: 国内会议

会议名称: 第十届中国通信学会学术年会

会议地点: 北京

会议语种:中文

页码: 229-234,222

在线出版日期: 2014-10-01（万方平台首次上网日期，不代表论文的发表时间）