会议专题

ZFS在基于HDFS的近线存储系统中性能分析与实现

通过将云计算技术应用于近线存储领域,设计实现了基于Hadoop分布式文件系统(Hadoop distributed file system,HDFS)的海量近线存储系统,用以扩展TH-1A超级计算机在线存储系统空间,提高系统利用率.该系统采用胖存储节点(大型的存储服务器)构建基于HDFS的近线存储集群,通过ZFS文件系统来解决HDFS存在的低效和空间利用率低的问题,采用双副本冗余、虚拟存储、动态管理等方法优化存储服务器存储和管理效率,提高了近线存储系统性能.实验结果表明,与传统HDFS集群存储系统相比,该系统在可靠性、经济性及灵活性上均具有一定的优势.

近线存储 Hadoop分布式文件系统 ZFS动态文件系统 性能分析

刘言青 刘光明 董文睿 胡维

国防科学技术大学计算机学院 长沙 410000

国内会议

2014第20届全国信息存储技术学术会议

北京

中文

1-6

2014-09-11(万方平台首次上网日期,不代表论文的发表时间)