会议专题

基于Hadoop的海量数据存储平台设计与开发

  随着北部湾海洋生态资源的开发和利用,海量海洋科学数据飞速涌现出来,利用海量数据存储平台合理管理和存储这些科学数据显得极为重要。这里提出了一种基于分布式计算技术进行管理和存储海量海洋科学数据方法,构建了海量海洋科学数据存储平台解决方案,采用Linux集群技术,设计开发一个基于Hadoop的海量数据存储平台。系统由五大模块组成,有系统管理模块、并行加栽存储模块、并行查询模块、数据字典模块、备份恢复模块,能够实现存储海量海洋科学数据。系统模块实现结果表明,该系统安全可靠、易维护、具有良好的可扩展性。

海量数据存储 海洋科学数据 集群技术 功能设计

崔杰 李陶深 兰红星

广西大学计算机与电子信息学院南宁 530004 广西工业和信息化委员会南宁 530022

国内会议

2011年第17届全国信息存储技术大会(IST 2011)

济南

中文

12-18

2011-11-18(万方平台首次上网日期,不代表论文的发表时间)