基于Spark高性能计算的仿真云平台设计

摘要：

随着云计算与分布式集群技术的发展,大数据概念在数据存储、数据分析等多方面都有了更广的扩展和延伸,其中基于Spark的高性能计算技术近年来也得到了前所未有的重视.本文主要针对当代仿真工具无法对海量数据进行存储、计算等问题,提出了一个基于Spark高性能计算的新型仿真云平台设计,该平台不仅能够兼容集群利用现有计算资源灵活高效地处理海量数据,而且还具有良好的可扩展性,能够满足仿真领域机器学习场景的需求.

关键词： 仿真云平台 数据处理 可扩展性 高性能计算

作者: 李军 彭耀 温明杰 任德虎 赵致杰 张陈斌 陈宗海

作者单位: 中国科大-象形大数据商业智能联合实验室,安徽合肥,中国,230031;安徽象形信息科技有限公司,安徽合肥,中国,230031 中国科大-象形大数据商业智能联合实验室,安徽合肥,中国,230031;中国科学技术大学自动化系,安徽合肥,中国,230027

会议类型: 国内会议

会议名称: 第16届中国系统仿真技术及其应用学术会议

会议地点: 厦门

会议语种:中文

页码: 426-429

在线出版日期: 2015-08-08（万方平台首次上网日期，不代表论文的发表时间）