多核MapReduce编程模型的性能分析

摘要：

MapReduce是云计算时代广泛使用的并行编程模型.Hadoop版本的MapReduce编程模型无法高效地使用多核处理器的计算能力,因此斯坦福大学研制了面向多核处理器的MapReduce库Phoenix.本文针对Phoenix2进行了深入剖析,并以WordCount为例,进行了详细的性能测试,并与Pthread直接编写的并行程序、Hadoop版本的MapReduce编程模型进行了对比测试.同时,还在Intel处理器平台和飞腾处理器平台上对MapReduce的性能进行了初步测试.本文给出了详细的实验结果和分析,以指导将来多核MapReduce的优化.

关键词： 编程模型 并行计算 性能测试 多核处理器

作者: 伍琦 王蕾 王永文 窦强 龚锐

作者单位: 国防科技大学计算机学院 长沙410073

会议类型: 国内会议

会议名称: 第十七届计算机工程与工艺年会暨第三届微处理器技术论坛

会议地点: 西宁

会议语种:中文

页码: 429-434

在线出版日期: 2013-07-20（万方平台首次上网日期，不代表论文的发表时间）