大数据负载的体系结构特征分析

摘要：

本文挑选了常用的大数据负载,它包含了离线分析和交互式查询负载.在大数据平台上测试了这些负载运行过程中的体系结构特征,度量了重要的体系结构特征参数，并采用PCA和SimpleKMeans算法进行降维和聚类分析.试验结果表明负载之间有相似的属性,如Difference和Projection共享相同的微体系结构特征.研究结果对于硬件平台如处理器的设计,应用程序的优化,具有指导性的意义.以及对大数据基准测试平台的设计提供了参考价值.

关键词： 大数据负载 体系结构特征 参数度量 平台设计

作者: 罗建平 谢梦瑶

作者单位: 中国科学院 计算技术研究所 先进计算机系统研究中心,北京 100190;北京航空航天大学 软件学院,北京 100191 中国科学院 计算技术研究所 先进计算机系统研究中心,北京 100190;郑州大学 信息工程学院,河南

会议类型: 国内会议

会议名称: 2014全国高性能计算学术年会

会议地点: 广州

会议语种:中文

页码: 883-886

在线出版日期: 2014-11-06（万方平台首次上网日期，不代表论文的发表时间）