汉语口语对话中姿态与语音信息关系初探
信息交互方式多种多样，以语音和姿态的表达最为自然，因此提高人机交互能力就需了解交际过程中的这两种模态对信息表达之间的关系。本文介绍了语音与姿态关系的相关理论和产生模型，并以电视访谈节目自然对话的视频和音频数据为研究对象，对汉语普通话语音和姿态信息在交际过程中的关系进行初步研究，在详细的语音学和姿态标注的基础上，分析了口语对话中焦点重音与姿态动作之间的关系，以及韵律边界和姿态边界之间的关系。发现语音上重音表达往往伴随较强烈的手部动作，而且此时手和头部动作之间有互补的现象；韵律边界和姿态边界没有时间上的对应关系，但有很大的相关性，这些结果都支持语音与姿态表达之间的关联理论。
多模态标注 汉语口语 对话姿态 语音信息 人机交互
李爱军 张利刚 李洋 孟昭鹏 王霞
中国社会科学院语言所，北京,100732 中国社会科学院语言所，北京,100732；天津大学计算机科学与技术学院，天津,300072 天津大学计算机科学与技术学院，天津,300072 诺基亚中国研究中心，北京,100013
国内会议
安徽黄山
中文
2007-10-21（万方平台首次上网日期，不代表论文的发表时间）