会议专题

自动获取大规模的汉语紧密组合词汇关联对

  词汇关联对(lexical cohesion pairs, LCP)是真实文本中出现的反映不同句法语义关联关系的实词组合对。可靠的词汇关联对可以在汉语文本的复合词分析、句法结构排歧、远距离依赖识别和语义排歧等研究中发挥重要作用。<br>  本文提出了一种将基本块分析和统计筛选相结合的处理方法,保证在较高的提取精度条件下,尽可能多地从大规模真实文本语料库中自动获取较可靠的汉语紧密组合词汇关联对。在约4000万字规模的人民日报词语切分和词性标注库上进行的关联对获取。实验结果表明:该方法可以在废弃35.6%的有效分析信息条件下,自动提取出约73万个汉语名名和动名关联对,抽样提取精度达到了96%左右,显示了较好的处理效果。

文字处理 词汇关联 语义排歧 数理语言学

邱晗 周强

清华大学 信息技术研究院语音和语言研究中心,北京,100084

国内会议

第十一届全国人机语音通讯学术会议

西安

中文

1-5

2011-10-16(万方平台首次上网日期,不代表论文的发表时间)