关于互信息学习准则在分类问题中的应用
不同于传统的基于性能为指标的机器学习方法，基于互信息准则的学习方法显示出了独到的优越性。但是，如何理解互信息概念在分类问题中的具体内涵与应用特点仍然是不明确的。本文给出了该问题研究的基本理论公式与方法示意图。并结合我们近期的研究工作，推导了互信息在极值情况下与分类性能关系的相关定理，以及二值分类情况下的误差敏感度分析方程。文中给出若干简单实例，探讨了互信息概念在分类问题应用中的基本解释与应用特点。
信息熵 互信息 学习准则 信息分类 机器学习
胡包钢 王泳
中国科学院自动化所模式识别国家重点实验室，中国科学院北京研究生院，北京 100080
国内会议
北京
中文
35-45
2007-12-11（万方平台首次上网日期，不代表论文的发表时间）