语音情感识别的发展与展望

发展 ， 人们对人机交互有 了更 多、 更高 的期待 ， 希望 计算机能听懂 、 理解人类语音中所包含的情感信息 ， 能真正 像一 个 “ 人” 而 不 是一 台机 器 与 人 交 流 。这 是人工智能技术的最高境界 ， 目前人类离这理想 目 标距离还很遥远 ， 还有许多难题有待人们去攻克， 语 音 情感 识别是 其 中的 一项 关 键技 术 ， 近 些 年 越来 越 受到人们 的关 注和重视。“ 计算机的情感 能力 ” 这
Ｈｕ ｚ ｈ ｏ ｕ ３ １ ３ ０ ０ ０ ， Ｚ ｈ ｅ ｊ ｉ ａ ｎ ｇ Ｐ ｒ ｏ ｖ ｉ ｎ ｃ ｅ ， Ｃ ｈ ｉ ｎ ａ ）
Ａｂ ｓ ｔ ｒ ａ ｃ ｔ ：Ｔ ｈ ｉ ｓ ｐ ａ ｐ ｅ ｒ ｉ ｎ ｔ ｒ ｏ ｄ ｕ ｃ ｅ ｓ ｔ ｈ ｅ ｏ ｉ ｒ ｇ ｉ ｎ ａ ｔ ｉ ｏ ｎ ａ ｎ ｄ ｍａ ｉ ｎ ｃ ｏ ｎ ｔ ｅ ｎ ｔ ｓ ｏ ｆ ｓ ｐ ｅ ｅ ｃ ｈ ｅ ｍｏ ｔ ｉ ｏ ｎ ｒ ｅ ｃ ｏ ｇ ｎ ｉ ｔ ｉ ｏ ｎ ， ｓ ｕ ｍｍａ ｉ ｒ ｚ ｅ ｓ ｉ ｔ ｓ ｒ ｅ ｓ ｅ ａ ｒ ｃ ｈ ｓ ｔ ａ ｔ ｕ ｓ ａ ｔ ｈ ｏ ｍｅ ａ ｎ ｄ ａ ｂ ｒ ｏ ａ ｄ，ｔ ｈ ｅ ｎ ｌ ａ ｙ ｓ ｓ ｐ ｅ ｃ ｉ ａ ｌ ｓ ｔ ｒ ｅ ｓ ｓ ｏ ｎ ａ ｎ ａ ｌ ｙ ｚ ｉ ｎ ｇ ｆ ｅ ａ ｔ ｕ ｒ ｅ ｅ ｘ ｔ ｒ ａ ｃ ｔ ｉ ｏ ｎ ａ ｎ ｄ ｍｏ ｄ ｅ ｌ ｉ ｎ ｇ ａ ｌ ｇ ｏ ｉ ｒ ｔ ｈ ｍ ｏ ｆ ｔ ｈ ｅ ｅ ｍｏ ｔ ｉ ｏ ｎ ｃ ｌ ａ ｓ ｓ ｉ ｉ ｆ ｅ ｒ ｓ ，ａ ｎ ｄ ｉ ｆ ｎ ａ ｌ ｌ ｙ ｌ ｏ ｏ ｋ ｓ ｉ ｎ ｔ ｏ ｈｅ ｔ ｆ ｕ ｔ ｕ ｒ ｅ ｄ ｅ ｖ ｅ ｌ ｏ ｐ ｍｅ ｎ ｔ ｏ ｆ ｓ ｐ ｅ ｅ ｃ ｈ
ｅ ｍｏ ｔ ｉ ｏ ｎ ｒ ｅ ｃ ｏ ｇ ｎ ｉ ｔ ｉ ｏ ｎ．
Ｋｅ ｙ ｗｏｒ ｄｓ ：ｓ ｐ ｅ ｅ ｃ ｈ ｅ ｍｏ ｔ ｉ ｏ ｎ ｒ ｅ ｃ ｏ ｎｉ ｇ ｔ ｉ ｏ ｎ； ｐ ｒ ｏ ｓ ｏ ｄ ｉ ｃ ｆ ｅ ａ ｔ ｕ ｒ ｅ；ｆ ｅ ａ ｔ ｕ ｒ ｅ ｅ ｘ ｒａ ｔ ｃ ｔ ｉ ｏ ｎ； ｒ ｅ ｃ ｏ ｇ ｎ ｉ ｔ ｉ ｏ ｎ ａ ｌ ｇ ｏ ｉｔ ｒ ｈ ｍ
的研究也都围绕这两个方向展开。
如何体现智能” 』 。这一观念在 当时太超前了并未
引起 人们 的重视 。直 到 １ ９ ９ ７年 ， 美 国麻 省理 工学 院
２ 语 音情感 的特征参量
已有的研究表明决定语音信号中情感状态的主
收稿 日期 ：２ ０ １ ３— ０ ４一ｌ １ 基金项 目：浙江省教育厅资助项 目（ Ｙ ２ ０ １ ２ ２ ２ ９ １ ６ ） 作者简介 ： 周夕 良（ １ ９ ６ ８ 一） ， 男， 副教授 ， 硕 士， 研究方 向为信号与 信息处理。
ＺＨＯＵ Ｘｉ — ｌ ｉ ａ ｎ ｇ
（ Ｄ ｅ ｐ ａ ｒ ｔ ｍｅ ｎ ｔ ｏ ｆ Ｉ ｎ ｆ ｏ ｒ ｍａ ｔ ｉ ｏ ｎ Ｅ ｎ ｇ ｉ ｎ ｅ ｅ ｒ ｉ ｎ ｇ ， Ｈｕ ｚ ｈ ｏ ｕ Ｖ ｏ ｃ ａ ｔ ｉ ｏ ｎ ａ ｌ ＆Ｔ ｅ ｃ ｈ ｎ ｉ ｃ ａ ｌ Ｃ ｏ Ｈ ｅ ｇ ｅ ，
２ ０ １ ３牟第１ １ 期
文章编号 ： １ ０ ０ ９—２ ５ ５ ２ （ ２ ０ １ ３ ） １ １ — ０ ０ １ ９— ０ ４ 中图分类号 ： Ｔ Ｎ ９ １ ２ ． ３ ４ 文献标识码 ： Ａ
语 音情 感 识别 的发展 与展 望
鼠夕良
（ 湖州职业技术学 院信息工程分院 ， 浙江 湖州 ３ １ ３ ０ ０ ０ ）
０ 引言
随着计 算机 多媒 体 技术 ， 人 工 智 能技 术 的迅 速
教授领导的 Ｍ Ｉ Ｔ媒体实验室情感计算组、 日内瓦大
学 Ｋ ｌ ａ ｕ ｓ Ｓ ｏ ｂ ｅ ｒ ｅ ｒ 教授领 导 的情绪 研 究实 验 室 、 布鲁 塞尔 自由大 学 Ｄ ． Ｃ ａ ｎ ａ ｍ ｅ ｒ ｏ领 导 的情 绪 机器 人 研究
一
小组 、 美国南加州大学语音情感组等 ； 国内有模式识 别国家重点实验室 、 清华大学人机交互与媒体集成
研究所 、 中国科 学 院语 言研 究 所 和浙 江 大学人 工智
能研究所等。
１ 语音情感识别的研 究内容
语音情感识别本质上讲是一个模式识别 问题 ， 包括信 号 的预 处理 、 特 征提 取 、 情感 分 类 与百度文库匹配 ， 系 统框架如图 １ 所示 ， 其中特征的选择与提取、 情感分
类 器 的构建与 匹配 训练 是 最关 键 的两 项 工作 ， 相关
概念 ， 最初是 由人 工智 能创 始人 ， 美 国麻 省理工 学
院的 Ｍｉ ｎ ｓ ｋ ｙ教 授 提 出 的 ， 在 １ ９ ８ ５年 出 版 的 专 著 “ Ｔ ｈ ｅ Ｓ ｏ ｃ ｉ ｅ ｔ ｙ ｏ ｆ Ｍｉ ｎ ｄ ” 中指 出“ 问题 的关键 不 在于 智 能 机器是 否具有 何 种情 感 ， 而 在 于没 有 情感 的机 器
摘 要：对语音情感识别的起源及主要研究 内容作 了介绍 ，对 国内外语音情感识别的研 究现状 作 了归纳总结；对语音情感特征 的提取、情感分类器的建模算法作 了重点分析介绍，最后对情
感识 别未 来发展 方 向进行 了展望 。
关键词 ：语音情感识别 ；韵律特征 ；特征提取 ；识别算法
Ｐｒ ｏ ｓ ｐ ｅ ｃ ｔ ｓ ｆ ｏ ｒ ｔ ｈ ｅ ｄ ｅ ｖ ｅ ｌ ｏ ｐ ｍｅ ｎ ｔ ｏ ｆ ｓ ｐ ｅ ｅ ｃ ｈ ｅ ｍｏ ｔ ｉ ｏ ｎ ｒ ｅ ｃ ｏ ｇ ｎ ｉ ｔ ｉ ｏ ｎ