基于情感仿生代理的多模交互标记语言研究

人机交互是研究人与机器（计算机）之间的信息交互，人机交互模式已从语言命令交互阶段、图像用户界面交互阶段发展到自然和谐的感性用户界面交互阶段。多模界面作为感性用户界面的一种模式可以通过仿生代理来实现机器与人类的交互。但现有的仿生代理无法识别人类的情感，所以很难实现机器与人类真正意义上的自然和谐交互。为了便于仿生代理系统的开发，国外一些研究机构和高等院校开发了用于描述仿生代理行为的语言，但现有的语言都存在一定的局限性，即只能简单的描述仿生代理的情感表现，无法描述仿生代理的情感识别。因此，本课题拟开发出一种多模交互标记语言，该语言以情感表情合成模块、情感表情识别模块、情感语音合成模块、情感语音识别模块和文本情感提取模块为基础，实现对情感仿生代理情感表现与情感识别能力的描述，使用户能够方便快捷的将情感仿生代理嵌入到自己设计的交互背景网页中，具有创新性和挑战性。