自上世纪90年代以来，随着手写识别、语音识别、网络通信技术的发展，人机交互已发生了变化，一个不懂编程以及网络通信原理的普通小孩，可能会比计算机科学家和网络工程师更好地使用计算机。方式的变革使得人机交互变得简单，而这个变革，就发生在短短不到30年内。可预见的是，未来计算机会更加智能，人类使用它会更加自然和简单。
多模态自然人机交互是下一代人机交互的发展趋势。融合视觉、听觉、触觉、嗅觉甚至味觉的多模态交互方式，其表达效率和表达的信息都优于单一的视觉或者听觉模式。
多模态自然人机交互主要分为3个模块，分别是信息多模态交互信息输入、多模态交互信息融合和处理、多模态交互信息反馈。其中，信息输入模块主要接收来自人的“视听触嗅味”五感信息，然后借助多模态信息融合和理解模块，形成“感”觉和认知，并根据专家知识库系统和检索技术形成对用户的信息反馈，构建出多模态自然人机交互系统。
项目形式：远程/实地
项目时间：四周
招生对象：大二以上本科生（详情请咨询老师）
关联专业：语音交互，自然语言处理，图像识别等相关专业
