开展基于人-系统整合方法的人机交互技术研究，在多模态交互意图理解、基于人因的虚实融合交互等方向开展前沿探索，构建工效要求与评价体系，提升高度复杂场景下实时双向交互的人机协同效能。

研究 方 向：

• 基于多模态的交互语义融合技术研究
  

面向非医用协作机器人人机协作系统，开展多模态交互语义融合技术研究，构建轻量化多模态交互语义融合嵌入式计算系统，提升人与非医用协作机器人的语义级交互效率。

• 面向复杂人机紧耦合系统的人因工效技术研究

研究复杂工况下人机协作过程中的人的能力变化机理，构建机器行为模型、用户操作行为模型、任务和流程模型，支撑复杂人机紧耦合系统高效、可靠运行。

• 基于人因的虚实融合交互技术研究

面向复杂人机协同作业任务，研究三维空间的智能人机交互技术和人机界面的环境适应性、任务适应性方法，提升人机交互系统的适人性，助推新型自然交互技术的转化落地，服务汽车、应急搜救等领域。

研究课题：

• 复杂救援场景下的人机协同交互表征技术

聚焦应急搜救、复杂装备操控等作业场景，环境具有高复杂、高动态等突出特征，重点解决双手被占用的复杂场景下人机协同交互通道受阻问题，建立人与无人系统的新型协同关系，构建人机自然交互系统。

应用场景：应急救援

• 复杂人机紧耦合系统的人因安全理论研究

研究复杂人机紧耦合系统运行中的人机冲突的现象和特征，分析其演化规律及成因，构建异常操作行为模型，从系统全要素以及系统全生命周期两个维度构建人因效能评估体系。

应用场景：应急救援

主 要 研 究 成 果：

• 人机交互领域高水平期刊会议论文发表14篇。

• 大规模用户行为数据采集分析方向，授权发明专利1项。

• 元宇宙方向出版专著1部。