多模态情感智能系统 

人员介绍

项目导师

王鲁佳

学术导师

岳玉涛、贺登博

项目成员

赵梓合、靳博瑜、杨骁

项目核心介绍

情感并非装饰,而是人类决策与协作的“基础协议”。为加速人工智能在医疗、教育与人机交互领域的产业化应用,我们构建了一套完整的端到端多模态情感智能系统。该系统集成了专用硬件套件,能够同时进行非接触式生理信号监测、面部动作单元检测与音频采集,并结合云端多模态大语言模型(MLLM)进行智能数据分析与动态交互,推动人工智能从“静态大脑”进化为“自适应心智”,使“理解人类”成为下一代智能系统的标准能力,为更具共情力与效能的技术奠定基础。 

成果与荣誉

多模态非接触式生理采集设备于2026年3月获日内瓦国际发明展金奖 

学生研究方向

赵梓合

多模态大语言模型 

靳博瑜

情感智能系统、智能硬件集成 

杨骁

非接触式生理信号处理