研究背景:
智慧人居感知与计算实验室(Sensing and AI-engaged Living Lab,SNAIL Lab)围绕“人居环境下的多模态感知、计算与交互”方向,探索如何在家居环境下基于多通道传感对人的行为与心理进行感知与建模,构建以人为中心的智能系统,提升人与机器协作的效率和质量,促进机器对人类认知的理解。SNAIL Lab关注当前智能系统所面临的感知模态碎片化、深度个性化缺乏以及用户情感缺失等痛点,顺应用户对未来高品质生活的追求与老龄化社会趋势,持续探索如何将前沿科技与人本设计深度结合,构建安全、可信且具有同理心的智慧人居体系,为用户提供直观、自然、高效且舒适的使用体验。
研究方向:

SNAIL Lab从平台、数据、算法、原型几个维度开展前沿探索研究:
平台层面:搭建了全球领先的实体/数字智慧家居综合实验平台,涵盖12+传感器网络,1PB存储能力和高速计算能力,可支撑数据采集、智能感知、计算健康、多模交互等研究,已获发明专利授权6项;
数据层面:正在构建PB级多模态行为与情感超大规模数据集,涵盖视觉、听觉、触觉、生理、无线感知、IMU数据等模态,自研基于多模态大模型(LMM)的AIoT智能自动认知架构,提高数据标注效率与准确率;
算法层面:围绕人类行为感知(Human Activity Recognition,HAR)与情感计算(Affective Computing),研发一系列多模态智能感知算法,在家庭服务机器人认知训练、居家心理健康监测、智能情感陪伴等领域落地应用;
原型层面:研发了包括情绪健康台灯(Luma)、智能健身镜(Magic Mirror)、宠物智能项圈(DogChat)、剧本杀机器人(POIROT)、睡眠辅助app(Circadia)、智能烘焙系统(BakeEase)等一系列具有具身能力的下一代交互产品,具有广阔的转化前景;
部分研究成果:

智能家居综合实验平台

多通道传感器网络

智能家居数字孪生平台

基于虚拟现实的触觉交互情绪疗愈系统

“人-车-家”(HVH)一体化智能体验概念设计

协同设计视角下的共同居住者家庭自动化赋权问题

基于多模态大模型(LMM)的AIoT智能自动认知架构

情绪健康台灯(Luma)

智能烘焙系统(BakeEase)

宠物智能项圈(DogChat)

智能健身镜(Magic Mirror)

专利布局