人机交互实验室成果获首届泛在智能感知技术创新应用大赛一等奖
2024年11月12日
跳至内容
人机交互实验室参赛作品“基于手机摄像头的移动心率监测应用”获2024年泛在智能感知技术创新应用大赛一等奖。
脉搏波及心率监测是现代医疗和健康管理中至关重要的技术，本作品通过手机拍摄人脸视频的方式实现对心血管相关生理信号如脉搏波和心率等参数的普适测量，服务日常健康监测和远程医疗诊断。团队联合华盛顿大学、青海大学等单位，集成过往研究工作（数据集MMPD[1],工具箱rPPG-ToolBox[2]，高效算法Spiking-PhysFormer[3]，高原场景Summit Vitals[4]），将算法离线部署到手机端测，提升了远程视频生理监测的普适便捷性、边际鲁棒性和端测高效性，在多个数据集中实现接近医疗水平的心率估计。
参考文献：
[1]Jiankai Tang, Kequan Chen, Yuntao Wang, Yuanchun Shi, Shwetak Patel, Daniel McDuff, and Xin Liu. Mmpd: multi-domain mobile video physiology dataset. In 2023 45th Annual International Conference of the IEEE Engineering in Medicine & Biology Society (EMBC), pages 1–5. IEEE, 2023.
[2]Xin Liu, Girish Narayanswamy, Akshay Paruchuri, Xiaoyu Zhang, Jiankai Tang, Yuzhe Zhang, Roni Sengupta, Shwetak Patel, Yuntao Wang, and Daniel McDuff. rppg-toolbox: Deep remote ppg toolbox. In Advances in Neural Information Processing Systems, volume 36, 2024.
[3]Mingxuan Liu*, Jiankai Tang*, Haoxiang Li, Jiahao Qi, Siwei Li, Kegang Wang, Yuntao Wang, Hong Chen. Spiking-PhysFormer: Camera-Based Remote Photoplethysmography with Parallel Spike-driven Transformer. Neural Networks (Under Review), 2024.
[4] Ke Liu*, Jiankai Tang*, Zhang Jiang, Yuntao Wang, Xiaojing Liu, Dong Li, and Yuanchun Shi. Summit vitals: Multi-camera and multi-signal biosensing at high altitudes. In UIC’24, 2024.