地球与环境 2022-01-19 17:39

德克萨斯大学阿灵顿分校(The University of Texas at Arlington)的一名研究人员正在开发一种技术,可以让虚拟现实用户看到与他们在线互动的人的面部表情。

阮副总裁是一名计算机科学助理教授,他从美国国家科学基金会(National science Foundation)为该项目获得了近25万美元的拨款,这是他与诺克斯维尔市田纳西大学(University of Tennessee-Knoxville)的刘健(Jian Liu)共同获得的一笔更大的拨款的一部分。

VP Nguyen
副总裁阮

阮说:“这是第一批让我们能够详细监测人类面部活动的设备之一,它有多种潜在的应用,从虚拟现实游戏到医疗保健。”

“该项目将人类面部解剖和肌肉知识与电子和计算建模技术联系起来,为传感基于面部的生理信号开发分析模型、硬件和软件库。”

目前的虚拟现实耳机会屏蔽用户的大部分面部。Nguyen的团队发明了一种轻量、不显眼、能保护用户隐私的设备。

该设备将用于中风患者或其他说话有困难的人的语言增强,使医生能够准确地查明病人的肌肉受到影响的部位,并根据这些信息制定治疗计划。此外,它还可以在嘈杂的环境下使用,如地铁或酒吧,因为语音识别技术不能很好地发挥作用。

“细粒度地监测人类面部肌肉活动,并重建3D面部表情是一项具有挑战性的任务,”UTA计算机科学与工程系主任姜宏说。“该项目将推进戴耳式传感技术的先进水平,并将学到的知识通过多种传感模式进行传输。这项研究的结果可以实现广泛的应用,从虚拟现实和增强现实到情感识别到医疗保健。”

Nguyen于2020年加入UTA,是无线和传感器系统实验室的主任,该实验室专注于为信息物理解决方案构建无线、移动和嵌入式系统,以监测和改善人类健康状况和生活环境。这包括可穿戴、移动和无线传感系统,用于监测人体呼吸量、大脑活动、肌肉活动、皮肤表面变形和血压,适用于各种医疗保健应用。

——Jeremy Agor,工程学院