neck face可穿戴传感技术硬件的特写，包括红外摄像头、近红外LED和红外窄带通滤波器。功劳:科幻实验室/提供人类面部动作传达情绪，并帮助我们进行非语言交流和身体活动，如吃和喝。追踪面部运动——以及可能的原因——是NeckFace的一个拟议应用，NeckFace是最早的项链式可穿戴传感技术之一。康奈尔大学安·鲍尔斯计算和信息科学学院信息科学助理教授张成领导的一个团队开发了NeckFace，它可以通过使用红外摄像机从脖子下面捕捉下巴和脸的图像来连续跟踪完整的面部表情。
他们的工作在“颈部空间:持续跟踪颈部可穿戴设备上的完整面部表情”中有详细描述，该论文于6月24日发表在《交互、移动、可穿戴和无处不在技术会议录》上。
共同的主要作者是陈拓超(来自北京大学)和(来自麦吉尔大学)，未来交互智能计算机接口(SciFi)实验室的访问学生，以及康奈尔大学MPS学生陶松云。其他撰稿人包括康奈尔大学信息科学领域的博士生林贤哲、莫斯·坂下和张瑞东，以及康奈尔大学鲍尔斯学院的信息科学教授弗朗索瓦·吉姆布雷蒂埃。
NeckFace是张艺谋之前作品的下一代，该作品产生了C-Face，这是一款类似的设备，但采用的是耳机格式。张说，NeckFace在性能和隐私方面有了很大的改善，并且让佩戴者可以选择不太显眼的颈戴设备。
除了潜在的情绪跟踪，张艺谋还看到了这项技术的许多应用:当前置摄像头不可用时，可以进行虚拟会议；虚拟现实场景中的面部表情检测:和无声语音识别。
“最终的目标是让用户能够通过持续跟踪面部动作来跟踪自己的行为，”SciFi Lab的首席研究员张说。“希望这能告诉我们很多关于你身体活动和精神活动的信息。”
NeckFace，在信息科学助理教授张成的科幻实验室开发。功劳:科幻实验室guimbretère表示，NeckFace也有改变视频会议的潜力。
“用户不需要小心翼翼地呆在摄像机的视野中，”他说。“相反，当我们在教室里走动时，NeckFace可以重现完美的头部照片，甚至可以走到外面和一个远方的朋友一起散步。”
为了测试NeckFace的有效性，张和他的合作者对13名参与者进行了一项用户研究，要求每个人在坐着的时候做8个面部表情，在走路的时候再做8个。在坐着的情况下，参与者还被要求在进行面部表情时旋转头部，并在一次会话中移除和重新安装设备。
NeckFace在两种设计中进行了测试:一个领口，搭在脖子后面，双摄像头刚好在锁骨下方；还有一条项链，脖子下面挂着一个像吊坠一样的红外摄像装置。
该小组使用iPhone X上的TrueDepth 3D相机收集基线面部运动数据，然后将其与NeckFace收集的数据进行比较。在坐着、走路和重新站立的表情之间，研究参与者总共表达了52种面部形状。
通过深度学习的计算，该小组确定NeckFace检测面部运动的准确度几乎与使用手机摄像头直接测量的准确度相同。研究人员说，颈带比项链更精确，这可能是因为颈带上的两个摄像头比安装在中心的项链摄像头能从两侧捕捉到更多的信息。
张说，这种设备经过优化后，在心理健康领域特别有用，可以跟踪人们一天的情绪。他说，虽然人们并不总是把情绪挂在脸上，但随着时间的推移，面部表情的变化量可能表明情绪波动。
"我们真的能看到你一天中的情绪变化吗？"他说。“有了这项技术，我们就可以拥有一个关于你一天中身体和精神状况的数据库，这意味着你可以跟踪自己的行为。此外，医生可以利用这些信息来支持决策。”
来源：由phyica.com整理转载自PH，转载请保留出处和链接！
