物理科技生物学-PHYICA

系统识别手势以扩展键盘上的计算机输入

技术工程 2022-03-04 21:55:04

keyboard Credit: CC0公共领域研究人员正在开发一种新技术,该技术使用手势在计算机上传递命令。这款名为“type相像”的原型通过一个普通的笔记本电脑网络摄像头和一面简单的镜子来工作。该程序识别用户在键盘旁边或附近的手,并根据不同的手位置提示操作。

例如,用户可以将右手拇指朝上放在键盘旁边,程序会将此识别为增加音量的信号。不同的手势和手势的不同组合可以被编程来执行广泛的操作。

人机交互领域的创新旨在让用户体验更快、更流畅,不需要键盘快捷键或使用鼠标和触控板。

滑铁卢大学切丽顿计算机科学学院的硕士毕业生纳林·奇伯说:“它始于一个关于使用网络摄像头的新方法的简单想法。“网络摄像头正对着你的脸,但电脑上发生的大多数互动都发生在你的手上。所以我们想,如果网络摄像头能接收手势,我们能做什么?”

学分:美国计算机学会人机交互会议录(2021)。DOI: 10.1145/ 3486952最初的洞察导致了一个小型机械附件的开发,该附件将网络摄像头向下重定向到手。该团队创造了一个软件程序,能够在不同的条件下为不同的用户理解不同的手势。该团队使用机器学习技术来训练Typealike程序。

“这是一个神经网络,所以你需要展示你试图检测的东西的算法示例,”Fabrice Matulic说,他是Preferred Networks Inc .的高级研究员,也是滑铁卢大学的前博士后研究员。“有些人的手势会有一点点不同,手的大小也各不相同,所以你必须从不同光照条件下的不同人那里收集大量数据。”

该团队记录了几十名研究志愿者的手势数据库。他们还让志愿者做测试和调查,以帮助团队了解如何使该计划尽可能实用和通用。

滑铁卢大学计算机科学副教授丹尼尔·沃格尔说:“我们总是着手制造人们可以轻松使用的东西。“人们看着类似the相像的东西,或者人机交互领域的其他新技术,他们说这很有意义。这就是我们想要的。我们想让技术变得直观、简单,但有时要做到这一点需要大量复杂的研究和复杂的软件。”

研究人员表示,typeseach程序在虚拟现实中还有进一步的应用,可以消除对手持控制器的需求。

这项名为“类型相似:扩展笔记本电脑交互的近键盘手姿势”的研究由奇伯、马图利奇、沃格尔和团队成员赫曼特·巴斯卡尔·苏拉勒撰写,最近发表在《ACM人机交互学报》上。

来源:由phyica.com整理转载自PH,转载请保留出处和链接!

本文链接:http://www.phyica.com/jishugongcheng/11654.html

发表评论

用户头像 游客
此处应有掌声~

评论列表

还没有评论,快来说点什么吧~