科学探索|Typealike:摄像头+镜子实现手势操作电脑

虽然通过手势来控制电脑已经不是什么新鲜事了,但要实现该功能通常需要一些外设或者特殊的嵌入式硬件 。不过加拿大滑铁卢大学正在开发的 Typealike 系统,能够在不增加任何电子装置的情况下实现手势操作 。Typealike 由两个部分组成:一个放在电脑网络摄像头上的向下倾斜的小镜子,以及在该电脑上运行的基于机器学习的软件 。

以调高音量为例,用户只需要做一个大拇指向上的手势,软件会识别这个手势,并相应地提高音量 。滑铁卢大学谢里顿计算机科学学院的硕士毕业生纳林·奇伯(Nalin Chhibber)说:“它始于一个关于使用网络摄像头新方法的简单想法 。网络摄像头是对准你的脸的,但在电脑上发生的大多数互动是围绕你的手进行的 。因此,我们想,如果网络摄像头能接收到手势,我们能做什么?”

科学探索|Typealike:摄像头+镜子实现手势操作电脑
文章图片

此外,通过将网络摄像头的视角下移到他们的手上,用户就不会有Typealike不断查看他们的脸所带来的隐私问题 。由于每个人的手都有不同的外观和动作,研究人员使用30名志愿者创建了一个视频数据库,其中包括该系统目前使用的36种手势 。然后对该数据库进行了机器学习算法的训练,学习如何在手和照明条件不同的情况下持续识别每个手势 。

科学探索|Typealike:摄像头+镜子实现手势操作电脑
文章图片

目前,该系统识别手势的准确率为 97% 。据认为,一旦进一步发展,Typealike 也可用于虚拟现实环境,使手持式控制器成为不必要的 。Daniel Vogel 副教授说:“我们一直在着手制造人们可以轻松使用的东西 。人们看着像 Typealike 这样的东西,或者人机交互领域的其他新技术,他们说这很有意义 。这就是我们想要的” 。
【科学探索|Typealike:摄像头+镜子实现手势操作电脑】
科学探索|Typealike:摄像头+镜子实现手势操作电脑
文章图片