原副标题:下摆里的“异能”:Facebook手带式AR感应器,可隔空写字、驾驭介面
子豪 丽翔 凹非寺
力学位 报导 | 社会公众号 QbitAI

这一设备由Facebook的AR/VR科学研究部门——Facebook Reality Labs(FRL)研制,配戴者能透过小腿上的电下肢讯号,以手掌姿势支配AR隐形眼镜。


那么,它能用以做甚么呢?
据非官方介绍,不论是走在马路上还是Tiruvanamalai,手把放到身后、两边或者公文包里,都能透过手带同时实现驾驭。

与力学按键相比,交互式按键不仅能即时采用,而且能够随着推移,学习和适应环境每一人不同的写字艺术风格,并产生适应环境性的变化,同时实现更慢的写字速度。

“我们相信,可穿戴的手带设备能为AR隐形眼镜,提供超低摩擦、即时可用的输入,但它们本身并不是一个完整的解决方案。
就像鼠标是用户介面的一部分一样,需要在意图预测和用户建模方面为他们提供帮助,以实时适应环境用户以及特定的环境。”
因此,FRL项目组近期正致力于,积极探索适应环境特定环境的自适应环境介面,同时实现“智能点击”。
也就是,无需用户终端视线、浏览菜单,系统透过在不同环境中预测用户意图,主动提供自适应环境介面,而用户只需轻量级的反馈,就能进行支配。
FRL科学研究科学经理Tanya Jonker也补充道:
“系统会学习有用户位置和关键第一类的信息,例如跑鞋或活动识别,根据用户过去的行为预测意图。
比如说,往常你穿着某一双鞋出门时,通常会启动音乐程序。那么当你再次穿上它出门,系统认为你最有可能想要收听音乐,于是显示屏上会出现‘是否播放音乐?’选项,用户采用简单的表情符号确认或更改建议即可。”

虽然利用超低摩擦的输入方式,能够同时实现与自适应环境介面的交互,但是要想对交互式物体有所感知,还需要触觉技术。
对此,FRL科学研究科学总监Sean Keller表示:
“人们从出生时的第一次抓握,直到灵巧地操作物体和在按键上写字,手和手掌会拥有非常丰富的反馈。
我们利用触觉讯号来了解世界,触觉使我们能够采用工具和精细支配。从采用手术刀的外科医生到感觉到琴键边缘的钢琴演奏家,这一切都取决于触觉。”
利用手带,用户无需进行查看,就能够透过触觉作出识别,并进行决策。比如说:

当有电话呼入时,透过不同的触觉反馈,用户即可得知对方的身份。
甚至,科学研究人员还补充说:“触觉还能够传达不同的情感,这可能是改善社交沟通的一种新的方式。”
目前,Facebook项目组正在构建科学研究原型,包括拥有8个气动波纹管的Bellowband,以及采用了6个震动触动器和新颖的小腿挤压机制的Tasbi,以进一步积极探索的触觉反馈的类型。
利用EMG技术同时实现支配
这些机能,都是依赖EMG(肌电图)技术同时实现的。
EMG技术,就是采用感应器,将透过小腿传到手部的电下肢讯号,转化为数字指令。用户能用这些指令来控制设备的机能,这种支配程度是高度个人化的,能用于多种情况。


FRL项目组对此作了解释:
手是人们接触世界的重要身体部分,戴在小腿上能够利用手部丰富的支配机能,同时实现更好的交互机能。
与语音支配相比,穿戴设备更便于在公共场合采用;
类似手表的设计使其能够用于日常生活和社交环境;
并且,小腿位置也适合舒适地配戴一整天;
而设计成一款单独的设备,能够同时实现更便捷的应用,无需透过手机或者其他设备支配;

这项获得LeCun点赞的技术,自然也引起了网友的广泛关注。
不少网友为此感到惊喜:

“这能让失去手的人,仍然能依靠神经来模拟表情符号,不是吗?”



2019年,Facebook斥资数亿美元收购了CTRL-labs,原科学研究项目组也随之加入FRL。
与此同时,也有网友对此感到欣喜:

参考链接:
[1]https://tech.fb.com/inside-facebook-reality-labs-wrist-based-interaction-for-the-next-computing-platform/
[2]https://twitter.com/schrep/status/1372568994738180098
<!--article_adlist[— 完 —
本文系网易新闻•网易号特色内容激励计划签约账号【力学位】原创内容,未经账号授权,禁止随意转载。
原副标题:《下摆里的“异能”:Facebook手带式AR感应器,可隔空写字、驾驭介面,LeCun点赞》
阅读原文
]article_adlist-->