N80H58Vc 丽翔 凹非寺
力学位 报导 | 社会公众号 QbitAI
只需誊本,就能「掌」控一切?
Facebook前段时间公布的手带式的AR感应器,阳光普照交互式世界get血色巫师同型号专业技能。
这一电子设备由Facebook的AR/VR科学研究部门——Facebook Reality Labs(FRL)研制,配戴者能透过小腿上的电下肢讯号,以手掌姿势支配AR隐形眼镜。
就连被称为传递函数互联网先驱的诺贝尔奖得主、Facebook执行官AI生物学家Yann LeCun也为之点赞。
机能不断升级换代
那么,它能用以做什么呢?
据非官方如是说,不论是走在马路上还是Tiruvanamalai,手把放到身后、两边或者公文包里,都能透过手带同时实现驾驭。
起初,手带只能透过手掌与拇指的捏、放表情符号,同时实现单纯的空格键操作方式。尔后,又加进了更加多样的支配机能,比如说能轻触和终端交互式第一类。
除此以外,科学研究项目组还在进一步积极探索,以图合作开发在椅子或膝上高速路写字的机能,甚至同时实现比采用按键更慢的写字速度。
与力学按键较之,交互式按键不仅能即时采用,而且能够随着推移,自学和适应环境每一人不同的写字艺术风格,并产生适应环境能力的变化,同时实现更慢的写字速度。
FRL项目组在个性化模型方面取得了重要进展,使适应环境个人艺术风格的按键模型的训练时间得以减少。
不仅如此,FRL科学研究科学主管HrvojeBenko表示:
“我们相信,可穿戴的手带电子设备能为AR隐形眼镜,提供超低摩擦、即时可用的输入,但它们本身并不是一个完整的解决方案。
就像鼠标是用户界面的一部分一样,需要在意图预测和用户建模方面为他们提供帮助,以实时适应环境用户以及特定的环境。”
因此,FRL项目组近期正致力于,积极探索适应环境特定环境的自适应环境界面,同时实现“智能点击”。
也就是,无需用户终端视线、浏览菜单,系统透过在不同环境中预测用户意图,主动提供自适应环境界面,而用户只需轻量级的反馈,就能进行支配。
FRL科学研究科学经理Tanya Jonker也补充道:
“系统会自学有用户位置和关键第一类的信息,例如跑鞋或活动识别,根据用户过去的行为预测意图。
比如说,往常你穿着某一双鞋出门时,通常会启动音乐程序。那么当你再次穿上它出门,系统认为你最有可能想要收听音乐,于是显示屏上会出现‘是否播放音乐?’选项,用户采用单纯的表情符号确认或更改建议即可。”
利用这些微表情符号,用户无需停止正在做的事,或者为其分心,从而节省了时间。
Facebook非官方如是说中也提到,同时实现这一机能,需要应用机器自学、人机交互、用户界面设计等技术,目前仍存在许多技术挑战。
虽然利用超低摩擦的输入方式,能够同时实现与自适应环境界面的交互,但是要想对交互式物体有所感知,还需要触觉技术。
对此,FRL科学研究科学总监Sean Keller表示:
“人们从出生时的第一次抓握,直到灵巧地操作方式物体和在按键上写字,手和手掌会拥有非常多样的反馈。
我们利用触觉讯号来了解世界,触觉使我们能够采用工具和精细支配。从采用手术刀的外科医生到感觉到琴键边缘的钢琴演奏家,这一切都取决于触觉。”
利用手带,用户无需进行查看,就能够透过触觉作出识别,并进行决策。比如说:
交互式弓箭就利用腕部的触觉,使配戴者有近似拉弓的感觉,从而知道自己是否做对了姿势;
根据用户设置,收到紧急邮件时,手环能发出比收到普通邮件更加强烈的震动;
当有电话呼入时,透过不同的触觉反馈,用户即可得知对方的身份。
甚至,科学研究人员还补充说:“触觉还能够传达不同的情感,这可能是改善社交沟通的一种新的方式。”
目前,Facebook项目组正在构建科学研究原型,包括拥有8个气动波纹管的Bellowband,以及采用了6个震动触动器和新颖的小腿挤压机制的Tasbi,以进一步积极探索的触觉反馈的类型。
利用EMG技术同时实现支配
这些机能,都是依赖EMG(肌电图)技术同时实现的。
EMG技术,就是采用感应器,将透过小腿传到手部的电下肢讯号,转化为数字指令。用户能用这些指令来支配电子设备的机能,这种支配程度是高度个性化的,能用于多种情况。
据Facebook如是说,透过小腿发出的讯号非常清晰,哪怕是一毫米的手掌运动,EMG也能感知,因此能毫不费力地输入。甚至在未来,连终端手掌的意图也可能感知到。
现任神经运动接口主管的ThomasReardon表示:
“我们要做的神经界面,就是让用户利用周围神经系统的输出,特别是脑外神经,激活手和手掌肌肉的姿势,来直接支配机器。”
为什么要选择小腿?
FRL项目组对此作了解释:
手是人们接触世界的重要身体部分,戴在小腿上能够利用手部多样的支配机能,同时实现更好的交互机能。
与语音支配较之,穿戴电子设备更便于在公共场合采用;
类似手表的设计使其能够用于日常生活和社交环境;
并且,小腿位置也适合舒适地配戴一整天;
而设计成一款单独的电子设备,能够同时实现更便捷的应用,无需透过手机或者其他电子设备支配;
置于小腿的可穿戴电子设备还能轻松地作为计算、电池和天线的平台,同时支持多种感应器。
网友关注
这项获得LeCun点赞的技术,自然也引起了网友的广泛关注。
不少网友为此感到惊喜:
“这是实际的延迟效果吗?看起来很棒。”
还有一些网友,对这项技术的应用提出了设想:
“这能让失去手的人,仍然能依靠神经来模拟表情符号,不是吗?”
“毫无疑问,这能用于连接假肢,并且推进恢复和自学过程。”
不过,有人提出了质疑:
“什么?这不是很多年以前的MYO手环吗?”
事实上,这款基于EMG技术的手带的雏形MYO,起初由AR隐形眼镜公司North的前身Thalmic Labs合作开发,尔后其专利被初创公司CTRL-labs收购。
2019年,Facebook斥资数亿美元收购了CTRL-labs,原科学研究项目组也随之加入FRL。
与此同时,也有网友对此感到欣喜:
“早在几年前,当我第一次阅读有关Myo的文章时,我就想知道它对于VR的潜力。很高兴它取得现在的成果。”
这款手环主要用于配合Facebook正在研制的AR隐形眼镜采用,上市时间尚未公布。
参考链接:
[1]https://tech.fb.com/inside-facebook-reality-labs-wrist-based-interaction-for-the-next-computing-platform/
[2]https://twitter.com/schrep/status/1372568994738180098