延伸阅读:Meta:超低摩擦输入,“腕带”是AR交互的未来
现根据一份名为“Hand gesture recognition based on detected wrist muscular movements”的专利申请,正在积极发力AR增强现实的谷歌同样在研究干系的肌电图腕带。
与大多数厂商类似,谷歌同样在探索能够将手腕神经旗子暗记转换为数字命令的肌电图腕带,并将其作为AR交互的办法。实际上,拥有Pixel Watch智好手表的谷歌在腕带设备方面已经有了一定的技能积累。

对付AR交互,谷歌办理这个技能难题的方案包括利用微米分辨率雷达传感器来检测和分类用户手腕的手腕内肌肉运动。谷歌的构思是:AR系统的用户可以穿着手腕佩戴干系的肌电图腕带。当用户用手操作AR系统中的虚拟工具时,用户手腕的肌肉和韧带会涌现1-3毫米旁边的奇妙动作。
个中,所述腕带包含微米分辨率的雷达传感器,并搭载一个发射器和多个电磁(EM)辐射吸收器(例如三个)。作为解释,EM辐射是一种小波长,例如毫米波,以是可以检测到上述1-3毫米的奇妙运动。其余,EM辐射以啁FMCW调频连续波的形式发射,每一脉冲约30 chirp,起始频率约为60 GHz,带宽约为4.5 GHz。这种辐射会反射腕部肌肉和韧带,并由腕带芯片的吸收器吸收。然后,可以将吸收到的反射旗子暗记或旗子暗记样本发送到处理电路进行分类,以将手腕运动识别为手势。AR系统识别脱手势后就可以实行虚拟工具操纵操作,从而许可用户通过手势操纵虚拟工具。
谷歌指出,上述技能办理方案的一个技能上风有三个:体积小,可以带来舒适的AR或VR体验;可以保护隐私,由于奇妙手腕运动产生的旗子暗记不包含任何PII;功率非常低,例如1-3毫瓦。
图1A是示出了一个示例场景。个中,用户100正在穿着智能眼镜形式的头戴式显示器102,并利用腕带110和移动设备130与头显102显示的虚拟工具交互。移动设备130可以合营腕带110一起检测用户100的手势120,从而实行与虚拟工具交互的掌握。手势示例包括但不限于拇指或其他手指悬空滑动、手在特定方向的移动、手指之间的抓捏压戳操作等等。
移动设备130利用腕带天生的旗子暗记检测手势120,以响运用户手腕在形成手势120时的移动。为了天生旗子暗记,腕带内嵌发射天线114。发射天线114产生并向用户手腕发射电磁辐射脉冲。辐射会反射各种工具,包括皮肤/腕带界面和各种腕部肌肉和韧带,从而形成反射电磁辐射。吸收天线112随后吸收反射的电磁辐射,并将吸收到的辐射样本发送到移动设备130的处理电路。
在一个履行例中,处理电路可以嵌入腕带110中,以是不须要涉及智好手机。
图1B解释了FMCW雷达160与手腕交互的示例配置15。如图所示,我们可以看到神经152、腕韧带154、腕管156和正中神经158。雷达160对应于图1A中的发射天线和吸收天线112和114。
FMCW雷达160以指定速率(例如,30 Hz)将脉冲传输得手段。当用户不移动以形成手势时,从上述手腕器官152、154、156和158反射的旗子暗记基本保持在原位,雷达中的吸收天线不会吸收到反射旗子暗记的任何显著变革。
然而,当用户开始移动手以形成手势时,手腕器官152、154、156和158会轻微移动。当辐射波长足够小时,反射辐射可以供应足够的运动分辨率,以便通过处理电路进行检测。须要把稳的是,吸收天线吸收的反射旗子暗记可以包括皮肤/腕带接口反射的旗子暗记或手腕内的多次反射旗子暗记。
因此在一个履行例中,从发射天线114发射的辐射包括毫米波(mmWave)旗子暗记。毫米波辐射的频率约为50 GHz至90 GHz。毫米波辐射的一个优点是雷达相位分辨率与事情中央频率成正比。缘故原由之一是向下稠浊正弦旗子暗记的相位包络会重复每半个波长。换句话,如果旗子暗记的空间表示由s(R)给出,个中s是复旗子暗记振幅,R是沿传播方向的位置,则以下关系成立:
个中A是辐射的波长,arg表示复旗子暗记振幅的参数或相位。
例如在发射辐射的中央频率为60 GHz的情形下,phase-wrapping位移为2.5 mm。每次辐射突发包括指天命量(例如30)的chirp,亦即辐射频率在开始频率和结束频率之间增加30个周期。对付中等采样方案,每chirp可能有128个采样。在这种情形下,相位分辨间隔(即辐射可分辨的腕部肌肉运动的大小)即是phase-wrapping位移与每次chirp的样本数之比,约为0.019 mm。这足以在用户形成手势时检测到奇妙的腕部运动。
对付利用mmWave辐射检测手势形成过程中的手腕运动,另一个优点是形状参数不具侵入性,亦即足够轻巧。如果有足够的准确度,腕带中的电路不须要变得笨重或发生显著变革。其余,吸收天线和发射天线所在的芯片可以隐蔽在硅酮或任何传统频带材料中,而不会显著降落信噪比(SNR)。
利用毫米波辐射的另一个优点是其功率相对较低。利用发射天线中小于10 mW的功率,可以实现足够的信噪比和手势识别精度。在一个履行例中,发射天线利用1-3 mW的功率。
其余,mmWave频域已用于更为通用的无线通信。因此,频带内的吸收和发送技能足够稳健和成熟。mmWave技能配置得足够灵敏,可以检测腕部肌肉运动;同时,毫米波的波长足够大,可以避免过多的噪点。不仅只是这样,旗子暗记保真度可以保持不变,以便识别与噪点相对的腕部运动。
图1C是mmWave雷达示例的示例图。这种片上雷达的示例是Soli C芯片。如图1C所示,芯片190之上的毫米波雷达包括发射(Tx)天线194和三个吸收(Rx)天线192(1、2、3)。
在一个履行例中,可以有三个以上的Rx天线(例如,四个、五个等)。由于Rx天线192(1-3)支配在芯片190的不同位置,以是Rx天线172(1-3)吸收的辐射以不同角度入射。社区已经证明,三根天线在识别手势时具有足够的准确性。
在一个履行例中,芯片190嵌入由PPG材料制成的腕带中。这种材料为芯片供应了机器支撑,使其能够有效地固定在手腕附近,但阔别手腕。在一个履行例中,进一步的绝缘(如双面胶带)可以确保腕带和手腕之间的低压打仗。芯片190的尺寸使得芯片190可以嵌入腕带;在一个履行例中,尺寸可以约为6.5 mm长x 5.0 mm宽x 0.8 mm厚。
干系专利:Google Patent | Hand gesture recognition based on detected wrist muscular movements
名为“Hand gesture recognition based on detected wrist muscular movements”的谷歌专利申请最初在2021年3月提交,并在日前由美国专利牌号局公布。