AR眼镜Nreal Light联合Clay AIR 新增手部追踪功能

摘要: Nreal的3D系统Nebula将会为Light AR眼镜带来手部追踪功能,并允许用户通过多种手势与数字对象进行交互

Nreal的3D系统Nebula正在迎来重大升级,它将会为Light AR眼镜带来手部追踪功能,并允许用户通过多种手势与数字对象进行交互,从而增强设备在工作环境和学习环境中的效用,并促进用户与朋友和家人的联系。

Nebula系统的高保真手部追踪是通过与Clay AIR的合作产物,后者是一家手部追踪和手势识别公司,致力于开发高精度且跨硬件的交互软件,并为联想,Bose,高通和泰雷兹集团等客户的光学手部追踪解决方案提供支持。

Magic Leap 1,微软HoloLens 2,以及现在的Oculus Quest都支持手部追踪,所以Nreal明白,如果要保持市场中保持竞争力,他们同样需要为消费者,以及3500名正在为Nreal Light眼镜构建AR体验的开发者带来所述功能。

为了对Nreal Light眼镜进行手部追踪,Clay AIR充分利用了内置的嵌入式空间摄像头,将3D手部骨架模型以全高清方式叠加在物理手部。然后,系统将通过先进的深度学习算法来实时追踪和渲染手部动作。

如果你拥有一副Nreal Light眼镜,或者你是开发者,你首先想到的问题是原生手部追踪将会对续航产生多大影响。令人惊讶的是,所述功能的耗电量并不大。你应该不会注意到它给设备电池或任何高通骁龙855 5G智能手机造成的压力。

Nreal将很快通过SDK启动为用户带来手部追踪。所述功能可以轻松部署到运行Nreal 3D系统的本机Android应用,如Facebook,Spotify,Netflix和Instagram。作为开发者,你将能够构建包括3D手势模型,单独手指操作,边界框,光标和定制皮肤的手部追踪体验。

Clay AIR提供的手势库将包括拿捏,指向,抓握,滑动和缩放,以及其他一系列可自定义的选项。

“通过与Clay AIR合作提供手部追踪功能,Nreal为开发者和Nreal Light Consumer Kit的用户就如何与MR环境进行交互提供了更高的灵活度。”公司创始人兼首席执行官徐驰表示,并进一步补充说:“无论是手部追踪,将5G智能手机用作控制器,第三方六自由度控制器,甚至是不久将来与七鑫易维合作实现的眼动追踪。”

通过将这一新功能带到Nebula系统,Nreal正在创建易于使用的硬件/软件体验,并进一步简化将AR推向大众的过程。Clay AIR首席执行官托马斯·埃米利安(Thomas Amilien)指出: “无缝的手部追踪和手势识别技术是帮助AR在全球范围内实现普及和变得实用的必要催化剂。”

最终,这种合作伙伴关系标志着一个重要的转折点:这是用于AR空间追踪的嵌入式单色摄像头首次与手部追踪集成,以及是通过与德国电信扩大的运营商伙伴关系而实现。

对于Nreal,Clay AIR,以及消费者而言,这项新功能是一次巨大的胜利。这是能够推动AR发展的消费者采用。我们需要朝着用户无需佩戴笨重设备即可获得强大AR体验的未来进发。

这个合作将能够帮助我们实现愿望。

来源:映维网

effiar是由北京慧星视界科技有限公司研发的一款工业AR平台。effiar由WorkGuide更名而来。在AR工业领域,使用者无需技术就可以通过effiar任务管理中心使用拖拽等简单操作,为特定业务场景定制智能眼镜方案应用。该平台包括专家AR远程协作、AR巡检、AR运维、工作流、AR培训、AR+iot、多媒体知识库等多个模块,使用者可以根据业务需要自由剪裁或者互相嵌套。

4.0版本支持更多MR眼镜,以及数字孪生体验,使工作人员能够感知工作环境和设备,更多内容参考开发者。