基于微软MRTK工具,Nreal推出升级版手势识别功能

基于微软MRTK工具,Nreal推出升级版手势识别功能
2022年08月18日 12:36 青亭网

8月18日消息,Nreal宣布更新AR开发平台NRSDK,本次更新带来了升级的手势追踪API、眼球追踪SDK、手柄摇杆支持等新功能。据悉,Nreal利用AI技术来优化AR眼镜(Nreal Light、Nreal Air)的手势追踪功能,并在微软跨平台AR开发工具MRTK中引入对手势追踪API的支持。实际上,NRSDK使用的手势功能基于两个MRTK应用:Hand Tracking Hub和Startup Scene。

据青亭网了解,Nreal上个月在AR眼镜产品中引入手势追踪功能,本次更新后,该功能将结合专门训练的深度神经网络,来检测用户双手在3D空间中的关键点位置。应用场景方面,Nreal通过优化手势识别技术,可能会为用户带来更加自然的广告交互体验。此前青亭网就报道,该公司预计在AR眼镜中引入广告功能。

而眼球追踪功能,猜测仅支持Nreal Light眼球追踪版,开发者可以通过更新的NRSDK为该设备开发基于眼球追踪的AR应用。

总之,本次更新带来了多项与交互、用户体验、UI相关的新功能,具体如下:

  • 手势交互,包括按钮、对象缩放和滚动

  • 手部骨骼网格和手势

  • 眼球追踪

  • 平面检测

  • 语音转文字

  • 手势菜单UI

  • 摇杆支持

  • 非本机键盘支持

  • 预加载资产,如熔岩和照明

  • 预加载的对象,例如钢琴

财经自媒体联盟更多自媒体作者

新浪首页 语音播报 相关新闻 返回顶部