首页 > 新奇数码 > 正文

加入手势识别,ARKit原来还可以这么玩!

随着 ARKit 和 ARCore 开发工具的发布,开发者们对 AR 内容开发的热情高涨。之前,国外开发者们有的把 ARKit 和苹果机器学习框架 Core ML 相结合,通过手机摄像头可自动识别物体,并用 AR 效果呈现;还有的把 iPhone 放在纸盒眼睛中,也完成了 Inside-Out 的效果……但,这些还不是 ARKit 的终极玩法。

最近,有家公司把手势识别加入了基于 ARKit 制作的 Demo 中,他们发明的新玩法又是什么样呢?

加入手势识别,ARKit 还能这么玩! ManoMotion 演示 Demo

据了解,这是一家名为 ManoMotion 的计算机视觉和机器学习公司。日前,他们刚刚宣布将公司基于智能手机的手势操作 SDK 融入苹果 AR 开发工具 ARKit 中,用户只需借助手机上已有的处理器和摄像头便可在 AR 应用中追踪双手。

该公司的 CEO Daniel Carlman 此前曾向 Venturebeat 表示,ManoMotion 的 3D 手势识别技术可追踪手部 27 个自由度,可自动识别你是摊开五指,还是指向特定的物体,还可追踪深度和动态手势,如击打、点击、轻拍、抓取、释放等,所有这些对资源的耗费相当少。延迟少于 10 毫秒,并且只占用 iPhone 6s 30% 的处理能力。

加入手势识别,ARKit 还能这么玩!

现在,他们与 ARKit 结合后,用户的手部可被识别,还能做出相应的点击动作,如图中用户点击小球,击入桌子对面的杯子。

Carlman 谈到,手机上的单目二维摄像头可以检测到手部的移动,并将捕捉到的动作融入到用 Unity 开发的 AR 内容中。当然,其他方法也能实现这点,如多目摄像头、深度摄像头,以及动作捕捉。但是这些方法和技术十分昂贵,他们想解决如何更简单地实现“手的临在感”。

“目前,AR 技术还面临很多限制,例如无法自然与 3D 空间中的物体交互。”Carlman 称,“ ARKit 中加入手势识别也是市场上第一次出现,我们期待看到开发者们会如何重新定义 AR 交互。”

ManoMotion 成立于 2015 年,目前有 14 名员工,已经融资 200 万美元。未来几周,他们将发布可融入 ARKit 的 SDK,开发者可在公司官网下载,会最先支持 Unity iOS。

手势识别是我们熟悉的交互方式,像 Leap Motion 也是大家熟知的手势识别公司。手势识别在 AR 中的应用,最让人编辑难忘的便是 HoloLens 了,把手指当做鼠标,可随意拖动视频,控制菜单,确实很酷。

网友评论

三日内热门评论文章
热门IT产品
  1. ¥7599
    苹果iPhoneX 64GB
    ·
  2. ¥5799
    三星S9
    ·
  3. ¥4498
    vivo NEX旗舰版
    ·
  4. ¥4999
    OPPO Find X
    ·
  5. ¥1799
    努比亚Z18mini
    ·
  6. ¥1499
    OPPO A5
    ·
  7. ¥1999
    荣耀Play(4GB RAM)
    ·
  8. ¥1598
    vivo Y85
    ·
  9. ¥3499
    坚果R1(6GB RAM)
    ·
  10. ¥3599
    一加6(8GB RAM)
    ·
为您推荐
  • 相关阅读
  • 业界资讯
  • 手机通讯
  • 电脑办公
  • 新奇数码
  • 软件游戏
  • 科学探索