zoukankan      html  css  js  c++  java
  • 【手势交互】8. Nimble Sense

    早在2012、2013年度,手势识别领域就发生了几起重要的行业并购。比方英特尔对Omek的收购,谷歌对Flutter的收购。而苹果公司更是以3.45亿美金得高价收购了之前为微软Kinect提供技术支持的以色列公司Prime Sense。手势识别,早已成为了各大巨头角逐未来的战场。

    由于巨头们正逐渐看清(手势识别)体感技术对传统操作方式的重要改变。

    虚拟现实会是下一代人机交互界面,Oculus已经在显示输出这一端做出表率。并且表现不错。可是在输入端。也就是人该怎样在虚拟现实中发出指令和进行操作,依旧处于群雄逐鹿的状态,声控、眼动、操作杆、手势识别等各种方法。谁也不敢说自己是主导。

    2014年低Oculus收购NimbleVR。标志着手势识别眼下基本已经胜出。相比其它方式,手势识别有这么几个优势:学习成本低,人类从一出生就在学习用手交互;灵活性高;有用性强,基于手势识别的交互方式已经有基本能用的产品。

    手势识别也有自己的不足,比方操作时间长了手臂会累。两手交叠时会有识别不准的问题,可是综合来看。现阶段可能是最适合的方法了,其它几种可能会作为辅助输入方式。比方眼动和声控,在某些专业竞技领域,操作杆也可能会成为主导输入方式。

    Nimble VR是一家成立于2012年的手势识别技术公司,创始人Robert2011年从MIT的计算机系博士毕业,专攻手势识别。被收购时公司也仅仅有4名员工。

    Nimble VR研究运动追踪照相机系统和可以监測和分析身体骨骼结构的算法。

    借用自己的游戏经历。他们研制出了能追踪关节角度和关节位置的软件,从而制造出了真实的虚拟现实手臂。

    但他们找不到一款灵敏度高到足以挑选出这些关节数据的摄像机。包含微软公司的Kinect在内,都主要用于探測大型目标,而不是细微的手部运动。因此,该研究团队设计出了自己专用的体感深度传感器Nimble Sense。

     

    Nimble Sense

    Nimble Sense登陆Kickstarter,众筹还没结束。就被Oculus看中。

    Nimble Sense的最大特色在于能够将识别到各种手势完美地同步到VR游戏或软件之中。让用户在虚拟现实世界也能够感受到双手的存在,并且这一过程并不须要借助不论什么穿戴在手上的硬件产品。

    Nimble Sense採用TOF深度摄像头,帧率为45fps,捕捉红外激光发射器空间内的反射密集三维点云。

    真实世界的三维点云被渲染在正确的位置和角度,点云甚至能够被渲染到其它玩家的虚拟视场里面,这样在多人、社交类的应用中,能够在不同视点间互相共享点云。

    假设採用双目摄像头的手势识别方式,仅仅能得到依赖于特定瞳距特定视点的两幅红外图像,不能共享给其它视点的用户使用。

    Nimble Sense 的TOF摄像头可捕捉用户眼前 110 度的范围(这比 Oculus 的可见角度还高出 10 度),纵深范围为 10-70cm,意味着仅仅要可以看到双手,它就可以显示在虚拟现实世界之中。更可以与虚拟现实世界中的全部物体进行精准的交互。Nimble Sense在设备精度、成本、功耗三方面平衡方面有突破性进展,给用户带来实惠的TOF深度摄像头,Nimble Sense在Kickstarter的众筹价格为99美元。

    Nimble Sense很小。能够安装在Oculus虚拟现实头盔的上方。

    它会监測用户的手部运动,软件随后会採用数学方法模拟每一个手势。Nimble Sense安装在DK2的时候会遮挡住两个LED灯,这些灯是为了DK2位置跟踪用的,但不影响跟踪的性能, 安装leap motion的时候也有这个问题。

    相比Leap Motion,Nimble Sense 明显识别率更高。更加灵敏。

    Nimble Sense使用PMD传感芯片。并与PMD在软硬件上紧密合作。和Camboard不同的是Nimble Sense的光学系统是针对VR系统专门优化过的,以完毕宽视角、长距离、高精度的手部跟踪。

  • 相关阅读:
    java8 stream().map().collect()用法
    Java中Collections的emptyList、EMPTY_LIST详解
    zxing实现java二维码生成和解析
    机器学习与数据挖掘—K邻近算法(KNN)
    第一个Web项目(IDEA)
    Ucore操作系统实验-实验课程设计
    数据挖掘与机器学习--损失函数
    机器数据挖掘--常见监督学习算法以及数据挖掘流程
    Tomcat安装-环境变量配置-启动-关闭
    操作系统实验教程(Ucore)--Lab6
  • 原文地址:https://www.cnblogs.com/liguangsunls/p/7231067.html
Copyright © 2011-2022 走看看