索尼推出了新的VR控制手柄!

作者: 分类: 2019最新资讯 发布时间: 2020-05-23 12:23

[Poly Fruit Report]根据Sony软件工程师的报告,5月15日,他们正在开发一种高度身临其境的虚拟现实运动系统,该系统很可能会在其下一代PlayStation控制器中使用

该VR控制器将使用手指跟踪技术来准确复制玩家手部和手指的动作

手指跟踪应用程序通常依赖于捕获手指运动的相机,例如OculusQuest

最近,提供更精确运动识别的电容式接近传感器进入了市场

但是,正如索尼研究人员指出的那样,由于还存在阻止相机无法检测到的物理控制器,因此还需要改进和完善仍处于起步阶段的接近传感器技术

准确捕获手部动作仍然难以捉摸

索尼研究人员承担了填补这些空白的挑战

他们构建了带有62个嵌入式电极的原型手控制器,并使用光学监控系统记录了训练数据集

他们捕获了12个对象的手的动作,每个对象的大小各不相同

为了使VR运动控制器更具感觉,SIE研究人员着手构建一个原型控制器,该控制器集成了许多电容式接近传感器,您可以在Valve的索引中找到

控制器(又名“指节”)和OculusTouch

根据索尼的回应,他们的目标是扩大手指跟踪功能的范围,以便在虚拟空间中使用手进行更直观的交互

“”不仅可以检测手指在特定电极上的触摸,还可以使用所有传感器的值来预测手指在3D空间中的整体运动

为了实现这一目标,他们评估了在计算机视觉领域研究的两种卷积神经网络体系结构,以进行姿势估计,并解释了控制器上传感器的适当体系结构

根据卷积神经网络的最新成果,“为了获得逼真的沉浸式3D体验,他们应用了多维表示”,将卷积神经网络方法应用于曲面的电容性图像和两种类型的网络系统

从结构上讲,我们使用数据集评估了计算机视觉领域

我们还使用该原型实现了实时交互应用程序,并演示了在VR应用程序中使用手指进行直观交互的可能性

“原型视频显示了用户的手及其数字表示

这些手势可以进行各种手势,例如打开和关闭,计数,拇指旋转,展开手指,和平标志以及伸出的拇指和小指(表示电话)

它可以识别握住控制器设备并举起或扔出物体的手,但是索尼还承认现有设计存在一些缺陷,即缺乏对所有手号的支持,当前算法无法估计用户的手的形状(例如手指的粗细),这会在执行诸如捏等操作时在实际手部姿势和虚拟手部姿势之间造成缝隙

为了更好地适应各种手部形状,有必要研究一种去年,索尼授权了用于VR控制器的高级触觉器,它们将能够模拟推动,拉动,抓握和搏动的感觉

控制器可能会允许游戏者不仅看到他们的手并感觉到各种与之交互的对象