Unity Meta Quest 一体机开发（三）：Oculus Integration 基本原理、概念与结构+玩家角色基本配置

2023-10-29 06:45
文章标签 meta 配置 开发 概念 基本 角色 结构 unity 基本原理 一体机 玩家 oculus quest integration

本文主要是介绍Unity Meta Quest 一体机开发（三）：Oculus Integration 基本原理、概念与结构+玩家角色基本配置，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！

文章目录

  • 📕教程说明
  • 📕输入数据
  • 📕Oculus Integration 处理手部数据的推荐流程
  • 📕VR 中交互的基本概念
  • 📕Oculus Integration 中的交互流程
  • 📕配置一个基本的玩家物体
    • ⭐OVRCameraRig
    • ⭐OVRInteraction
    • ⭐OVRHandPrefab
    • ⭐OVRHands
    • ⭐OVRLeftHandSynthetic/OVRRightHandSynthetic

推荐一个高质量知识星球 XR 社区：SEED XR社区。包含教程答疑、及时交流、进阶教程、外包、行业动态、升学就业指导。

知识星球链接：Seed XR 高级社区

在这里插入图片描述

📕教程说明

系列教程专栏：https://blog.csdn.net/qq_46044366/category_12118293.html

配套的视频链接：【2023 VR+MR全硬件开发教程】三（上）、Quest Integration基本原理概念与结构(上)-知识点讲解（主讲：YY）
【2023 VR+MR全硬件开发教程】 三 (下)： 手势追踪与玩家角色配置（主讲：YY）

​电脑操作系统：Windows 11

使用的 VR 设备：Meta Quest 3（Quest 系列都适用）

使用的 Unity 版本：2021.3.5 LTS (这里推荐使用 2021 及以上的 LTS 版本)

Oculus Integration 版本：v57

官方文档：https://developer.oculus.com/documentation/unity/unity-gs-overview/

📕输入数据

VR 中的双手要么就是用手柄控制，要么就是用手势追踪控制。当我们使用手柄作为输入的时候，虚拟世界中的手部会同步现实世界中手柄的位置和旋转，使用手势追踪作为输入的时候，虚拟世界中的手部会同步现实世界中手的姿态。然后 VR 中的头部由头显控制，也就是说我们的视角可以根据现实中头显的位置和旋转发生变化。因此，现实世界中头显和手柄的追踪数据会被传输给虚拟世界中的头部和手部，然后虚拟世界中的头和手就会同步现实中的位置和旋转。同样，这个概念适用于所有的 VR SDK。
那么 Oculus Integration 中用了一系列 From OVR…Source 组件来获取追踪的数据。在 Oculus Integration V57 版本中具体分为这 5 个组件：

在这里插入图片描述
From OVR Body Data Source：获取上半身身体运动姿态数据。
From OVR Controller Data Source：获取手柄姿态数据，在虚拟世界中以手柄模型来表示。
From OVR Controller Hand Data Source：获取手柄姿态数据，在虚拟世界中以手部模型来表示。
From OVR Hand Data Source：获取手势追踪的手部姿态数据。
From OVR Hmd Data Source：获取头显的姿态数据。

获取了追踪数据之后，Oculus Integration 会用相应的接口去处理对应类型的数据，这些接口分为 IController, IHand, IHmd, and IBody，对追踪数据进行处理和包装之后，才能适配 SDK 中的一些组件。这样，这些组件就能够利用获取的数据去实现相应的交互功能。

📕Oculus Integration 处理手部数据的推荐流程

在这里插入图片描述

首先通过 FromOVRHandDataSource 获取头显追踪到的手部数据。

然后数据会被传给 HandFilter 组件，这个组件就实现了 IHand 接口，它能够进行一些防抖的处理。

接下来 SynthethicHand 组件会对手部关节的数据进行进一步的处理，它会在特定情况下覆写，也就是 override 手部关节的数据，从而限定虚拟手部的手势。比如我在 VR 中用手按压一个按钮，当我按到底的时候，按常理来说我的手是不能再往下按了，否则就会穿过按钮，产生穿模现象。但是因为我在现实世界中可能没有在按一个真的按钮，所以现实中的手是可以继续往下按的，而 VR 中的手需要同步现实世界里手部的位置，那么这种情况下 VR 中的手就必定会穿过按钮。而 SynthethicHand 组件就能够限制虚拟手部的位置，当按钮按到底的时候，这个组件就能限制 VR 中的手无法继续向下移动。还有 VR 中的抓取也是类似的原理，当你用手抓到这个物体的时候，会呈现出一个抓取的手势，而 SynthethicHand 组件能够限定住抓取手势的姿态。

当 SynthethicHand 对手部数据进行处理之后，就会由 HandVisual 组件来渲染虚拟手部的姿态。

📕VR 中交互的基本概念

VR 中的交互需要有两个对象参与。一个是 Interactor，一个是 Interactable。Interactor 是发起交互的对象，Interactable 是可以被交互的对象。以抓取交互为例，抓取的流程就是用手去抓一个物体的过程，那么手就是发起抓取的对象，也就是 Interactor，物体就是可以被抓取的对象，也就是 Interactable。这个 Interactor 和Interactable 的概念会在我们后续的教程中经常用到，这个概念在其他的 VR SDK 中也会见到。

📕Oculus Integration 中的交互流程

Oculus Integration 中有不同的 Interactor 组件，它们通常被挂载到表示手部或者手柄的物体上。当 Oculus Integration 获取了设备的追踪数据后，它就知道虚拟世界中的手或者手柄的位置和旋转角度应该是什么样的，这个时候手部或者手柄物体上的 Interactor 就会寻找对应的 Interactable。比如抓取相关的 Interactor 会寻找周围有没有可以被抓取的对象，点触（Poke）相关的 Interactor 会寻找周围有没有可以被点击的对象，如下图所示：

在这里插入图片描述

当 Interactor 检测到 Interactable 对象时，会进入到 Hover 状态。不过判断是否检测到需要一些条件，以手势追踪为例，需要满足下面这几个条件：

  1. 手要靠近 Interactable 对象
  2. 确保当前手上没有其他的 Interactor 正在与对应的 Interactable 对象交互
  3. 手要做出 Interactor 触发需要的手势。比如用手点击 UI 按钮的交互，需要伸出食指，如果伸出的是小拇指，就无法触发。

满足条件后，就会进入 Hover 状态，相当于准备开始交互的阶段。Hover 可以类比成鼠标悬停的操作。

进入 Hover 状态后，完成交互动作就能进入 Select 状态。比如还是点击 UI 按钮的交互，当我伸出食指并且靠近按钮时，会进入 Hover 状态，用食指戳到按钮的时候就会转变为 Select 状态，表示点击的交互动作完成。然后当我取消点击动作之后，也就是将手远离按钮的这一过程中，交互状态就会先由 Select 变为 Hover，再由 Hover 变为 Normal。那么我这里给出 Meta 官方提供的 Oculus Integration 交互状态切换图：

在这里插入图片描述

Disabled 就是无法发生交互的状态。然后默认状态是 Normal，当交互功能被开启的时候，就会在 Normal，Hover，Select 这三个状态之间互相切换。

📕配置一个基本的玩家物体

现在，我们已经对 Oculus Integration 中的处理手部数据的流程和交互的基本概念有了初步的认识。接下来，我们在 Unity 中配置一个玩家物体，之后在介绍各种交互功能的时候就可以在这个玩家物体上不断添加功能。

前置的环境配置可以参考这篇教程：Unity Meta Quest 一体机开发：前期准备和环境配置（2023 版，Oculus Integration v57）

首先新建一个场景，删去场景中的 Main Camera，然后添加一个 Plane 物体作为地面。

⭐OVRCameraRig

然后在如下文件夹中找到 OVRCameraRig 预制体，或者在 Project 窗口中搜索这个物体：

在这里插入图片描述
在这里插入图片描述

将该物体拖到场景中，找到它身上的 OVR Manager 脚本，将 Tracking Origin Type 改为 Floor Level：

在这里插入图片描述

选择 Floor Level，会以安全区的地面（打开 VR 设备一般都会先设置地面高度，然后划安全区）作为参考系，运行程序后头部高度会以地面作为参考点，初始高度相当于摆放在场景中的眼部相机的高度加上现实中玩家头显到安全区地面的距离。Tracking Origin Type 的区别可以参考这篇文章：https://blog.csdn.net/qq_46044366/article/details/131616046

⭐OVRInteraction

搜索 OVRInteraction 预制体，将它拖入 Hierarchy 面板，作为 OVRCameraRig 的子物体。这个 OVRInteraction 物体就是负责所有交互功能的父物体。

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

OVRInteraction 下自带一个 OVRHmd 物体，用于获取头显追踪姿态的数据。

在这里插入图片描述

⭐OVRHandPrefab

搜索 OVRHandPrefab 预制体，先将它拖到 OVRCameraRig > TrackingSpace > LeftHandAnchor 下：

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
打开 OVRHandPrefab 的 Inspector 面板，除了 OVR Hand 和 OVR Skeleton 脚本，其他的脚本先取消勾选：

在这里插入图片描述

然后在 OVR Skeleton 脚本里, 勾选 Enable Physics Capsules：

在这里插入图片描述

然后将这个 OVRHandPrefab 复制一份，作为 RightHandAnchor 的子物体：

在这里插入图片描述

将右手 OVRHandPrefab 的 OVRHand 和 OVRSkeleton 脚本的 Hand Type 从 Hand Left 改为 Hand Right：

在这里插入图片描述

⭐OVRHands

搜索 OVRHands 预制体，将它作为 OVRInteraction 的子物体：

在这里插入图片描述

在这里插入图片描述

我们可以展开这个预制体：

在这里插入图片描述

点击 OVRHandDataSource 物体，它上面挂载了 FromOVRHandDataSource 脚本，用于获取手部的姿态数据：

在这里插入图片描述

点击 HandDataLeft，它上面挂载了一些实现 IHand 接口的脚本，用于处理获取到的手部追踪数据，其中 Hand Filter 就是刚刚介绍的用于防抖处理的脚本：

在这里插入图片描述

展开 HandVisualsLeft，它有个 OVRLeftHandVisual 子物体，上面有一个 Hand Visual 组件，用于渲染手部模型：

在这里插入图片描述

但是默认的 OVRHands 预制体下没有挂载了 SynthethicHand 脚本的物体，我们可以手动添加。

⭐OVRLeftHandSynthetic/OVRRightHandSynthetic

搜索 OVRLeftHandSynthetic 和 OVRRightHandSynthetic 预制体，将它们作为 OVRHands 的子物体：

在这里插入图片描述
在这里插入图片描述

找到 OVRLeftHandSynthetic 物体上的 SyntheticHand脚本，将 LeftHand 物体拖入 I Modify Data From Source Mono 变量，右手同理：

在这里插入图片描述
在这里插入图片描述

然后我们展开这两个预制体，它们下面各有一个 HandVisual 子物体，用于渲染手部模型。

在这里插入图片描述

但是 OVRHands 物体的 LeftHand 和 RightHand 下也有用于渲染手部模型的物体，这时候如果我们运行程序，会发现手部模型闪烁。这是因为场景中会渲染两双手，手部模型重合在一起就会发生闪烁。

在这里插入图片描述
因此，我们需要把 LeftHand 和 RightHand 下的 HandVisualsLeft 和 HandVisualsRight 物体隐藏掉，保证渲染的是 SyntheticHand。

在这里插入图片描述

现在运行程序，如果你能看到手势追踪的双手，就说明玩家物体配置成功了。不过 SyntheticHand 的效果要结合具体的交互组件来看，我会在后续的教程中详细说明。

这篇关于Unity Meta Quest 一体机开发（三）：Oculus Integration 基本原理、概念与结构+玩家角色基本配置的文章就介绍到这儿，希望我们推荐的文章对编程师们有所帮助！


http://www.chinasem.cn/article/298939。

相关文章

Zookeeper安装和配置说明

Zookeeper安装和配置说明

一、Zookeeper的搭建方式 Zookeeper安装方式有三种，单机模式和集群模式以及伪集群模式。 ■ 单机模式：Zookeeper只运行在一台服务器上，适合测试环境； ■ 伪集群模式：就是在一台物理机上运行多个Zookeeper 实例； ■ 集群模式：Zookeeper运行于一个集群上，适合生产环境，这个计算机集群被称为一个“集合体”（ensemble） Zookeeper通过复制来实现
阅读更多...
这15个Vue指令，让你的项目开发爽到爆

这15个Vue指令，让你的项目开发爽到爆

1. V-Hotkey 仓库地址: github.com/Dafrok/v-ho… Demo: 戳这里 https://dafrok.github.io/v-hotkey 安装: npm install --save v-hotkey 这个指令可以给组件绑定一个或多个快捷键。你想要通过按下 Escape 键后隐藏某个组件，按住 Control 和回车键再显示它吗？小菜一碟： <template
阅读更多...
CentOS7安装配置mysql5.7 tar免安装版

CentOS7安装配置mysql5.7 tar免安装版

一、CentOS7.4系统自带mariadb # 查看系统自带的Mariadb[root@localhost~]# rpm -qa|grep mariadbmariadb-libs-5.5.44-2.el7.centos.x86_64# 卸载系统自带的Mariadb[root@localhost ~]# rpm -e --nodeps mariadb-libs-5.5.44-2.el7
阅读更多...
Hadoop企业开发案例调优场景

Hadoop企业开发案例调优场景

需求 （1）需求：从1G数据中，统计每个单词出现次数。服务器3台，每台配置4G内存，4核CPU，4线程。 （2）需求分析： 1G / 128m = 8个MapTask；1个ReduceTask；1个mrAppMaster 平均每个节点运行10个 / 3台 ≈ 3个任务（4    3    3） HDFS参数调优 （1）修改：hadoop-env.sh export HDFS_NAMENOD
阅读更多...
hadoop开启回收站配置

hadoop开启回收站配置

开启回收站功能，可以将删除的文件在不超时的情况下，恢复原数据，起到防止误删除、备份等作用。 开启回收站功能参数说明 （1）默认值fs.trash.interval = 0，0表示禁用回收站；其他值表示设置文件的存活时间。 （2）默认值fs.trash.checkpoint.interval = 0，检查回收站的间隔时间。如果该值为0，则该值设置和fs.trash.interval的参数值相等。
阅读更多...
NameNode内存生产配置

NameNode内存生产配置

Hadoop2.x 系列，配置 NameNode 内存 NameNode 内存默认 2000m ，如果服务器内存 4G ， NameNode 内存可以配置 3g 。在 hadoop-env.sh 文件中配置如下。 HADOOP_NAMENODE_OPTS=-Xmx3072m Hadoop3.x 系列，配置 Nam
阅读更多...
基本知识点

基本知识点

1、c++的输入加上ios::sync_with_stdio(false);  等价于 c的输入，读取速度会加快（但是在字符串的题里面和容易出现问题） 2、lower_bound()和upper_bound() iterator lower_bound( const key_type &key ): 返回一个迭代器，指向键值>= key的第一个元素。 iterator upper_bou
阅读更多...
wolfSSL参数设置或配置项解释

wolfSSL参数设置或配置项解释

1. wolfCrypt Only 解释：wolfCrypt是一个开源的、轻量级的、可移植的加密库，支持多种加密算法和协议。选择“wolfCrypt Only”意味着系统或应用将仅使用wolfCrypt库进行加密操作，而不依赖其他加密库。 2. DTLS Support 解释：DTLS（Datagram Transport Layer Security）是一种基于UDP的安全协议，提供类似于
阅读更多...
嵌入式QT开发：构建高效智能的嵌入式系统

嵌入式QT开发：构建高效智能的嵌入式系统

摘要： 本文深入探讨了嵌入式 QT 相关的各个方面。从 QT 框架的基础架构和核心概念出发，详细阐述了其在嵌入式环境中的优势与特点。文中分析了嵌入式 QT 的开发环境搭建过程，包括交叉编译工具链的配置等关键步骤。进一步探讨了嵌入式 QT 的界面设计与开发，涵盖了从基本控件的使用到复杂界面布局的构建。同时也深入研究了信号与槽机制在嵌入式系统中的应用，以及嵌入式 QT 与硬件设备的交互，包括输入输出设
阅读更多...
OpenHarmony鸿蒙开发（ Beta5.0）无感配网详解

OpenHarmony鸿蒙开发（ Beta5.0）无感配网详解

1、简介 无感配网是指在设备联网过程中无需输入热点相关账号信息，即可快速实现设备配网，是一种兼顾高效性、可靠性和安全性的配网方式。 2、配网原理 2.1 通信原理 手机和智能设备之间的信息传递，利用特有的NAN协议实现。利用手机和智能设备之间的WiFi 感知订阅、发布能力，实现了数字管家应用和设备之间的发现。在完成设备间的认证和响应后，即可发送相关配网数据。同时还支持与常规Sof
阅读更多...

Copyright China编程 23002807@qq.com

沪ICP备2023033072号-2