Unity+C#+ZED相机——获取矩阵格式的点云数据

2023-11-04 22:38

本文主要是介绍Unity+C#+ZED相机——获取矩阵格式的点云数据,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

文章目录

  • Unity+C#+ZED相机——获取矩阵格式的点云数据
    • 引言
    • 基础环境
    • 程序代码

Unity+C#+ZED相机——获取矩阵格式的点云数据

引言

上礼拜把ZED-UNITY插件的原生接口的代码和核心的脚本看了一遍。有了比较系统的了解,里面的注释用插件翻译了一下,自己校正了,并把中文附带在脚本注释里面了,同时把自己经过思考或者搜索资料才整明白的知识点,代码关系也注释在相应的地方。 对于自己不懂的函数,Unity的相关概念,也把自己查找到的博客资料,官网说明的网站链接直接放在代码的附近,可以直接点进去网站查看。
在前面一篇文章中,我对插件中对点云数据的显示案例进行了注释。 ZED插件在Unity中很少提到类似RGB图像、Pointcloud这种概念,而是根据Unity的习惯,把RGB图像和Depth图像称为图像型的纹理(texture_image type),把点云数据,深度数据称为测量型纹理(texture measure type ),这也是我为什么我刚开始接触这个插件的时候误以为没有提供接口,而去配置了C#与ZED-SDK的接口。 在插件的示例中都是把这两种数据直接与纹理对象捆绑在一起,不能像操作矩阵一样对其中的数据进行操作。(也有可能是我对Unity还不熟悉)
所以这篇主要记录一下如何在Unity中用ZED插件提供的矩阵数据类型存储点云数据。图像数据是类似的。

基础环境

操作系统:win10专业版
ZED相机型号:zed-mini
ZED SDK:3.1版本(插件目前只支持3.1版本)
ZED-Unity插件:3.1版本
Unity版本:2019
C#版本:8.0
编辑器:Rider

程序代码

  • 要获得这个数据的关键在于调用ZEDCamera.cs的函数 RetrieveMeasure。如下图,在这里插入图片描述
    这个函数里面封装了一个.dll的外部声明的函数,这个函数是底层SDK定义的,用于读取相机的measure类型的数据。

  • 脚本名称: MyPointCloudFromZED.cs

  • 代码

/*
*FileName: MyPointCloudFromZED.cs
*Author: Lance
*UnityVersion:2019.4.4f1
*Date: 2020-09-02
*Connect: 261983626
*Description: ** 应用对象:任意* 生命周期:在ZED准备好后* 脚本功能:获取ZED相机中的点云数据* 依赖对象:* 1、组件:ZEDManager.cs,如果不需要用这个相机实现透视功能,可以挂在其他的空对象上* 2、类文件:ZEDCommon.cs类文件   主要是一些功能函数ZEDCamera.cs类文件  主要是相机的对象ZEDMat.cs类文件  主要是数据类型* 备注说明:ZEDManager已经帮我们做好了大量的相机管理工作,我们只需要在这里面实现几个函数的调用即可
*
*History:* 2020-09-02:  *
*/using System.Collections;
using System.Collections.Generic;
using sl;
using UnityEngine;/// <summary>
/// 获得ZED相机的点云
/// </summary>
public class MyPointCloudFromZED : MonoBehaviour
{[Header("点云数据获取")] public string Header;/// <summary>/// 点云数据矩阵/// </summary>private sl.ZEDMat myPointCloud; //定义点云矩阵/// <summary>/// 图像数据矩阵/// </summary>private sl.ZEDMat myRgbImage; //定义图像矩阵/// <summary>/// Instance of the ZEDManager interface/// ZEDManager界面的实例,后面应该是要将外部的ZedManager赋值给下面这个变量才对/// </summary>public ZEDManager zedManager = null;/// <summary>/// 相机的分辨率/// </summary>private sl.Resolution resolution;/// <summary>/// zed Camera controller by zedManager/// zedManager的zed相机控制器/// </summary>private sl.ZEDCamera zed = null;/// <summary>/// 是否更新数据/// </summary>public bool update = true; //暂时没用上/// <summary>/// 前一次update的状态/// </summary>private bool previousUpdate = true; //暂时没用上/// <summary>/// 某个值/// </summary>private float4 onePointCloud; //定义某个接收单个点数据的变量void Start(){if (zedManager == null) //如果还没有实例化{zedManager = FindObjectOfType<ZEDManager>(); //找到ZEDManager组件if (ZEDManager.GetInstances().Count > 1 //如果这个组件的实例化不只一个,我的情况一般只有一个) //We chose a ZED arbitrarily, but there are multiple cams present. Warn the user. 我们任意选择一个ZED,但是有多个相机存在。所以需要警告用户。{Debug.Log("Warning: " + gameObject.name +"'s zedManager was not specified, so the first available ZEDManager instance was " +"assigned. However, there are multiple ZEDManager's in the scene. It's recommended to specify which ZEDManager you want to " +"use to display a point cloud.");}}if (zedManager != null) //实例化后的zed = zedManager.zedCamera; //相机设备赋值myPointCloud = new ZEDMat(); //实例化矩阵,内部获得指针,myRgbImage = new ZEDMat(); //实例化矩阵,内部获得指针onePointCloud = new float4();resolution = new sl.Resolution((uint) zed.ImageWidth, (uint) zed.ImageHeight); //设置图像分辨率myPointCloud.Create(resolution, ZEDMat.MAT_TYPE.MAT_32F_C4); //分配指定的大小和类型的数据内存myRgbImage.Create(resolution, ZEDMat.MAT_TYPE.MAT_8U_C3); //分配指定的大小和类型的数据内存}// Update is called once per framevoid Update(){//Don't do anything unless the ZED has been initialized.// 除非ZED已初始化,否则请勿执行任何操作。if (zed.IsCameraReady){ERROR_CODE getPointCloudResult = zed.RetrieveMeasure(myPointCloud, MEASURE.XYZ); //返回注册点云数据的结果if (getPointCloudResult == ERROR_CODE.SUCCESS)  //如果获得矩阵数据成功的话{myPointCloud.GetValue(400, 400, out float4 point, ZEDMat.MEM.MEM_CPU); // 从矩阵中取出某个像素点的点云数据,  这边指定从cpu内存中获得onePointCloud = point; //输出点云数据值   print("x:"+onePointCloud.r.ToString()+"y:"+onePointCloud.g.ToString()+"z:"+onePointCloud.b);}}}
}
  • 运行结果

在这里插入图片描述

这篇关于Unity+C#+ZED相机——获取矩阵格式的点云数据的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/345633

相关文章

C# WinForms存储过程操作数据库的实例讲解

《C#WinForms存储过程操作数据库的实例讲解》:本文主要介绍C#WinForms存储过程操作数据库的实例,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、存储过程基础二、C# 调用流程1. 数据库连接配置2. 执行存储过程(增删改)3. 查询数据三、事务处

Java利用JSONPath操作JSON数据的技术指南

《Java利用JSONPath操作JSON数据的技术指南》JSONPath是一种强大的工具,用于查询和操作JSON数据,类似于SQL的语法,它为处理复杂的JSON数据结构提供了简单且高效... 目录1、简述2、什么是 jsONPath?3、Java 示例3.1 基本查询3.2 过滤查询3.3 递归搜索3.4

MySQL大表数据的分区与分库分表的实现

《MySQL大表数据的分区与分库分表的实现》数据库的分区和分库分表是两种常用的技术方案,本文主要介绍了MySQL大表数据的分区与分库分表的实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有... 目录1. mysql大表数据的分区1.1 什么是分区?1.2 分区的类型1.3 分区的优点1.4 分

Mysql删除几亿条数据表中的部分数据的方法实现

《Mysql删除几亿条数据表中的部分数据的方法实现》在MySQL中删除一个大表中的数据时,需要特别注意操作的性能和对系统的影响,本文主要介绍了Mysql删除几亿条数据表中的部分数据的方法实现,具有一定... 目录1、需求2、方案1. 使用 DELETE 语句分批删除2. 使用 INPLACE ALTER T

Python Dash框架在数据可视化仪表板中的应用与实践记录

《PythonDash框架在数据可视化仪表板中的应用与实践记录》Python的PlotlyDash库提供了一种简便且强大的方式来构建和展示互动式数据仪表板,本篇文章将深入探讨如何使用Dash设计一... 目录python Dash框架在数据可视化仪表板中的应用与实践1. 什么是Plotly Dash?1.1

C#基础之委托详解(Delegate)

《C#基础之委托详解(Delegate)》:本文主要介绍C#基础之委托(Delegate),具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1. 委托定义2. 委托实例化3. 多播委托(Multicast Delegates)4. 委托的用途事件处理回调函数LINQ

在C#中调用Python代码的两种实现方式

《在C#中调用Python代码的两种实现方式》:本文主要介绍在C#中调用Python代码的两种实现方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录C#调用python代码的方式1. 使用 Python.NET2. 使用外部进程调用 Python 脚本总结C#调

Redis 中的热点键和数据倾斜示例详解

《Redis中的热点键和数据倾斜示例详解》热点键是指在Redis中被频繁访问的特定键,这些键由于其高访问频率,可能导致Redis服务器的性能问题,尤其是在高并发场景下,本文给大家介绍Redis中的热... 目录Redis 中的热点键和数据倾斜热点键(Hot Key)定义特点应对策略示例数据倾斜(Data S

使用Python实现获取网页指定内容

《使用Python实现获取网页指定内容》在当今互联网时代,网页数据抓取是一项非常重要的技能,本文将带你从零开始学习如何使用Python获取网页中的指定内容,希望对大家有所帮助... 目录引言1. 网页抓取的基本概念2. python中的网页抓取库3. 安装必要的库4. 发送HTTP请求并获取网页内容5. 解

如何自定义Nginx JSON日志格式配置

《如何自定义NginxJSON日志格式配置》Nginx作为最流行的Web服务器之一,其灵活的日志配置能力允许我们根据需求定制日志格式,本文将详细介绍如何配置Nginx以JSON格式记录访问日志,这种... 目录前言为什么选择jsON格式日志?配置步骤详解1. 安装Nginx服务2. 自定义JSON日志格式各