【pcl教程系列】之点云目标检测整体流程

2023-10-23 17:59

本文主要是介绍【pcl教程系列】之点云目标检测整体流程,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

点云目标检测概述

  之前撰写关于点云的相关算法的博客都是如何有效的去除地面点云,得到非地面点云来为后续的检测识别等操作做铺垫。如果你对地面点去除感兴趣的话,可以参考我的之前一些关于点云分割地面的博客。本篇主要介绍一下,在无人车挂载激光雷达的时候,如何有效的识别障碍物的整体流程?当然,这里主要介绍的是传统算法在无人车上对点云数据的操作,深度学习的点云识别后续有机会再详谈。说实话,传统方式的点云目标识别,流程较为复杂,涉及算法较多。从点云接收到输出目标整个流程涉及多个环节与算法。现在,我们先看下面这个流程图,不能算所有的车载传统激光雷达的目标检测流程,也算是一个概括吧。

  上图是一个传统激光雷达目标检测的大概流程:这里的目标检测基本上是自适应,没有依赖先验信息。这里的先验信息主要是指地图模块给予的道路信息等等。上图主要包含3大模块:

  • 点云预处理模块:地面与非地面点云分割、ROI区域点云获取、相关滤波算法操作;
  • 聚类算法对预处理后点云进行聚类:2维聚类、或者3维聚类;
  • 对聚类算法后的每一个聚类簇进行三维空间box恢复:OBB或者二维LShapedFIT算法+Kd树索引;
  • 对拟合成功的框,在二维平面上进行迭代合并,避免单个目标出现多个框;

下面我对上述的几个重要流程做一下简单的讲解:

  • 点云预处理模块

  点云预处理模块主要是去除不感兴趣的区域点云,只留下感兴趣区域的点云。因此,这里主要是过滤掉非ROI区域的点云,以此来为后面的聚类算法更加有效的生成目标,同时一定程度上降低聚类算法耗时。预处理模块最为重要的就是地面点的去除、然后进行一些限制区域的过滤。如果这里接收地图模块发送的车道信息则更加方便获取ROI区域。

  • 聚类算法模块

  上述步骤点云获取ROI区域之后,就是聚类算法上场大展身手的时候了。这里的任何聚类算法都是针对点云数据的空间性进行聚类,当然聚类的模式可分成在俯视图X-Y平面的二维聚类,还是直接三维空间聚类。二维聚类毫无疑问,速度快。但是一定程度上依赖点云预处理的效果,因为二维方法是丢弃高度z轴信息进行聚类。三维聚类,聚类速度慢但是聚类的三维几何空间较为准确,直接获取信息。

  二维聚类算法聚类后得到的每个簇,首先进行对每个簇的框拟合,目前主要有最小面积区域拟合法与LShapedFIT拟合。LShapedFIT算法主要是针对机动车被激光雷达扫描生成的形状主要是L型的特殊框拟合,但是对于行人等效果不明显。拟合好框之后,通过Kd树进行搜索三维空间的z轴信息,以此来恢复三维的框。

  三维聚类后,根据每个簇的三维信息直接通过OBB算法获取三维的框,不过可能三维的框旋转角度并不只是围绕z轴旋转,而是x-y也会旋转,这就是三维空间的框拟合。虽然我们无人车只需要z轴信息的旋转(也是常说的yaw角)即可。

  最后,不论是二维还是三维聚类,都需要进行迭代合并过于接近的框。以此来避免一个车聚类出多个障碍物框。目前常用的聚类方法是欧式聚类与DBSCAN聚类。至于是二维还是三维,目前推荐使用的是二维聚类方式,主要原因在于速度的限制,三维耗时较大且OBB的三维框拟合效果并不佳。

代码小试

  说了这么多,直接上一个小demo吧。根据pcl写的点云目标检测的显示这个流程。效果肯定不如实际的工程代码,就当做一个抛砖引玉吧。

#include <iostream>
#include <sstream>
#include <string>
#include <pcl/ModelCoefficients.h>
#include <pcl/point_types.h>
#include <pcl/io/pcd_io.h>
#include <pcl/io/ply_io.h>
#include <pcl/filters/extract_indices.h>
#include <pcl/filters/voxel_grid.h>
#include <pcl/features/normal_3d.h>
#include <pcl/kdtree/kdtree.h>
#include <pcl/sample_consensus/method_types.h>
#include <pcl/sample_consensus/model_types.h>
#include <pcl/segmentation/sac_segmentation.h>
#include <pcl/segmentation/extract_clusters.h>
#include <pcl/common/common.h>
#include <pcl/filters/crop_hull.h>
#include <pcl/sample_consensus/ransac.h>
#include <pcl/sample_consensus/sac_model_plane.h>
#include <pcl/filters/passthrough.h>
#include <pcl/features/moment_of_inertia_estimation.h>
#include <pcl/visualization/cloud_viewer.h>
#include <boost/thread/thread.hpp>int main(int argc, char** argv)
{// 点云数据读取// pcl::PLYReader reader;pcl::PCDReader reader;pcl::PointCloud<pcl::PointXYZI>::Ptr cloud(new pcl::PointCloud<pcl::PointXYZI>);reader.read("apollo.pcd", *cloud);std::cout << "PointCloud before filtering has: " << cloud->points.size() << " data points." << std::endl;// 通过RANSAC估计二维平面进行地面点与非地面点的分割 pcl::SACSegmentation<pcl::PointXYZI> seg;pcl::PointIndices::Ptr              inliers(new pcl::PointIndices);pcl::ModelCoefficients::Ptr         coeffs(new pcl::ModelCoe

这篇关于【pcl教程系列】之点云目标检测整体流程的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/269520

相关文章

Linux流媒体服务器部署流程

《Linux流媒体服务器部署流程》文章详细介绍了流媒体服务器的部署步骤,包括更新系统、安装依赖组件、编译安装Nginx和RTMP模块、配置Nginx和FFmpeg,以及测试流媒体服务器的搭建... 目录流媒体服务器部署部署安装1.更新系统2.安装依赖组件3.解压4.编译安装(添加RTMP和openssl模块

Python如何实现PDF隐私信息检测

《Python如何实现PDF隐私信息检测》随着越来越多的个人信息以电子形式存储和传输,确保这些信息的安全至关重要,本文将介绍如何使用Python检测PDF文件中的隐私信息,需要的可以参考下... 目录项目背景技术栈代码解析功能说明运行结php果在当今,数据隐私保护变得尤为重要。随着越来越多的个人信息以电子形

0基础租个硬件玩deepseek,蓝耘元生代智算云|本地部署DeepSeek R1模型的操作流程

《0基础租个硬件玩deepseek,蓝耘元生代智算云|本地部署DeepSeekR1模型的操作流程》DeepSeekR1模型凭借其强大的自然语言处理能力,在未来具有广阔的应用前景,有望在多个领域发... 目录0基础租个硬件玩deepseek,蓝耘元生代智算云|本地部署DeepSeek R1模型,3步搞定一个应

Ubuntu固定虚拟机ip地址的方法教程

《Ubuntu固定虚拟机ip地址的方法教程》本文详细介绍了如何在Ubuntu虚拟机中固定IP地址,包括检查和编辑`/etc/apt/sources.list`文件、更新网络配置文件以及使用Networ... 1、由于虚拟机网络是桥接,所以ip地址会不停地变化,接下来我们就讲述ip如何固定 2、如果apt安

PyCharm 接入 DeepSeek最新完整教程

《PyCharm接入DeepSeek最新完整教程》文章介绍了DeepSeek-V3模型的性能提升以及如何在PyCharm中接入和使用DeepSeek进行代码开发,本文通过图文并茂的形式给大家介绍的... 目录DeepSeek-V3效果演示创建API Key在PyCharm中下载Continue插件配置Con

Deepseek R1模型本地化部署+API接口调用详细教程(释放AI生产力)

《DeepseekR1模型本地化部署+API接口调用详细教程(释放AI生产力)》本文介绍了本地部署DeepSeekR1模型和通过API调用将其集成到VSCode中的过程,作者详细步骤展示了如何下载和... 目录前言一、deepseek R1模型与chatGPT o1系列模型对比二、本地部署步骤1.安装oll

在不同系统间迁移Python程序的方法与教程

《在不同系统间迁移Python程序的方法与教程》本文介绍了几种将Windows上编写的Python程序迁移到Linux服务器上的方法,包括使用虚拟环境和依赖冻结、容器化技术(如Docker)、使用An... 目录使用虚拟环境和依赖冻结1. 创建虚拟环境2. 冻结依赖使用容器化技术(如 docker)1. 创

Spring Boot整合log4j2日志配置的详细教程

《SpringBoot整合log4j2日志配置的详细教程》:本文主要介绍SpringBoot项目中整合Log4j2日志框架的步骤和配置,包括常用日志框架的比较、配置参数介绍、Log4j2配置详解... 目录前言一、常用日志框架二、配置参数介绍1. 日志级别2. 输出形式3. 日志格式3.1 PatternL

MySQL8.2.0安装教程分享

《MySQL8.2.0安装教程分享》这篇文章详细介绍了如何在Windows系统上安装MySQL数据库软件,包括下载、安装、配置和设置环境变量的步骤... 目录mysql的安装图文1.python访问网址2javascript.点击3.进入Downloads向下滑动4.选择Community Server5.

springboot启动流程过程

《springboot启动流程过程》SpringBoot简化了Spring框架的使用,通过创建`SpringApplication`对象,判断应用类型并设置初始化器和监听器,在`run`方法中,读取配... 目录springboot启动流程springboot程序启动入口1.创建SpringApplicat