Sensors and Actuators A: Physical 改进成像调节系统的视触觉传感器

本文主要是介绍Sensors and Actuators A: Physical 改进成像调节系统的视触觉传感器,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

基于视觉的触觉传感器(VTS)的成像鲁棒性取决于涂层的耐磨性和成像稳定性。随着传感器的小型化,有限的成像空间无法对接触深度变化引起的成像偏差提供缓冲。

本文提出了一种改进的基于视觉的薄触觉传感器(VTTS), 又称基于视觉的触觉皮肤,其集成了可调焦相机和成像调节系统(IAS),以提高成像鲁棒性。IAS包含成像校准系统和聚焦系统。由于视触觉传感是在相对稳定和封闭的成像环境中进行的,因此基于图像的聚焦方法与触觉成像是天然匹配的。

本文设计了一种基于全局搜索的成像标定系统,用于确定调焦间隔,缩短调焦范围。针对低频以及高频的成像调整,提出了基于三点拟合的聚焦深度(TPF-DFF)和基于深度学习的离焦深度(DL-DFD)。实验结果表明,IAS-VTTS具有接近100 %的调节精度,最快聚焦时间可达40 ms。因此,IAS-VTTS能够适应不同的形变深度,支持高质量的触觉成像。

1.基于视觉的触觉皮肤(VTTS)

VTTS由拉丝涂层、弹性体、亚克力透镜、柔性LED条、微型相机和传感器底座部分。其中弹性体由透明亚克力胶带通过层积工艺制备;涂层由金属箔制成,通过贴金工艺附着在弹性体上。亚克力透镜的尺寸为30 mm×25 mm×3 mm,通过3D打印或批量定制的方式制造得来;柔性LED具有柔软、轻薄、围绕弹性体的特点。传感器框架采用黑色树脂3D打印。
在这里插入图片描述

图1 成像偏差分析

2.成像调节系统(IAS)

图像是VTTS中触觉信息的载体。准确聚焦是图像调整的关键。基于图像的聚焦不依赖于其他设备。图像识别算法可以嵌入到图像处理模块中,提高传感器硬件的集成度。视觉-触觉传感具有稳定的成像条件。由于外界环境的多样性,其成像要求通过长时间的迭代和搜索来确定最佳成像参数。上述策略显然不能满足触觉检测的需求。基于图像的聚焦重点在于搜索方法的优化和清晰度评价函数的匹配。针对视触觉感知的封闭性,本文引入IAS对其进行匹配。IAS的性能取决于计算效率和搜索次数。首先通过图像标定确定聚焦间隔。然后,以最少的迭代次数完成调整。

在这里插入图片描述

图2 成像调节系统

2.1成像标定系统

在离焦判断阶段,标定和聚焦是不同的。标定不需要判断图像是否模糊,而是需要找到全局最优聚焦点。系统遍历整个聚焦范围并计算清晰度值,其中清晰度最高对应的聚焦点为最优聚焦点。

在这里插入图片描述

图3 成像标定系统和调焦系统

成像标定系统可以帮助相机调整到初始状态下的最优成像,并根据初始值确定调焦区间。本文希望尽可能地缩短聚焦范围,这样可以减少迭代次数,加快聚焦效率。在对焦测试中,对每一帧进行标定,输出真值清晰度作为判断对焦精度的基线。而现有得成像标定系统不适合聚焦,它无法避免聚焦阶段的无效搜索。因此,本文需要研制一套基于成像标定系统的调焦系统。

2.2调焦系统

基于图像的调焦方法需要OpenCV来采集图像、读取图像、计算成像清晰度、获取焦距、控制调焦。当系统判断图像失焦时,控制镜头的运动来调节镜头与成像传感器之间的距离。当镜头移动到正确的位置(最佳聚焦点)时,光线可以精确地聚焦在成像传感器上,形成清晰的图像。OpenCV根据可调焦相机内部参数获取焦距范围。

与复杂环境成像不同,触觉成像的背景固定,成像形式稳定。因此,触觉成像的清晰度评价曲线呈现较为规则的分布。经过图像标定后,最优聚焦点附近曲线的单调性相对稳定。当满足无偏性和单峰特性时,极大值点(最优聚焦点)的位置更加准确。如果直接从初始图像中预测离焦量,这种端到端的调整方法可以在多帧图像采集中节省时间。DFD通过数学模型从散焦图像中计算出成像系统的散焦量。深度学习可以降低模型建立的难度。然而,触觉成像的多样性和部分外部光照可能会影响模型的泛化性。综合考虑聚焦效率和聚焦难度,本文采用浅层网络( VGG-11 )作为网络主干。

在这里插入图片描述

图4 DL-DFD模型

3.实验与结果

3.1清晰度评价曲线分析

清晰度评价曲线接近理想评价曲线,反映了触觉成像的高稳定性。与复杂环境下的成像相比,触觉成像的封闭性降低了环境因素的干扰。相应地,这一优势凸显了基于图像的聚焦方法与触觉成像的高度匹配性。最大值附近的曲线近似于抛物线,因此可以对曲线进行拟合,推断最佳聚焦点。

在这里插入图片描述

图5 清晰度评价曲线

3.2成像标定实验

图像标定系统可以将任意一幅离焦图像调整到最佳成像。在轻微的压力下,当初始成像未标定时,大多数触觉图像严重模糊。经过校准的触觉成像确保了成像的清晰度介于锐利和稍失焦之间。结果表明图像标定系统缩短了调焦范围,为后续调焦提供了便利。

在这里插入图片描述

图6 成像标定测试

3.3调焦精度测试

为了测试TPF - DFF和DL - DFD的聚焦精度,本测试部分选取了三个测试对象,分别是圆柱体、指纹和织物。由于纹理精细度的不同,图像的模糊状态不同,这在一定程度上反映了聚焦方法对图像清晰度的敏感程度。在测试过程中,本文对随机抽取的100个样本进行了评估。TPF - DFF受导入焦点偏离最佳聚焦点的影响。DL - DFD直接输出最优聚焦点,无需微调。由于DL - DFD预测了一个聚焦区间,清晰度评价的波动略高于TPF - DFF。
在这里插入图片描述

图7 调焦精度测试结果

4.结论

本文提出一种改进的VTTS,将可调焦相机与IAS进行整合。IAS包含成像校准和聚焦系统,使VTTS能够适应在不同形变深度下的成像。一方面,提高了VTTS获取高质量数据的能力。另一方面,为人机交互应用提供高清触觉信息可视化。因此,改进的VTTS比其他VTTS具有更高的成像鲁棒性。

这篇关于Sensors and Actuators A: Physical 改进成像调节系统的视触觉传感器的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1026673

相关文章

在C#中获取端口号与系统信息的高效实践

《在C#中获取端口号与系统信息的高效实践》在现代软件开发中,尤其是系统管理、运维、监控和性能优化等场景中,了解计算机硬件和网络的状态至关重要,C#作为一种广泛应用的编程语言,提供了丰富的API来帮助开... 目录引言1. 获取端口号信息1.1 获取活动的 TCP 和 UDP 连接说明:应用场景:2. 获取硬

JAVA系统中Spring Boot应用程序的配置文件application.yml使用详解

《JAVA系统中SpringBoot应用程序的配置文件application.yml使用详解》:本文主要介绍JAVA系统中SpringBoot应用程序的配置文件application.yml的... 目录文件路径文件内容解释1. Server 配置2. Spring 配置3. Logging 配置4. Ma

2.1/5.1和7.1声道系统有什么区别? 音频声道的专业知识科普

《2.1/5.1和7.1声道系统有什么区别?音频声道的专业知识科普》当设置环绕声系统时,会遇到2.1、5.1、7.1、7.1.2、9.1等数字,当一遍又一遍地看到它们时,可能想知道它们是什... 想要把智能电视自带的音响升级成专业级的家庭影院系统吗?那么你将面临一个重要的选择——使用 2.1、5.1 还是

高效管理你的Linux系统: Debian操作系统常用命令指南

《高效管理你的Linux系统:Debian操作系统常用命令指南》在Debian操作系统中,了解和掌握常用命令对于提高工作效率和系统管理至关重要,本文将详细介绍Debian的常用命令,帮助读者更好地使... Debian是一个流行的linux发行版,它以其稳定性、强大的软件包管理和丰富的社区资源而闻名。在使用

Ubuntu系统怎么安装Warp? 新一代AI 终端神器安装使用方法

《Ubuntu系统怎么安装Warp?新一代AI终端神器安装使用方法》Warp是一款使用Rust开发的现代化AI终端工具,该怎么再Ubuntu系统中安装使用呢?下面我们就来看看详细教程... Warp Terminal 是一款使用 Rust 开发的现代化「AI 终端」工具。最初它只支持 MACOS,但在 20

windows系统下shutdown重启关机命令超详细教程

《windows系统下shutdown重启关机命令超详细教程》shutdown命令是一个强大的工具,允许你通过命令行快速完成关机、重启或注销操作,本文将为你详细解析shutdown命令的使用方法,并提... 目录一、shutdown 命令简介二、shutdown 命令的基本用法三、远程关机与重启四、实际应用

Debian如何查看系统版本? 7种轻松查看Debian版本信息的实用方法

《Debian如何查看系统版本?7种轻松查看Debian版本信息的实用方法》Debian是一个广泛使用的Linux发行版,用户有时需要查看其版本信息以进行系统管理、故障排除或兼容性检查,在Debia... 作为最受欢迎的 linux 发行版之一,Debian 的版本信息在日常使用和系统维护中起着至关重要的作

什么是cron? Linux系统下Cron定时任务使用指南

《什么是cron?Linux系统下Cron定时任务使用指南》在日常的Linux系统管理和维护中,定时执行任务是非常常见的需求,你可能需要每天执行备份任务、清理系统日志或运行特定的脚本,而不想每天... 在管理 linux 服务器的过程中,总有一些任务需要我们定期或重复执行。就比如备份任务,通常会选在服务器资

TP-LINK/水星和hasivo交换机怎么选? 三款网管交换机系统功能对比

《TP-LINK/水星和hasivo交换机怎么选?三款网管交换机系统功能对比》今天选了三款都是”8+1″的2.5G网管交换机,分别是TP-LINK水星和hasivo交换机,该怎么选呢?这些交换机功... TP-LINK、水星和hasivo这三台交换机都是”8+1″的2.5G网管交换机,我手里的China编程has

基于Qt实现系统主题感知功能

《基于Qt实现系统主题感知功能》在现代桌面应用程序开发中,系统主题感知是一项重要的功能,它使得应用程序能够根据用户的系统主题设置(如深色模式或浅色模式)自动调整其外观,Qt作为一个跨平台的C++图形用... 目录【正文开始】一、使用效果二、系统主题感知助手类(SystemThemeHelper)三、实现细节