Sensors and Actuators A: Physical 改进成像调节系统的视触觉传感器

本文主要是介绍Sensors and Actuators A: Physical 改进成像调节系统的视触觉传感器,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

基于视觉的触觉传感器(VTS)的成像鲁棒性取决于涂层的耐磨性和成像稳定性。随着传感器的小型化,有限的成像空间无法对接触深度变化引起的成像偏差提供缓冲。

本文提出了一种改进的基于视觉的薄触觉传感器(VTTS), 又称基于视觉的触觉皮肤,其集成了可调焦相机和成像调节系统(IAS),以提高成像鲁棒性。IAS包含成像校准系统和聚焦系统。由于视触觉传感是在相对稳定和封闭的成像环境中进行的,因此基于图像的聚焦方法与触觉成像是天然匹配的。

本文设计了一种基于全局搜索的成像标定系统,用于确定调焦间隔,缩短调焦范围。针对低频以及高频的成像调整,提出了基于三点拟合的聚焦深度(TPF-DFF)和基于深度学习的离焦深度(DL-DFD)。实验结果表明,IAS-VTTS具有接近100 %的调节精度,最快聚焦时间可达40 ms。因此,IAS-VTTS能够适应不同的形变深度,支持高质量的触觉成像。

1.基于视觉的触觉皮肤(VTTS)

VTTS由拉丝涂层、弹性体、亚克力透镜、柔性LED条、微型相机和传感器底座部分。其中弹性体由透明亚克力胶带通过层积工艺制备;涂层由金属箔制成,通过贴金工艺附着在弹性体上。亚克力透镜的尺寸为30 mm×25 mm×3 mm,通过3D打印或批量定制的方式制造得来;柔性LED具有柔软、轻薄、围绕弹性体的特点。传感器框架采用黑色树脂3D打印。
在这里插入图片描述

图1 成像偏差分析

2.成像调节系统(IAS)

图像是VTTS中触觉信息的载体。准确聚焦是图像调整的关键。基于图像的聚焦不依赖于其他设备。图像识别算法可以嵌入到图像处理模块中,提高传感器硬件的集成度。视觉-触觉传感具有稳定的成像条件。由于外界环境的多样性,其成像要求通过长时间的迭代和搜索来确定最佳成像参数。上述策略显然不能满足触觉检测的需求。基于图像的聚焦重点在于搜索方法的优化和清晰度评价函数的匹配。针对视触觉感知的封闭性,本文引入IAS对其进行匹配。IAS的性能取决于计算效率和搜索次数。首先通过图像标定确定聚焦间隔。然后,以最少的迭代次数完成调整。

在这里插入图片描述

图2 成像调节系统

2.1成像标定系统

在离焦判断阶段,标定和聚焦是不同的。标定不需要判断图像是否模糊,而是需要找到全局最优聚焦点。系统遍历整个聚焦范围并计算清晰度值,其中清晰度最高对应的聚焦点为最优聚焦点。

在这里插入图片描述

图3 成像标定系统和调焦系统

成像标定系统可以帮助相机调整到初始状态下的最优成像,并根据初始值确定调焦区间。本文希望尽可能地缩短聚焦范围,这样可以减少迭代次数,加快聚焦效率。在对焦测试中,对每一帧进行标定,输出真值清晰度作为判断对焦精度的基线。而现有得成像标定系统不适合聚焦,它无法避免聚焦阶段的无效搜索。因此,本文需要研制一套基于成像标定系统的调焦系统。

2.2调焦系统

基于图像的调焦方法需要OpenCV来采集图像、读取图像、计算成像清晰度、获取焦距、控制调焦。当系统判断图像失焦时,控制镜头的运动来调节镜头与成像传感器之间的距离。当镜头移动到正确的位置(最佳聚焦点)时,光线可以精确地聚焦在成像传感器上,形成清晰的图像。OpenCV根据可调焦相机内部参数获取焦距范围。

与复杂环境成像不同,触觉成像的背景固定,成像形式稳定。因此,触觉成像的清晰度评价曲线呈现较为规则的分布。经过图像标定后,最优聚焦点附近曲线的单调性相对稳定。当满足无偏性和单峰特性时,极大值点(最优聚焦点)的位置更加准确。如果直接从初始图像中预测离焦量,这种端到端的调整方法可以在多帧图像采集中节省时间。DFD通过数学模型从散焦图像中计算出成像系统的散焦量。深度学习可以降低模型建立的难度。然而,触觉成像的多样性和部分外部光照可能会影响模型的泛化性。综合考虑聚焦效率和聚焦难度,本文采用浅层网络( VGG-11 )作为网络主干。

在这里插入图片描述

图4 DL-DFD模型

3.实验与结果

3.1清晰度评价曲线分析

清晰度评价曲线接近理想评价曲线,反映了触觉成像的高稳定性。与复杂环境下的成像相比,触觉成像的封闭性降低了环境因素的干扰。相应地,这一优势凸显了基于图像的聚焦方法与触觉成像的高度匹配性。最大值附近的曲线近似于抛物线,因此可以对曲线进行拟合,推断最佳聚焦点。

在这里插入图片描述

图5 清晰度评价曲线

3.2成像标定实验

图像标定系统可以将任意一幅离焦图像调整到最佳成像。在轻微的压力下,当初始成像未标定时,大多数触觉图像严重模糊。经过校准的触觉成像确保了成像的清晰度介于锐利和稍失焦之间。结果表明图像标定系统缩短了调焦范围,为后续调焦提供了便利。

在这里插入图片描述

图6 成像标定测试

3.3调焦精度测试

为了测试TPF - DFF和DL - DFD的聚焦精度,本测试部分选取了三个测试对象,分别是圆柱体、指纹和织物。由于纹理精细度的不同,图像的模糊状态不同,这在一定程度上反映了聚焦方法对图像清晰度的敏感程度。在测试过程中,本文对随机抽取的100个样本进行了评估。TPF - DFF受导入焦点偏离最佳聚焦点的影响。DL - DFD直接输出最优聚焦点,无需微调。由于DL - DFD预测了一个聚焦区间,清晰度评价的波动略高于TPF - DFF。
在这里插入图片描述

图7 调焦精度测试结果

4.结论

本文提出一种改进的VTTS,将可调焦相机与IAS进行整合。IAS包含成像校准和聚焦系统,使VTTS能够适应在不同形变深度下的成像。一方面,提高了VTTS获取高质量数据的能力。另一方面,为人机交互应用提供高清触觉信息可视化。因此,改进的VTTS比其他VTTS具有更高的成像鲁棒性。

这篇关于Sensors and Actuators A: Physical 改进成像调节系统的视触觉传感器的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1026673

相关文章

通信系统网络架构_2.广域网网络架构

1.概述          通俗来讲,广域网是将分布于相比局域网络更广区域的计算机设备联接起来的网络。广域网由通信子网于资源子网组成。通信子网可以利用公用分组交换网、卫星通信网和无线分组交换网构建,将分布在不同地区的局域网或计算机系统互连起来,实现资源子网的共享。 2.网络组成          广域网属于多级网络,通常由骨干网、分布网、接入网组成。在网络规模较小时,可仅由骨干网和接入网组成

(超详细)YOLOV7改进-Soft-NMS(支持多种IoU变种选择)

1.在until/general.py文件最后加上下面代码 2.在general.py里面找到这代码,修改这两个地方 3.之后直接运行即可

YOLOv8改进 | SPPF | 具有多尺度带孔卷积层的ASPP【CVPR2018】

💡💡💡本专栏所有程序均经过测试,可成功执行💡💡💡 专栏目录 :《YOLOv8改进有效涨点》专栏介绍 & 专栏目录 | 目前已有40+篇内容,内含各种Head检测头、损失函数Loss、Backbone、Neck、NMS等创新点改进——点击即可跳转 Atrous Spatial Pyramid Pooling (ASPP) 是一种在深度学习框架中用于语义分割的网络结构,它旨

雨量传感器的分类和选型建议

物理原理分类 机械降雨量计(雨量桶):最早使用的降雨量传感器,通过漏斗收集雨水并记录。主要用于长期降雨统计,故障率较低。电容式降雨量传感器:基于两个电极之间的电容变化来计算降雨量。当降雨时,水滴堵住电极空间,改变电容值,从而计算降雨量。超声波式降雨量传感器:利用超声波的反射来计算降雨量。适用于大降雨量的场合。激光雷达式降雨量传感器:利用激光技术测量雨滴的速度、大小和形状等参数,并计算降雨量。主

Linux系统稳定性的奥秘:探究其背后的机制与哲学

在计算机操作系统的世界里,Linux以其卓越的稳定性和可靠性著称,成为服务器、嵌入式系统乃至个人电脑用户的首选。那么,是什么造就了Linux如此之高的稳定性呢?本文将深入解析Linux系统稳定性的几个关键因素,揭示其背后的技术哲学与实践。 1. 开源协作的力量Linux是一个开源项目,意味着任何人都可以查看、修改和贡献其源代码。这种开放性吸引了全球成千上万的开发者参与到内核的维护与优化中,形成了

PS系统教程25

介绍软件 BR(bridge) PS 配套软件,方便素材整理、管理素材 作用:起到桥梁作用 注意:PS和BR尽量保持版本一致 下载和安装可通过CSDN社区搜索,有免费安装指导。 安装之后,我们打开照片只需双击照片,就自动在Ps软件中打开。 前提:电脑上有PS软件 三种预览格式 全屏预览 评星级 直接按数字键就可以 方向键可以更换图片 esc退出 幻灯片放

风水研究会官网源码系统-可展示自己的领域内容-商品售卖等

一款用于展示风水行业,周易测算行业,玄学行业的系统,并支持售卖自己的商品。 整洁大气,非常漂亮,前端内容均可通过后台修改。 大致功能: 支持前端内容通过后端自定义支持开启关闭会员功能,会员等级设置支持对接官方支付支持添加商品类支持添加虚拟下载类支持自定义其他类型字段支持生成虚拟激活卡支持采集其他站点文章支持对接收益广告支持文章评论支持积分功能支持推广功能更多功能,搭建完成自行体验吧! 原文

Django 路由系统详解

Django 路由系统详解 引言 Django 是一个高级 Python Web 框架,它鼓励快速开发和干净、实用的设计。在 Django 中,路由系统是其核心组件之一,负责将用户的请求映射到相应的视图函数或类。本文将深入探讨 Django 的路由系统,包括其工作原理、配置方式以及高级功能。 目录 路由基础URL 映射路由参数命名空间URL 反向解析路由分发include 路由路由修饰符自

【图像识别系统】昆虫识别Python+卷积神经网络算法+人工智能+深度学习+机器学习+TensorFlow+ResNet50

一、介绍 昆虫识别系统,使用Python作为主要开发语言。通过TensorFlow搭建ResNet50卷积神经网络算法(CNN)模型。通过对10种常见的昆虫图片数据集(‘蜜蜂’, ‘甲虫’, ‘蝴蝶’, ‘蝉’, ‘蜻蜓’, ‘蚱蜢’, ‘蛾’, ‘蝎子’, ‘蜗牛’, ‘蜘蛛’)进行训练,得到一个识别精度较高的H5格式模型文件,然后使用Django搭建Web网页端可视化操作界面,实现用户上传一

OSG数学基础:坐标系统

坐标系是一个精确定位对象位置的框架,所有的图形变换都是基于一定的坐标系进行的。三维坐标系总体上可以分为两大类:左手坐标系和右手坐标系。常用的坐标系:世界坐标系、物体坐标系和摄像机坐标系。 世界坐标系 世界坐标系是一个特殊的坐标系,它建立了描述其他坐标系所需要的参考框架。从另一方面说,能够用世界坐标系来描述其他坐标系的位置,而不能用更大的、外部的坐标系来描述世界坐标系。世界坐标系也被广泛地