资源受限的智能陷阱:集成TinyML的果蝇监控框架

2024-08-26 08:04

本文主要是介绍资源受限的智能陷阱:集成TinyML的果蝇监控框架,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

 

这篇论文的标题是《Resource-Constrained Intelligent Trap: Fruit Flies Surveillance Framework with TinyML Integration》,作者是Quan Minh Nguyen、Minh Nhat Lai、Vu Thanh Le和Hien Bich Vo。论文介绍了一种资源受限的智能陷阱系统,用于监测和控制果蝇,以保护农作物。以下是论文的主要内容概述:

摘要

  • 研究提出了一种使用ESP-EYE微控制器和FOMO算法结合Edge Impulse AI平台的先进解决方案,以保护果实作物免受果蝇的威胁。
  • 智能昆虫陷阱具备高级功能,并展现出卓越的性能,最大RAM使用量为2.4Mb,推理时间为5.694秒,基于IoU(交并比)阈值为0.5时,准确率达到96%。
  • 该解决方案不仅确保了专业检测和计数能力,还及时向农民提供潜在威胁的通知,支持有针对性的农药使用,最小化广泛喷洒,并确保有效的作物保护。
  • 陷阱可以无人干预下自动运行,具有自动更换果蝇污染的粘性陷阱的功能,这种可持续的方法适应于不同类型的害虫,提高了资源利用和生产力。

引言

  • 论文讨论了果蝇对农作物的威胁,以及如何通过创新解决方案保护收成。

相关工作

  • 论文回顾了电子陷阱(e-traps)作为有效监测系统的研究进展,并讨论了自动昆虫陷阱(AITs)的重要性。

45a1c4e7ae884a97a886729265333614.png

系统概述

  • 论文详细介绍了智能陷阱系统的硬件和软件组件,包括Lynfield陷阱、ESP-EYE开发板、ESP32微控制器、电源补充和机电系统。

本部分详细探讨了构成资源受限智能陷阱(RCIT)的基础元素的方法、流程和原理,包括其硬件和软件组件。

A. 硬件组件

RCIT的硬件组件主要包括以下几个部分:

  • 机电系统:包括Lynfield陷阱、ESP-EYE相机系统、MG996S伺服电机(可360度旋转)、Petri dish分配器、信息素分配器和电气盒。电气盒内装有传感器模块、ESP32微控制器、两个A4988驱动器和CNC盾V3扩展电路。

  • Lynfield陷阱:设计成Lynfield陷阱形状的机械陷阱,包括一个不透明的白色云母塑料盒,侧面钻有三个孔。底部是一个可翻转的盖子,覆盖有粘蝇纸,内部放置一个浸有信息素的棉球。

  • ESP-EYE:由ESP32芯片驱动的ESP-EYE模块,具备200万像素相机、4M字节闪存和8M字节PSRAM。支持WiFi图像传输,确保无缝连接。使用ESP-IDF软件SDK和ESP-WHO AI框架,擅长面部检测和识别。

  • 电源系统:系统利用两个20W - 12V太阳能电池板的太阳能,通过太阳能电压调节器电路将输入微调至8.4V供给UPS模块。ESP32微控制器通过一个UPS模块运行,该模块由四个3.7V锂电池供电。

  • Petri dish分配器:使用1毫升剂量的信息素,涂在粘蝇纸中央的一小片棉布上,理想条件下可覆盖330平方米的区域。

  • 信息素分配器:使用轴向蠕动泵和NEMA17步进电机,以极高的精度提供1毫升剂量的信息素。

B. 软件组件

软件系统在数据收集中起着关键作用,包括捕获苍蝇图像、执行苍蝇识别和计数以及收集感应设备的数据:

  • FOMO MobileNetV2:FOMO(Faster Objects, More Objects)MobileNetV2是一种创新的机器学习算法,用于在资源受限的设备上进行对象检测。它基于MobileNetV2架构,优化了速度和内存效率。

  • 用户仪表板:自动化系统监控捕蝇器,每20分钟捕获图像并量化苍蝇的存在。环境传感器持续收集周围条件的数据。这些综合信息被上传以供实时访问,并且当苍蝇数量超过预定阈值时,会通知用户。

系统特点

  • RCIT系统通过结合图像处理技术、Wi-Fi连接协议和机械系统,提高了果蝇管理的效率、准确性和环境友好性。
  • 系统使用ESP-EYE微控制器进行实时作物监测,利用FOMO MobileNetV2和先进的目标检测算法,在各种光照条件下识别果蝇。
  • 机械系统在接收到ESP-EYE的信号后激活,主要目的是减少人为干预,从而延长设备在环境中的运行时间。
  • 系统采用TinyML的优势,如低延迟、增强隐私、降低功耗和减少带宽使用,确保实时检测,通过在设备上保留数据来保护用户数据,延长电池寿命,并提高系统可靠性。

系统概述部分为读者提供了对RCIT系统的全面了解,包括其硬件设计、软件架构和如何将这些组件集成以实现有效的果蝇监测和管理。

硬件

  • 描述了包括机械陷阱、相机系统、传感器模块、电源系统、诱捕剂分配器和信息素分配器在内的硬件组件。

475b57ef7ad44ab7be557054b437c5e8.png

软件

  • 讨论了数据收集的重要性,软件系统的关键作用,包括捕获图像、执行果蝇识别和计数以及从感应设备收集数据。

实验和评估

  • 论文描述了使用384张果蝇图像数据集进行的硬件和软件实验,评估了FOMO MobileNetV2模型的性能,包括检测速度和资源使用情况。

257b6812b4af42e5b2118302c0ed2fba.png

结论和展望

  • 论文总结了RCIT系统的主要成就,并提出了未来的改进方向,包括优化图像处理算法、系统能效以及机械组件的设计。

参考文献

  • 提供了一系列相关研究和文献,涵盖了果蝇管理、TinyML、AIoT、边缘计算等领域。

这篇论文提出了一个创新的智能陷阱系统,用于监测和控制果蝇,以保护农作物。通过使用TinyML和边缘计算技术,该系统在资源受限的环境中实现了高效、准确的果蝇检测,对农业和环境的可持续发展具有重要意义。

 

这篇关于资源受限的智能陷阱:集成TinyML的果蝇监控框架的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1107997

相关文章

流媒体平台/视频监控/安防视频汇聚EasyCVR播放暂停后视频画面黑屏是什么原因?

视频智能分析/视频监控/安防监控综合管理系统EasyCVR视频汇聚融合平台,是TSINGSEE青犀视频垂直深耕音视频流媒体技术、AI智能技术领域的杰出成果。该平台以其强大的视频处理、汇聚与融合能力,在构建全栈视频监控系统中展现出了独特的优势。视频监控管理系统EasyCVR平台内置了强大的视频解码、转码、压缩等技术,能够处理多种视频流格式,并以多种格式(RTMP、RTSP、HTTP-FLV、WebS

综合安防管理平台LntonAIServer视频监控汇聚抖动检测算法优势

LntonAIServer视频质量诊断功能中的抖动检测是一个专门针对视频稳定性进行分析的功能。抖动通常是指视频帧之间的不必要运动,这种运动可能是由于摄像机的移动、传输中的错误或编解码问题导致的。抖动检测对于确保视频内容的平滑性和观看体验至关重要。 优势 1. 提高图像质量 - 清晰度提升:减少抖动,提高图像的清晰度和细节表现力,使得监控画面更加真实可信。 - 细节增强:在低光条件下,抖

嵌入式QT开发:构建高效智能的嵌入式系统

摘要: 本文深入探讨了嵌入式 QT 相关的各个方面。从 QT 框架的基础架构和核心概念出发,详细阐述了其在嵌入式环境中的优势与特点。文中分析了嵌入式 QT 的开发环境搭建过程,包括交叉编译工具链的配置等关键步骤。进一步探讨了嵌入式 QT 的界面设计与开发,涵盖了从基本控件的使用到复杂界面布局的构建。同时也深入研究了信号与槽机制在嵌入式系统中的应用,以及嵌入式 QT 与硬件设备的交互,包括输入输出设

让树莓派智能语音助手实现定时提醒功能

最初的时候是想直接在rasa 的chatbot上实现,因为rasa本身是带有remindschedule模块的。不过经过一番折腾后,忽然发现,chatbot上实现的定时,语音助手不一定会有响应。因为,我目前语音助手的代码设置了长时间无应答会结束对话,这样一来,chatbot定时提醒的触发就不会被语音助手获悉。那怎么让语音助手也具有定时提醒功能呢? 我最后选择的方法是用threading.Time

【区块链 + 人才服务】区块链集成开发平台 | FISCO BCOS应用案例

随着区块链技术的快速发展,越来越多的企业开始将其应用于实际业务中。然而,区块链技术的专业性使得其集成开发成为一项挑战。针对此,广东中创智慧科技有限公司基于国产开源联盟链 FISCO BCOS 推出了区块链集成开发平台。该平台基于区块链技术,提供一套全面的区块链开发工具和开发环境,支持开发者快速开发和部署区块链应用。此外,该平台还可以提供一套全面的区块链开发教程和文档,帮助开发者快速上手区块链开发。

智能交通(二)——Spinger特刊推荐

特刊征稿 01  期刊名称: Autonomous Intelligent Systems  特刊名称: Understanding the Policy Shift  with the Digital Twins in Smart  Transportation and Mobility 截止时间: 开放提交:2024年1月20日 提交截止日

cross-plateform 跨平台应用程序-03-如果只选择一个框架,应该选择哪一个?

跨平台系列 cross-plateform 跨平台应用程序-01-概览 cross-plateform 跨平台应用程序-02-有哪些主流技术栈? cross-plateform 跨平台应用程序-03-如果只选择一个框架,应该选择哪一个? cross-plateform 跨平台应用程序-04-React Native 介绍 cross-plateform 跨平台应用程序-05-Flutte

基于 YOLOv5 的积水检测系统:打造高效智能的智慧城市应用

在城市发展中,积水问题日益严重,特别是在大雨过后,积水往往会影响交通甚至威胁人们的安全。通过现代计算机视觉技术,我们能够智能化地检测和识别积水区域,减少潜在危险。本文将介绍如何使用 YOLOv5 和 PyQt5 搭建一个积水检测系统,结合深度学习和直观的图形界面,为用户提供高效的解决方案。 源码地址: PyQt5+YoloV5 实现积水检测系统 预览: 项目背景

Spring框架5 - 容器的扩展功能 (ApplicationContext)

private static ApplicationContext applicationContext;static {applicationContext = new ClassPathXmlApplicationContext("bean.xml");} BeanFactory的功能扩展类ApplicationContext进行深度的分析。ApplicationConext与 BeanF

数据治理框架-ISO数据治理标准

引言 "数据治理"并不是一个新的概念,国内外有很多组织专注于数据治理理论和实践的研究。目前国际上,主要的数据治理框架有ISO数据治理标准、GDI数据治理框架、DAMA数据治理管理框架等。 ISO数据治理标准 改标准阐述了数据治理的标准、基本原则和数据治理模型,是一套完整的数据治理方法论。 ISO/IEC 38505标准的数据治理方法论的核心内容如下: 数据治理的目标:促进组织高效、合理地