26-ESP32-S3 的 FLASH分区表以及 SPIFFS 文件系统 和spiffsgen.py工具

2024-05-11 17:28

本文主要是介绍26-ESP32-S3 的 FLASH分区表以及 SPIFFS 文件系统 和spiffsgen.py工具,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

ESP32-S3 的 SPIFFS 文件系统

ESP32-S3的ROM,RAM,FLASH

存储器类型描述容量
内部存储器
ROM用于存储固定的程序代码和数据384KB
SRAM用于存储运行时的程序数据512KB
RTC SRAM在深度睡眠模式下仍然保持数据16KB
外部存储器
PSRAM片外用于存储运行时的程序数据最大16MB
特殊存储器
RTC FAST memory可以作为指令存储器也可以作为数据存储器进行访问-
RTC Slow memory从深度睡眠模式唤醒后必须要运行的代码要放在 RTC 存储器中-
SPI Flash片外通过 SPI接口外接最大16MB

对于片外的Flash 它是可读可写的,由于它的容量高达16MB,这意味着我们可以在其中存储大量的配置文件、图像、音频文件,甚至是一些小型的视频文件,可以尝试很多有趣的项目和应用

Flash分区表

ESP32-S3 的 Flash 存储器,它被划分为多个分区,每个分区都有特定的用途。

而Flash分区表它定义了 Flash 存储器的布局。Flash 分区表中的每个条目都描述了一个分区的属性,包括其在 Flash 中的位置(偏移量)、大小、类型、以及其他一些属性。

如何配置分区表

在使用分区表时,最简单的方法就是打开项目配置菜单(idf.py menuconfig),并在 CONFIG_PARTITION_TABLE_TYPE 下选择一个预定义的分区表:

  • “Single factory app, no OTA”

  • “Factory app, two OTA definitions”

如果想要查看当前使用的分区表 只要在终端运行 idf.py partition-table ,即可以打印当前使用分区表的信息摘要。
在这里插入图片描述
这里我使用的Single factory app, no OTA分区表

自定义分区表

关于自定义分区表可以查看我写的另一篇博客
15-partition table (分区表)

Flash 分区表的结构

以下是 “Factory app, two OTA definitions” 选项的分区表信息摘要:

# ESP-IDF Partition Table
# Name,   Type, SubType, Offset,  Size, Flags
nvs,      data, nvs,     0x9000,  0x4000,
otadata,  data, ota,     0xd000,  0x2000,
phy_init, data, phy,     0xf000,  0x1000,
factory,  app,  factory, 0x10000,  1M,
ota_0,    app,  ota_0,   0x110000, 1M,
ota_1,    app,  ota_1,   0x210000, 1M,

Factory app, two OTA definitions相比Single factory app, no OTA多了otadataota_0ota_1这三个分区

这三个分区在 ESP32-S3 的 OTA(Over-The-Air)更新机制中起着重要的作用。它们三个共同支持 ESP32-S3 的 OTA 更新功能,使设备能够在固件正常运行时根据接收数据(如通过 Wi-Fi 或蓝牙)进行自我更新。

ESP32-S3启动时 启动加载器会查询 “otadata” 分区的数据,以判断该从哪个 OTA 应用程序分区加载程序,如果不存在 “otadata” 分区则会从factory分区启动

SPIFFS介绍

前面铺垫了这么多,存储有了,哪怎么使用这些空间呢,这就需要文件管理系统了,在我们的windows电脑里有NTFS文件系统,在安卓手机里有F2FS 文件系统,而对于ESP32有SPIFFS文件系统。

SPIFFS(Serial Peripheral Interface Flash File System)是 ESP32-S3 的内存管理系统。更具体地说,它是一种在你的 ESP32 关机后不会擦除的内存存储。你可以使用它进行数据记录,保存访问代码,存储文件,以及记住用户输入的设置。

SPIFFS有以下特性和用处

  • 在指定的地址保存的数据不会因为重新更新而删除(如用户配置好的用户设置)

  • 不用外置的SD卡,节约硬件资源

  • 保存HTML和CSS文件以及建立Web服务器

  • SPIFFS 是一个用于 SPI NOR flash 设备的嵌入式文件系统,支持磨损均衡、文件系统一致性检查等功能。

  • 目前,SPIFFS 尚不支持目录,但可以生成扁平结构。如果 SPIFFS 挂载在 /spiffs 下,在 /spiffs/tmp/myfile.txt 路径下创建一个文件则会在 SPIFFS 中生成一个名为 /tmp/myfile.txt 的文件,而不是在 /spiffs/tmp 下生成名为 myfile.txt 的文件;

SPIFFS 与 NVS 的区别

SPIFFS(Serial Peripheral Interface Flash File System)和 NVS(Non-Volatile Storage)都是 ESP32-S3 的存储系统,但它们有一些关键的区别。

  • NVS 在 SPI NOR flash 上实现了一个有容错性,和磨损均衡功能的键值对存储。
  • NVS 可以存储一些 PHY 初始化数据,也可以存储其他数据,一些断电存储的数据建议放在这里。

总的来说,SPIFFS 更适合用于存储文件,而 NVS 更适合用于存储键值对数据。具体使用哪种存储系统,取决于应用需求。

SPIFFS 的使用

1️⃣注册装载 SPIFFS

该函数使用给定的路径前缀将 SPIFFS 注册并装载到 VFS,其函数原型如下所示:

esp_err_t esp_vfs_spiffs_register(const esp_vfs_spiffs_conf_t * conf);

该函数的形参描述,如下表所示:

形参描述
conf指向 esp_vfs_spiffs_conf_t 配置结构的指针

需要解释一下,函数名esp_vfs_spiffs_register中的VFS(虚拟文件系统)是操作系统内核的抽象层,统一了不同文件系统的接口,使应用程序能够通过通用接口访问各种底层文件系统。ESP32 中的 SPIFFS 就是通过 VFS 来提供文件系统支持的。

该函数的使用示例,如下所示:

#include "driver/gpio.h"void example_fun(void) 
{ /* 配置 SPIFFS 文件系统各个参数 */ esp_vfs_spiffs_conf_t conf = { .base_path = mount_point,         // 设置挂载点的路径.partition_label = partition_label, // 设置SPIFFS的分区标签.max_files = max_files,            // 设置文件系统支持的最大文件数.format_if_mount_failed = true,    // 如果挂载失败,是否尝试格式化分区}; /* 使用上面定义的设置来初始化和挂载 SPIFFS 文件系统 */ esp_err_t ret_val = esp_vfs_spiffs_register(&conf); // 注册并装载 SPIFFS
}

2️⃣获取 SPIFFS 的信息

该函数用于获取 SPIFFS 的信息,其函数原型如下所示:

esp_err_t esp_spiffs_info(const char* partition_label, size_t *total_bytes, size_t *used_bytes);

该函数的形参描述,如下表所示:

形参描述
partition_label指向分区标签的指针,分区表名称
total_bytes存放文件系统的大小
used_bytes存放文件系统中当前使用的字节数

该函数的使用示例,如下所示:

#include "esp_spiffs.h"void app_main(void)
{size_t total = 0, used = 0;esp_spiffs_info(partition_label, &total, &used);	//获取信息printf("Flash chip size: %d\n", total);printf("Used size: %d\n", used);
}

3️⃣注销和卸载 SPIFFS

该函数从 VFS 注销和卸载 SPIFFS,其函数原型如下所示:

esp_err_t esp_vfs_spiffs_unregister(const char* partition_label);

该函数的形参描述,如下表所示:

形参描述
partition_label指向分区表的指针,分区表名称

该函数的使用示例,如下所示:

#include "driver/gpio.h"void example_fun(char *partition_label) 
{ esp_vfs_spiffs_unregister(partition_label); // 注销和卸载 SPIFFS
}

除了上面这三个函数外,常常还需要调用到了 C 库的函数,对这块遗忘的博友可以看下 下面这篇博客来复习一下
C语言文件操作

程序示例

在 flash 指定区域新建 holle.txt 文件,然后对这文件进行读写操作

首先我们需要在分区表中创建一块分区,用以存放holle.txt 文件,具体方法可以查看我写的另一篇文章,这里我就不多赘述了
15-partition table (分区表)

这里是我配置的分区表,可以参考一下

# ESP-IDF Partition Table
# Name,   Type, SubType, Offset,  Size,   Flags
nvs,      data, nvs,     0x9000,  0x6000,
phy_init, data, phy,     0xf000,  0x1000,
factory,  app,  factory, 0x10000, 1M,
SPIFFS,   data, spiffs,  0x110000, 1M, 

程序如下

#include "esp_spiffs.h"
#include "esp_log.h"void app_main(void){// 初始化 SPIFFSesp_vfs_spiffs_conf_t conf = {.base_path = "/spiffs",  // 指定 SPIFFS 的挂载路径.partition_label = "SPIFFS",  // 分区标签,如果为 NULL,则使用默认的 SPIFFS 分区.max_files = 5,  // SPIFFS 可以打开的最大文件数.format_if_mount_failed = true  // 如果挂载失败,是否格式化 SPIFFS};// 注册 SPIFFS 到 VFSesp_err_t ret = esp_vfs_spiffs_register(&conf);// 检查 SPIFFS 是否成功初始化if (ret != ESP_OK) {if (ret == ESP_FAIL) {ESP_LOGE("TAG", "无法挂载或格式化文件系统");} else if (ret == ESP_ERR_NOT_FOUND) {ESP_LOGE("TAG", "未找到 SPIFFS 分区");} else {ESP_LOGE("TAG", "无法初始化 SPIFFS (%s)", esp_err_to_name(ret));}return;}// 写入文件FILE* f = fopen("/spiffs/hello.txt", "w");  // 打开一个文件进行写入if (f == NULL) {ESP_LOGE("TAG", "无法打开文件进行写入");return;}fprintf(f, "你好,世界!\n");  // 向文件中写入数据fclose(f);  // 关闭文件// 读取文件char line[64];f = fopen("/spiffs/hello.txt", "r");  // 打开一个文件进行读取if (f == NULL) {ESP_LOGE("TAG", "无法打开文件进行读取");return;}fgets(line, sizeof(line), f);  // 从文件中读取一行数据fclose(f);  // 关闭文件// 打印文件内容printf("从文件中读取:'%s'\n", line);// 卸载 SPIFFSesp_vfs_spiffs_unregister(NULL);  // 从 VFS 中注销 SPIFFS
}

在这个项目中 首先初始化 SPIFFS,然后在 /spiffs 目录下创建一个名为 hello.txt 的文件,并向其中写入 “Hello World!\n”。然后,它打开这个文件并读取其中的内容,最后打印出读取到的内容。在完成所有操作后,它将卸载 SPIFFS。

编译 下载 打开串口 三步走 效果和我们期望的一样,实验成功
在这里插入图片描述

spiffsgen.py

每次通过程序代码去保存和修改文件也太麻烦了,那么有没有一种工具,可以直接向开发板中传文件呢?

SPIFFS 提供了一个 Python 工具 spiffsgen.py,用于从主机文件夹内容生成文件系统镜像。使用方法就两步。

1️⃣制作spiffs文件系统镜像
打开终端并运行以下命令即可使用 spiffsgen.py:

python spiffsgen.py <image_size> <base_dir> <output_file>

参数(必选)说明如下:

  • image_size:分区大小,用于烧录生成的 SPIFFS 镜像;
  • base_dir:创建 SPIFFS 镜像的目录;
  • output_file:SPIFFS 镜像输出文件(也就是生成的bin文件的文件名)。

🚨注意(spiffsgen.py)这个空要用spiffsgen.py这个文件的绝对路径
这是我电脑上spiffsgen.py的位置

"D:\Espressif\frameworks\esp-idf-v5.2.1\components\spiffs\spiffsgen.py"

举个例子
首先我在项目中创建一个新文件夹,用来存放需要上传给开发板的内容 ,我就起名叫 Hello_spiffs,之后我又在这个文件夹中创建了一个文件 hello.txt,这是一个文本文件,分区大小我想要256 KB(也就是0x40000)

这样此时我就应该在控制台输入以下命令即可使用 spiffsgen.py

python D:\Espressif\frameworks\esp-idf-v5.2.1\components\spiffs\spiffsgen.py 0x40000 Hello_spiffs hello.bin

运行后如愿得到hello.bin文件
在这里插入图片描述
2️⃣烧写spiffs文件系统镜像
生成二进制文件后,我们可以使用 esptool.py 工具将生成的二进制文件烧录到 ESP32-S3 的 Flash 存储器中。以下是一个示例命令:

python esptool.py --chip esp32-s3 --port COM16 --baud 115200 write_flash -z 0x110000 hello.bin

其中:

  • 0x110000 是文件系统的偏移量
  • hello.bin 是要烧录的文件。

主要修改这两个部分,关于文件系统的偏移量要写多少,我们可以查看一下当前使用的分区表 (在终端运行 idf.py partition-table )
在这里插入图片描述

以我的为例factory分区划到了0x10000,大小1M(也就是0x100000),所以我们需要偏移0x110000,到我们自己创建的SPIFFS分区

同样我们还需要找到电脑上esptool.py 程序的路径

"D:\Espressif\frameworks\esp-idf-v5.2.1\components\esptool_py\esptool\esptool.py"

修改好命令,复制到终端上,回车运行

python D:\Espressif\frameworks\esp-idf-v5.2.1\components\esptool_py\esptool\esptool.py --chip esp32-s3 --port COM16 --baud 115200 write_flash -z 0x110000 hello.bin

恭喜你如果输出以下信息就表示数据上传成功了
在这里插入图片描述

🚨注意事项

  • 如果 ESP32-S3 在文件系统操作期间断电,可能会导致 SPIFFS 损坏。但是仍可通过 esp_spiffs_check 函数恢复文件系统。
  • 当文件系统空间不足时,垃圾收集器会尝试多次扫描文件系统来寻找可用空间。

结论

SPIFFS 是 ESP32-S3 的一个强大的功能,它提供了一种简单而有效的方式来在设备上存储和检索数据。尽管它有一些限制,但对于大多数应用来说,这些限制并不构成问题。通过学习理解了 SPIFFS 的工作原理和如何在我的项目中使用它,我已经可以充分利用 ESP32-S3 的这一功能。同时,理解了SPIFFS 和 NVS 的区别也同样帮助我能更好地选择适合的存储系统。希望这篇博客对您有所帮助!

参考资料
正点原子DNESP32S3 开发板教程-IDF 版
乐鑫编程指南 分区表
SPIFFS 文件系统

这篇关于26-ESP32-S3 的 FLASH分区表以及 SPIFFS 文件系统 和spiffsgen.py工具的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/980176

相关文章

Python基于wxPython和FFmpeg开发一个视频标签工具

《Python基于wxPython和FFmpeg开发一个视频标签工具》在当今数字媒体时代,视频内容的管理和标记变得越来越重要,无论是研究人员需要对实验视频进行时间点标记,还是个人用户希望对家庭视频进行... 目录引言1. 应用概述2. 技术栈分析2.1 核心库和模块2.2 wxpython作为GUI选择的优

使用Java实现通用树形结构构建工具类

《使用Java实现通用树形结构构建工具类》这篇文章主要为大家详细介绍了如何使用Java实现通用树形结构构建工具类,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录完整代码一、设计思想与核心功能二、核心实现原理1. 数据结构准备阶段2. 循环依赖检测算法3. 树形结构构建4. 搜索子

利用Python开发Markdown表格结构转换为Excel工具

《利用Python开发Markdown表格结构转换为Excel工具》在数据管理和文档编写过程中,我们经常使用Markdown来记录表格数据,但它没有Excel使用方便,所以本文将使用Python编写一... 目录1.完整代码2. 项目概述3. 代码解析3.1 依赖库3.2 GUI 设计3.3 解析 Mark

一文教你Python引入其他文件夹下的.py文件

《一文教你Python引入其他文件夹下的.py文件》这篇文章主要为大家详细介绍了如何在Python中引入其他文件夹里的.py文件,并探讨几种常见的实现方式,有需要的小伙伴可以根据需求进行选择... 目录1. 使用sys.path动态添加路径2. 使用相对导入(适用于包结构)3. 使用pythonPATH环境

利用Go语言开发文件操作工具轻松处理所有文件

《利用Go语言开发文件操作工具轻松处理所有文件》在后端开发中,文件操作是一个非常常见但又容易出错的场景,本文小编要向大家介绍一个强大的Go语言文件操作工具库,它能帮你轻松处理各种文件操作场景... 目录为什么需要这个工具?核心功能详解1. 文件/目录存javascript在性检查2. 批量创建目录3. 文件

jvm调优常用命令行工具详解

《jvm调优常用命令行工具详解》:本文主要介绍jvm调优常用命令行工具的用法,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一 jinfo命令查看参数1.1 查看jvm参数二 jstack命令2.1 查看现场堆栈信息三 jstat 实时查看堆内存,gc情况3.1

MySQL使用binlog2sql工具实现在线恢复数据功能

《MySQL使用binlog2sql工具实现在线恢复数据功能》binlog2sql是大众点评开源的一款用于解析MySQLbinlog的工具,根据不同选项,可以得到原始SQL、回滚SQL等,下面我们就来... 目录背景目标步骤准备工作恢复数据结果验证结论背景生产数据库执行 SQL 脚本,一般会经过正规的审批

Linux中的缓冲区和文件系统详解

《Linux中的缓冲区和文件系统详解》:本文主要介绍Linux中的缓冲区和文件系统方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、FILE结构1、fd2、缓冲区二、文件系统1、固态硬盘2、逻辑地址LBA(一)数据块 Data blocks(二)inode表

基于Python开发批量提取Excel图片的小工具

《基于Python开发批量提取Excel图片的小工具》这篇文章主要为大家详细介绍了如何使用Python中的openpyxl库开发一个小工具,可以实现批量提取Excel图片,有需要的小伙伴可以参考一下... 目前有一个需求,就是批量读取当前目录下所有文件夹里的Excel文件,去获取出Excel文件中的图片,并

Java导入、导出excel用法步骤保姆级教程(附封装好的工具类)

《Java导入、导出excel用法步骤保姆级教程(附封装好的工具类)》:本文主要介绍Java导入、导出excel的相关资料,讲解了使用Java和ApachePOI库将数据导出为Excel文件,包括... 目录前言一、引入Apache POI依赖二、用法&步骤2.1 创建Excel的元素2.3 样式和字体2.