MNIST手写体数字数据集

2023-12-31 13:38
文章标签 数据 数字 mnist 手写体

本文主要是介绍MNIST手写体数字数据集,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

MNIST手写体数字数据集

本文从MNIST数据集的文件、文件格式、存储方式以及使用C++对其读取的流程(最终保存为图片)进行介绍。

  1. MNIST原始数据文件在这里插入图片描述包含以上4个数据文件

  2. 文件格式
    以下只以训练集图片文件为例说明:
    <div<|--|--|魔数,其实就是一个校验数,用来判断这个文件是不是MNIST里面的train-labels.idx1-ubyte文件;

3.数据集
训练样本:共60000个,
其中55000个用于训练,另外5000个用于验证(评估训练过程中的准确度);
测试样本:共10000个(评估最终模型的准确度);
所有数字图像已经进行尺寸归一化、数字居中处理,固定尺寸为28×28像素。

  1. MNIST大端存储方式
        大端存储:高位字节放在内存低地址,
                          低位字节放在内存高地址;
    区别于C/C++变量中的小端存储
        小端存储:低位字节放在内存低地址,
                          高位字节放在内存高地址;
  2. C++读取MNIST数据集读取流程

  3. 代码
#include <opencv2/imgproc/imgproc.hpp>  
#include <opencv2/highgui/highgui.hpp>  
#include <opencv2/core/core.hpp>  
#include <vector>  
#include <iostream>  
#include <fstream>  
#include <string>  
#include<inttypes.h>
using namespace std;
using namespace cv;//把大端数据转换为我们常用的小端数据  
uint32_t swap_endian(uint32_t val)
{val = ((val << 8) & 0xFF00FF00) | ((val >> 8) & 0xFF00FF);return (val << 16) | (val >> 16);
}void readAndSave(const string& mnist_img_path, const string& mnist_label_path)
{//以二进制格式读取mnist数据库中的图像文件和标签文件  ifstream mnist_image(mnist_img_path, ios::in | ios::binary);ifstream mnist_label(mnist_label_path, ios::in | ios::binary);if (mnist_image.is_open() == false || mnist_label.is_open() == false){cout << "open mnist image or lable file error!" << endl;return;}uint32_t magic;//文件中的魔术数(magic number)  uint32_t num_items;//mnist图像集文件中的图像数目  uint32_t num_label;//mnist标签集文件中的标签数目  uint32_t rows;//图像的行数  uint32_t cols;//图像的列数  //读魔术数  mnist_image.read(reinterpret_cast<char*>(&magic), 4);magic = swap_endian(magic);if (magic != 2051){cout << "this is not the mnist image file" << endl;return;}mnist_label.read(reinterpret_cast<char*>(&magic), 4);magic = swap_endian(magic);if (magic != 2049){cout << "this is not the mnist label file" << endl;return;}//读图像/标签数  mnist_image.read(reinterpret_cast<char*>(&num_items), 4);num_items = swap_endian(num_items);mnist_label.read(reinterpret_cast<char*>(&num_label), 4);num_label = swap_endian(num_label);//判断两种标签数是否相等  if (num_items != num_label){cout << "the image file and label file are not a pair" << endl;}//读图像行数、列数  mnist_image.read(reinterpret_cast<char*>(&rows), 4);rows = swap_endian(rows);mnist_image.read(reinterpret_cast<char*>(&cols), 4);cols = swap_endian(cols);//读取图像  for (int i = 0; i != num_items; i++){char* pixels = new char[rows * cols];mnist_image.read(pixels, rows * cols);char label;mnist_label.read(&label, 1);Mat image(rows, cols, CV_8UC1);for (int m = 0; m != rows; m++){uchar* ptr = image.ptr<uchar>(m);for (int n = 0; n != cols; n++){if (pixels[m * cols + n] == 0)ptr[n] = 0;elseptr[n] = 255;}}string saveFile = "E:\\visual studio 2015 Projects\\MNIST\\MNIST\\MNISTIMAGE\\" + to_string((unsigned int)label) + "_" + to_string(i) + ".jpg";//文件保存路径imwrite(saveFile, image);}
}int main()
{readAndSave("E:\\visual studio 2015 Projects\\MNIST\\MNIST\\t10k-images.idx3-ubyte", "E:\\visual studio 2015 Projects\\MNIST\\MNIST\\t10k-labels.idx1-ubyte");return 0;
}

以上就是关于MNIST手写体数字数据集的相关介绍,希望对你有用哦!

这篇关于MNIST手写体数字数据集的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/556183

相关文章

Java利用JSONPath操作JSON数据的技术指南

《Java利用JSONPath操作JSON数据的技术指南》JSONPath是一种强大的工具,用于查询和操作JSON数据,类似于SQL的语法,它为处理复杂的JSON数据结构提供了简单且高效... 目录1、简述2、什么是 jsONPath?3、Java 示例3.1 基本查询3.2 过滤查询3.3 递归搜索3.4

MySQL大表数据的分区与分库分表的实现

《MySQL大表数据的分区与分库分表的实现》数据库的分区和分库分表是两种常用的技术方案,本文主要介绍了MySQL大表数据的分区与分库分表的实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有... 目录1. mysql大表数据的分区1.1 什么是分区?1.2 分区的类型1.3 分区的优点1.4 分

Mysql删除几亿条数据表中的部分数据的方法实现

《Mysql删除几亿条数据表中的部分数据的方法实现》在MySQL中删除一个大表中的数据时,需要特别注意操作的性能和对系统的影响,本文主要介绍了Mysql删除几亿条数据表中的部分数据的方法实现,具有一定... 目录1、需求2、方案1. 使用 DELETE 语句分批删除2. 使用 INPLACE ALTER T

Python Dash框架在数据可视化仪表板中的应用与实践记录

《PythonDash框架在数据可视化仪表板中的应用与实践记录》Python的PlotlyDash库提供了一种简便且强大的方式来构建和展示互动式数据仪表板,本篇文章将深入探讨如何使用Dash设计一... 目录python Dash框架在数据可视化仪表板中的应用与实践1. 什么是Plotly Dash?1.1

Redis 中的热点键和数据倾斜示例详解

《Redis中的热点键和数据倾斜示例详解》热点键是指在Redis中被频繁访问的特定键,这些键由于其高访问频率,可能导致Redis服务器的性能问题,尤其是在高并发场景下,本文给大家介绍Redis中的热... 目录Redis 中的热点键和数据倾斜热点键(Hot Key)定义特点应对策略示例数据倾斜(Data S

Python实现将MySQL中所有表的数据都导出为CSV文件并压缩

《Python实现将MySQL中所有表的数据都导出为CSV文件并压缩》这篇文章主要为大家详细介绍了如何使用Python将MySQL数据库中所有表的数据都导出为CSV文件到一个目录,并压缩为zip文件到... python将mysql数据库中所有表的数据都导出为CSV文件到一个目录,并压缩为zip文件到另一个

使用PyTorch实现手写数字识别功能

《使用PyTorch实现手写数字识别功能》在人工智能的世界里,计算机视觉是最具魅力的领域之一,通过PyTorch这一强大的深度学习框架,我们将在经典的MNIST数据集上,见证一个神经网络从零开始学会识... 目录当计算机学会“看”数字搭建开发环境MNIST数据集解析1. 认识手写数字数据库2. 数据预处理的

java字符串数字补齐位数详解

《java字符串数字补齐位数详解》:本文主要介绍java字符串数字补齐位数,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录Java字符串数字补齐位数一、使用String.format()方法二、Apache Commons Lang库方法三、Java 11+的St

SpringBoot整合jasypt实现重要数据加密

《SpringBoot整合jasypt实现重要数据加密》Jasypt是一个专注于简化Java加密操作的开源工具,:本文主要介绍详细介绍了如何使用jasypt实现重要数据加密,感兴趣的小伙伴可... 目录jasypt简介 jasypt的优点SpringBoot使用jasypt创建mapper接口配置文件加密

使用Python高效获取网络数据的操作指南

《使用Python高效获取网络数据的操作指南》网络爬虫是一种自动化程序,用于访问和提取网站上的数据,Python是进行网络爬虫开发的理想语言,拥有丰富的库和工具,使得编写和维护爬虫变得简单高效,本文将... 目录网络爬虫的基本概念常用库介绍安装库Requests和BeautifulSoup爬虫开发发送请求解