使用timm库的一些知识点

2024-03-14 22:04
文章标签 知识点 使用 timm

本文主要是介绍使用timm库的一些知识点,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

timm(Torch Image Models)是一个在PyTorch上构建的图像模型库,它提供了一系列预训练的深度学习模型,使得研究人员和开发者可以方便地进行图像分类、目标检测等任务。
在这里插入图片描述

使用timm库创建模型时,如何确定模型的名字

使用timm.list_models方法,找到timm支持的模型

import timmif __name__ == '__main__':all_pretrained_models_available = timm.list_models(pretrained=True)print(all_pretrained_models_available)for i in all_pretrained_models_available:print(i)

运行结果:
很多,这里只列出一部分啊!

resnet152
resnet152d
resnet200d
resnetblur50
resnetrs50
resnetrs101
resnetrs152
resnetrs200
resnetrs270
resnetrs350
resnetrs420
resnetv2_50
resnetv2_50x1_bit_distilled
resnetv2_50x1_bitm
resnetv2_50x1_bitm_in21k
resnetv2_50x3_bitm
resnetv2_50x3_bitm_in21k
resnetv2_101
resnetv2_101x1_bitm
resnetv2_101x1_bitm_in21k
resnetv2_101x3_bitm
resnetv2_101x3_bitm_in21k
resnetv2_152x2_bit_teacher
resnetv2_152x2_bit_teacher_384
resnetv2_152x2_bitm
resnetv2_152x2_bitm_in21k
resnetv2_152x4_bitm
resnetv2_152x4_bitm_in21k
resnext26ts

创建模型

执行代码

self.model = timm.create_model('resnetv2_50', pretrained, num_classes=12, global_pool="avg")

加载预训练权重

timm模型加载预训练权重,均改为从huggingface自动下载。由于众所周知的原因,我们不能下载。我们可以选择加载其他版本的预训练权重。代码:

model_path = '/Users/admin/Downloads/pytorch_model.bin'  # 替换为你的pytorch_model.bin文件路径# 加载模型权重
state_dict = torch.load(model_path, map_location=torch.device('cpu'))# 创建模型实例并加载权重
model = timm.create_model("eva_giant_patch14_336.clip_ft_in1k", pretrained=False)
model.load_state_dict(state_dict)# 修改输出类别数
model.reset_classifier(num_classes)  

特征提取

使用timm库进行特征提取是一个常见的任务,尤其是在处理图像数据时。timm(Torch Image Models)是一个基于PyTorch的库,它包含了一系列预训练的深度学习模型,这些模型可以很方便地用于特征提取、迁移学习等任务。

以下是一个使用timm进行特征提取的基本示例:

首先,确保你已经安装了timm库:

pip install timm

然后,你可以使用以下Python代码进行特征提取:

import torch
from timm import create_model, list_models
from torchvision import transforms
from PIL import Image# 选择一个预训练模型
model_name = 'resnet50'
pretrained_model = create_model(model_name, pretrained=True)# 切换到评估模式,关闭dropout和batch normalization层
pretrained_model.eval()# 定义预处理变换
transform = transforms.Compose([transforms.Resize(224),transforms.ToTensor(),transforms.Normalize(mean=[0.485, 0.456, 0.406], std=[0.229, 0.224, 0.225]),
])# 加载图像
image_path = 'path_to_your_image.jpg'
image = Image.open(image_path).convert('RGB')# 应用预处理变换
image_tensor = transform(image).unsqueeze(0)  # 添加batch维度# 如果有GPU,将图像和数据模型转移到GPU
device = torch.device('cuda' if torch.cuda.is_available() else 'cpu')
image_tensor = image_tensor.to(device)
pretrained_model = pretrained_model.to(device)# 提取特征
with torch.no_grad():  # 不需要计算梯度,节省内存和计算资源features = pretrained_model.forward_features(image_tensor)  # 获取特征# 将特征转移到CPU(如果需要)并展平
features = features.cpu().numpy().flatten()print(features)

在这个例子中,我们首先创建了一个预训练的ResNet-50模型。然后,我们将模型设置为评估模式,并定义了一个预处理变换,该变换将图像缩放到256x256,中心裁剪到224x224,转换为张量,并应用归一化。

接下来,我们加载了一张图像,并应用预处理变换。然后,我们检查是否有可用的GPU,并将图像张量和模型转移到相应的设备上。

最后,我们使用forward_features方法(这是timm库特有的,用于直接获取模型的卷积层输出,而不包括全连接层)来提取图像的特征。提取的特征被转移到CPU上,并展平为一个一维数组。

注意:不同的模型可能有不同的方法来获取特征。例如,一些模型可能没有forward_features方法,而是需要你手动选择特定的层来获取特征。在这种情况下,你需要查阅该模型的文档或源代码来了解如何正确提取特征。

这篇关于使用timm库的一些知识点的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/809851

相关文章

中文分词jieba库的使用与实景应用(一)

知识星球:https://articles.zsxq.com/id_fxvgc803qmr2.html 目录 一.定义: 精确模式(默认模式): 全模式: 搜索引擎模式: paddle 模式(基于深度学习的分词模式): 二 自定义词典 三.文本解析   调整词出现的频率 四. 关键词提取 A. 基于TF-IDF算法的关键词提取 B. 基于TextRank算法的关键词提取

使用SecondaryNameNode恢复NameNode的数据

1)需求: NameNode进程挂了并且存储的数据也丢失了,如何恢复NameNode 此种方式恢复的数据可能存在小部分数据的丢失。 2)故障模拟 (1)kill -9 NameNode进程 [lytfly@hadoop102 current]$ kill -9 19886 (2)删除NameNode存储的数据(/opt/module/hadoop-3.1.4/data/tmp/dfs/na

Hadoop数据压缩使用介绍

一、压缩原则 (1)运算密集型的Job,少用压缩 (2)IO密集型的Job,多用压缩 二、压缩算法比较 三、压缩位置选择 四、压缩参数配置 1)为了支持多种压缩/解压缩算法,Hadoop引入了编码/解码器 2)要在Hadoop中启用压缩,可以配置如下参数

Makefile简明使用教程

文章目录 规则makefile文件的基本语法:加在命令前的特殊符号:.PHONY伪目标: Makefilev1 直观写法v2 加上中间过程v3 伪目标v4 变量 make 选项-f-n-C Make 是一种流行的构建工具,常用于将源代码转换成可执行文件或者其他形式的输出文件(如库文件、文档等)。Make 可以自动化地执行编译、链接等一系列操作。 规则 makefile文件

使用opencv优化图片(画面变清晰)

文章目录 需求影响照片清晰度的因素 实现降噪测试代码 锐化空间锐化Unsharp Masking频率域锐化对比测试 对比度增强常用算法对比测试 需求 对图像进行优化,使其看起来更清晰,同时保持尺寸不变,通常涉及到图像处理技术如锐化、降噪、对比度增强等 影响照片清晰度的因素 影响照片清晰度的因素有很多,主要可以从以下几个方面来分析 1. 拍摄设备 相机传感器:相机传

基本知识点

1、c++的输入加上ios::sync_with_stdio(false);  等价于 c的输入,读取速度会加快(但是在字符串的题里面和容易出现问题) 2、lower_bound()和upper_bound() iterator lower_bound( const key_type &key ): 返回一个迭代器,指向键值>= key的第一个元素。 iterator upper_bou

pdfmake生成pdf的使用

实际项目中有时会有根据填写的表单数据或者其他格式的数据,将数据自动填充到pdf文件中根据固定模板生成pdf文件的需求 文章目录 利用pdfmake生成pdf文件1.下载安装pdfmake第三方包2.封装生成pdf文件的共用配置3.生成pdf文件的文件模板内容4.调用方法生成pdf 利用pdfmake生成pdf文件 1.下载安装pdfmake第三方包 npm i pdfma

零基础学习Redis(10) -- zset类型命令使用

zset是有序集合,内部除了存储元素外,还会存储一个score,存储在zset中的元素会按照score的大小升序排列,不同元素的score可以重复,score相同的元素会按照元素的字典序排列。 1. zset常用命令 1.1 zadd  zadd key [NX | XX] [GT | LT]   [CH] [INCR] score member [score member ...]

git使用的说明总结

Git使用说明 下载安装(下载地址) macOS: Git - Downloading macOS Windows: Git - Downloading Windows Linux/Unix: Git (git-scm.com) 创建新仓库 本地创建新仓库:创建新文件夹,进入文件夹目录,执行指令 git init ,用以创建新的git 克隆仓库 执行指令用以创建一个本地仓库的

【北交大信息所AI-Max2】使用方法

BJTU信息所集群AI_MAX2使用方法 使用的前提是预约到相应的算力卡,拥有登录权限的账号密码,一般为导师组共用一个。 有浏览器、ssh工具就可以。 1.新建集群Terminal 浏览器登陆10.126.62.75 (如果是1集群把75改成66) 交互式开发 执行器选Terminal 密码随便设一个(需记住) 工作空间:私有数据、全部文件 加速器选GeForce_RTX_2080_Ti