深度学习Keras保存模型(当包含自定义层时)

2024-06-15 16:38

本文主要是介绍深度学习Keras保存模型(当包含自定义层时),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

20210409 -

0.引言

一般来说,如果没有什么特殊情况,那么在进行保存模型的时候,通过调用一些api进行保存即可,在文章《深度学习的基础知识与问题汇总》简单介绍了一种方式,直接保存模型,并重新载入。

但是在今天的实验中,出现的需求就是,如果定义的模型中,包含了用户自定义的层就会报错,具体情况见[1],在保存模型的时候没有问题,但是载入时就会报错。
简单说明一下实验环境

python 3.6.8
tensorflow-gpu 2.3.1
Keras 2.4.3

1. 加载模型报错:未定义层

在[1]中,如果没有对自定义的层进行一系列的规定,那么在加载模型的时候, 就会报错为定义层。

ValueError: Unknown layer: CustomLayer

上面这种问题使用的api是load_model,通过这种方式加载整个模型以及各种权值,针对这种错误,可以通过两种方法来解决。在问答[2]中都提到了,一种是在加载模型的时候,在api指定自定义类,如下:

new_model = tf.keras.models.load_model('model.h5', custom_objects={'CustomLayer': CustomLayer})

可能如果你使用了自定义的损失函数,也需要将这部分内容传输进去。
而另外一种方法更方便,针对如果定义了多个自定义内容:

import tensorflow as tf@tf.keras.utils.register_keras_serializable()
class CustomLayer(tf.keras.layers.Layer):def __init__(self, k, **kwargs):self.k = ksuper(CustomLayer, self).__init__(**kwargs)def get_config(self):config = super().get_config()config["k"] = self.kreturn configdef call(self, input):return tf.multiply(input, 2)

在自定义层上加上修饰器。

注意看,这里他自定义类的时候,上面这些要实现的函数。最重要的是,将自己的参数在函数get_config中进行保存。具体可以看[2]的方式,可以以他的编程方式作为模板,将模型保存起来,其中还包含了参数初始化的内容,而且可以看到在build过程中引入的add_weight不用在get_config中声明。

2. 保存权值

本次实验中,最后使用的方式是仅仅保存权值,反正逻辑上都得先定义这个模型。使用的方式是在训练的时候加入了保存模型的回调函数。

参考

[1]Saving Keras models with Custom Layers
[2]Not able to load a saved model with custom layer

这篇关于深度学习Keras保存模型(当包含自定义层时)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!


原文地址:
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.chinasem.cn/article/1064004

相关文章

Spring Security基于数据库的ABAC属性权限模型实战开发教程

《SpringSecurity基于数据库的ABAC属性权限模型实战开发教程》:本文主要介绍SpringSecurity基于数据库的ABAC属性权限模型实战开发教程,本文给大家介绍的非常详细,对大... 目录1. 前言2. 权限决策依据RBACABAC综合对比3. 数据库表结构说明4. 实战开始5. MyBA

SpringCloud动态配置注解@RefreshScope与@Component的深度解析

《SpringCloud动态配置注解@RefreshScope与@Component的深度解析》在现代微服务架构中,动态配置管理是一个关键需求,本文将为大家介绍SpringCloud中相关的注解@Re... 目录引言1. @RefreshScope 的作用与原理1.1 什么是 @RefreshScope1.

使用Sentinel自定义返回和实现区分来源方式

《使用Sentinel自定义返回和实现区分来源方式》:本文主要介绍使用Sentinel自定义返回和实现区分来源方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录Sentinel自定义返回和实现区分来源1. 自定义错误返回2. 实现区分来源总结Sentinel自定

Java的IO模型、Netty原理解析

《Java的IO模型、Netty原理解析》Java的I/O是以流的方式进行数据输入输出的,Java的类库涉及很多领域的IO内容:标准的输入输出,文件的操作、网络上的数据传输流、字符串流、对象流等,这篇... 目录1.什么是IO2.同步与异步、阻塞与非阻塞3.三种IO模型BIO(blocking I/O)NI

Python 中的异步与同步深度解析(实践记录)

《Python中的异步与同步深度解析(实践记录)》在Python编程世界里,异步和同步的概念是理解程序执行流程和性能优化的关键,这篇文章将带你深入了解它们的差异,以及阻塞和非阻塞的特性,同时通过实际... 目录python中的异步与同步:深度解析与实践异步与同步的定义异步同步阻塞与非阻塞的概念阻塞非阻塞同步

基于Flask框架添加多个AI模型的API并进行交互

《基于Flask框架添加多个AI模型的API并进行交互》:本文主要介绍如何基于Flask框架开发AI模型API管理系统,允许用户添加、删除不同AI模型的API密钥,感兴趣的可以了解下... 目录1. 概述2. 后端代码说明2.1 依赖库导入2.2 应用初始化2.3 API 存储字典2.4 路由函数2.5 应

如何自定义Nginx JSON日志格式配置

《如何自定义NginxJSON日志格式配置》Nginx作为最流行的Web服务器之一,其灵活的日志配置能力允许我们根据需求定制日志格式,本文将详细介绍如何配置Nginx以JSON格式记录访问日志,这种... 目录前言为什么选择jsON格式日志?配置步骤详解1. 安装Nginx服务2. 自定义JSON日志格式各

Android自定义Scrollbar的两种实现方式

《Android自定义Scrollbar的两种实现方式》本文介绍两种实现自定义滚动条的方法,分别通过ItemDecoration方案和独立View方案实现滚动条定制化,文章通过代码示例讲解的非常详细,... 目录方案一:ItemDecoration实现(推荐用于RecyclerView)实现原理完整代码实现

Redis中高并发读写性能的深度解析与优化

《Redis中高并发读写性能的深度解析与优化》Redis作为一款高性能的内存数据库,广泛应用于缓存、消息队列、实时统计等场景,本文将深入探讨Redis的读写并发能力,感兴趣的小伙伴可以了解下... 目录引言一、Redis 并发能力概述1.1 Redis 的读写性能1.2 影响 Redis 并发能力的因素二、

基于Spring实现自定义错误信息返回详解

《基于Spring实现自定义错误信息返回详解》这篇文章主要为大家详细介绍了如何基于Spring实现自定义错误信息返回效果,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录背景目标实现产出背景Spring 提供了 @RestConChina编程trollerAdvice 用来实现 HTT