在Deeplearning4j中使用cuDNN

2024-06-14 21:58
文章标签 使用 cudnn deeplearning4j

本文主要是介绍在Deeplearning4j中使用cuDNN,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在Deeplearning4j中使用cuDNN

Deeplearning4j支持cuda,但是也支持使用cuDNN实现更进一步的加速。自从版本0.9.1之后,CNNs和LSTMs网络都支持cuDNN加速。
注意: cuDNN并不支持GravesLSTM网络层,请考虑使用LSTM网络层进行替代。为了使用cuDNN,你首先需要切换Nd4j的后端至CUDA后端。这个可以通过在你项目中的pom.xmlnd4j-native替换为nd4j-cuda-7.5或者nd4j-cuda-8.0的方式来实现。理论上,将后端替换为nd4j-cuda-7.5或者nd4j-cuda-8.0将会自动添加全平台依赖:

<dependency><groupId>org.nd4j</groupId><artifactId>nd4j-cuda-7.5-platform</artifactId><version>${nd4j.version}</version></dependency>

或者

<dependency><groupId>org.nd4j</groupId><artifactId>nd4j-cuda-8.0-platform</artifactId><version>${nd4j.version}</version></dependency>

使得DL4J可以加载cuDNN,唯一需要我们做的事情就是将nd4j-cuda-7.5或者nd4j-cuda-8.0加入到我们的依赖文件中,例如:

<dependency><groupId>org.nd4j</groupId><artifactId>nd4j-cuda-7.5-platform</artifactId><version>${nd4j.version}</version></dependency>

或者

<dependency><groupId>org.nd4j</groupId><artifactId>nd4j-cuda-8.0-platform</artifactId><version>${nd4j.version}</version></dependency>

而cuDNN实际需要的库文件没有打包在里面,所以你需要去英伟达官网下载并且安装适合你平台的包:

  • NVIDIA cuDNN

注意,现在只支持cuDNN 6.0。要安装,只需将库提取到本地库使用的系统路径中找到的目录。 最简单的方法是将其与CUDA中的其他库一起放在默认目录中(/usr/local/cuda/lib64/ on Linux, /usr/local/cuda/lib/ on Mac OS X, and C:\Program Files\NVIDIA GPU Computing Toolkit\CUDA\v7.5\bin\ or C:\Program Files\NVIDIA GPU Computing Toolkit\CUDA\v8.0\bin\ on Windows).

再次提示,在默认情况下,Deeplearning4j会根据cuDNN使用速度最快的算法,但是内存使用可能会过多,导致一些奇怪的启动异常。当这种情况发生时,尝试使用这种方式来降低内存的使用量,使用NO_WORKSPACE(查看更多模式配置)来替代默认的ConvolutionLayer.AlgoMode.PREFER_FASTEST,例如:

// ...new ConvolutionLayer.Builder(h, w).cudnnAlgoMode(ConvolutionLayer.AlgoMode.NO_WORKSPACE)// ...

原文地址:https://deeplearning4j.org/cudnn


更多文档可以查看 https://github.com/sjsdfg/deeplearning4j-issues。
欢迎star

这篇关于在Deeplearning4j中使用cuDNN的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1061610

相关文章

C++中assign函数的使用

《C++中assign函数的使用》在C++标准模板库中,std::list等容器都提供了assign成员函数,它比操作符更灵活,支持多种初始化方式,下面就来介绍一下assign的用法,具有一定的参考价... 目录​1.assign的基本功能​​语法​2. 具体用法示例​​​(1) 填充n个相同值​​(2)

Spring StateMachine实现状态机使用示例详解

《SpringStateMachine实现状态机使用示例详解》本文介绍SpringStateMachine实现状态机的步骤,包括依赖导入、枚举定义、状态转移规则配置、上下文管理及服务调用示例,重点解... 目录什么是状态机使用示例什么是状态机状态机是计算机科学中的​​核心建模工具​​,用于描述对象在其生命

使用Python删除Excel中的行列和单元格示例详解

《使用Python删除Excel中的行列和单元格示例详解》在处理Excel数据时,删除不需要的行、列或单元格是一项常见且必要的操作,本文将使用Python脚本实现对Excel表格的高效自动化处理,感兴... 目录开发环境准备使用 python 删除 Excphpel 表格中的行删除特定行删除空白行删除含指定

深入理解Go语言中二维切片的使用

《深入理解Go语言中二维切片的使用》本文深入讲解了Go语言中二维切片的概念与应用,用于表示矩阵、表格等二维数据结构,文中通过示例代码介绍的非常详细,需要的朋友们下面随着小编来一起学习学习吧... 目录引言二维切片的基本概念定义创建二维切片二维切片的操作访问元素修改元素遍历二维切片二维切片的动态调整追加行动态

prometheus如何使用pushgateway监控网路丢包

《prometheus如何使用pushgateway监控网路丢包》:本文主要介绍prometheus如何使用pushgateway监控网路丢包问题,具有很好的参考价值,希望对大家有所帮助,如有错误... 目录监控网路丢包脚本数据图表总结监控网路丢包脚本[root@gtcq-gt-monitor-prome

Python通用唯一标识符模块uuid使用案例详解

《Python通用唯一标识符模块uuid使用案例详解》Pythonuuid模块用于生成128位全局唯一标识符,支持UUID1-5版本,适用于分布式系统、数据库主键等场景,需注意隐私、碰撞概率及存储优... 目录简介核心功能1. UUID版本2. UUID属性3. 命名空间使用场景1. 生成唯一标识符2. 数

SpringBoot中如何使用Assert进行断言校验

《SpringBoot中如何使用Assert进行断言校验》Java提供了内置的assert机制,而Spring框架也提供了更强大的Assert工具类来帮助开发者进行参数校验和状态检查,下... 目录前言一、Java 原生assert简介1.1 使用方式1.2 示例代码1.3 优缺点分析二、Spring Fr

Android kotlin中 Channel 和 Flow 的区别和选择使用场景分析

《Androidkotlin中Channel和Flow的区别和选择使用场景分析》Kotlin协程中,Flow是冷数据流,按需触发,适合响应式数据处理;Channel是热数据流,持续发送,支持... 目录一、基本概念界定FlowChannel二、核心特性对比数据生产触发条件生产与消费的关系背压处理机制生命周期

java使用protobuf-maven-plugin的插件编译proto文件详解

《java使用protobuf-maven-plugin的插件编译proto文件详解》:本文主要介绍java使用protobuf-maven-plugin的插件编译proto文件,具有很好的参考价... 目录protobuf文件作为数据传输和存储的协议主要介绍在Java使用maven编译proto文件的插件

SpringBoot线程池配置使用示例详解

《SpringBoot线程池配置使用示例详解》SpringBoot集成@Async注解,支持线程池参数配置(核心数、队列容量、拒绝策略等)及生命周期管理,结合监控与任务装饰器,提升异步处理效率与系统... 目录一、核心特性二、添加依赖三、参数详解四、配置线程池五、应用实践代码说明拒绝策略(Rejected