白嫖google-GPU: 如何使用colab

2024-06-08 00:32
文章标签 使用 gpu google colab

本文主要是介绍白嫖google-GPU: 如何使用colab,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Google Colab

使用Google Colab,我们可以免费获取每次12个小时的gpu使用,如果使用时间预计超过12个小时,那么我么需要设置断点保存。下面是google colab的使用方法。

注意: 不要长时间占用,否则谷歌会回收你的使用资格。用一段时间之后要休息一段时间再使用

1. 注册谷歌账号

当然注册之前首先要确保你能访问到谷歌。具体实现自己处理

2. 访问谷歌云端硬盘并创建资源

  1. 在谷歌drive中新建文件夹,可以命名为colab。

在这里插入图片描述

  1. 上传资源并挂载硬盘到colab

  2. 进入到colab文件夹下,右键→上传文件夹:将准备好的文件上传。最好是压缩文件,这样速度相对会快一些

  3. 在colab文件夹下新建ipynb文件,名字随意。然后进入文件进行配置
    在这里插入图片描述

  4. 连接后如下:

这个磁盘空间好像是随机的,但是起始占用好像都是38左右

在这里插入图片描述

  1. 修改笔记本设置如下:
    在这里插入图片描述

设置点进去之后你可以选择GPU或者TPU

  1. 挂载硬盘到colab:我们可以在colab中访问google drive上的内容,

你可以把.ipynb 看成linux命令行,使用系统命令时,前面加 %,调用程序,前面加!

在这里插入图片描述

现在的话已经不需要下面这些手动挂载云盘到服务器的步骤了。硬盘默认已挂载,可以直接使用,

############# 以下操作已经不需要 #################

import os
from google.colab import drive
drive.mount("/content/drive")

运行后,会有如下显示:

在这里插入图片描述

点击后面的链接,谷歌账号登录,进去之后同意,然后复制验证码,输入到这个框中,就可以创建完成了

############# 以上操作已经不需要 ####################

3. 文件夹结构查看

.ipybn 文件界面的左边,会有文件夹目录

刚进去时我们是在这个文件夹,点击文件夹图标。
在这里插入图片描述
在这里插入图片描述

点击之后可以看到服务器端的文件结构

3. 创建自己的工程

1. 数据文件拷贝与工程创建

  1. 将我们的数据集打包压缩,上传到云端硬盘,我的压缩文件在下面,没有展示出来

在这里插入图片描述

  1. 在服务器端创建工程文件夹:注意不要创建在云端硬盘所在的文件夹( drive/MyDrive )下。

    %mkdir /home/yolov5
    
  2. 将压缩文件copy到自己想使用的工程文件夹,

    %cp /content/drive/MyDrive/Colab/VOC2007.zip /home/yolov5/VOC2007.zip
    %cd /home/yolov5
    !git colne https://github.com/xxx/yolov5.git
    
  3. 解压数据文件到指定文件夹下。

2. 小技巧

  1. 我们在笔记本( .ipynb)中写的命令操作会保存,写好之后,下次直接进入笔记本直接执行自己的操作就可以了。

  2. 普通用户服务器最多连续使用12小时,升级到pro会得到更强的算例以及更长的操作时间,大概24小时吧。时间到了服务器中你的东西都会被清空,只保留你的云端硬盘中的文件。

  3. 系统会检测你是否离开,长时间没有操作,就会认定你离开,会提示你验证一下。如果没有验证,认定离开,会停掉你的当前工作。使用期间注意时不时的去看一下。在这里插入图片描述

  4. 你的数据文件也可以放在colab中,将我们要使用的数据或者代码事先打包压缩,然后在本地创建一个文件夹,将打包好的内容复制到这个文件夹下,解压后使用。这样就会有速度上的提高。下次使用时copy一下就可以了。copy的速度还是很快的

  5. 代码中设置你的训练结果保存到谷歌云端硬盘中。云端硬盘在服务器中的路径是: /content/drive/MyDrive/Colab .这样你就不用害怕被清空了。

  6. 离开比较频繁或者连续使用频繁,谷歌会暂时停掉你的使用。对每个用户都有设定的使用时间,所以尽量不要连续使用或者频繁离开状态,被停掉使用之后会有几天不能使用。

  7. 模型训练的代码写一份专门针对cloab使用的代码,主要就是路径修改一下,放在github中,把git命令以及运行命令写在笔记本文件中,下次微调之后就可以直接使用了。

后续使用

你可以通过终端命令执行你的文件夹中的代码,也可以再ipynb文件中重写你的方法,看情况使用。

这篇关于白嫖google-GPU: 如何使用colab的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1040737

相关文章

C++使用栈实现括号匹配的代码详解

《C++使用栈实现括号匹配的代码详解》在编程中,括号匹配是一个常见问题,尤其是在处理数学表达式、编译器解析等任务时,栈是一种非常适合处理此类问题的数据结构,能够精确地管理括号的匹配问题,本文将通过C+... 目录引言问题描述代码讲解代码解析栈的状态表示测试总结引言在编程中,括号匹配是一个常见问题,尤其是在

Java中String字符串使用避坑指南

《Java中String字符串使用避坑指南》Java中的String字符串是我们日常编程中用得最多的类之一,看似简单的String使用,却隐藏着不少“坑”,如果不注意,可能会导致性能问题、意外的错误容... 目录8个避坑点如下:1. 字符串的不可变性:每次修改都创建新对象2. 使用 == 比较字符串,陷阱满

Python使用国内镜像加速pip安装的方法讲解

《Python使用国内镜像加速pip安装的方法讲解》在Python开发中,pip是一个非常重要的工具,用于安装和管理Python的第三方库,然而,在国内使用pip安装依赖时,往往会因为网络问题而导致速... 目录一、pip 工具简介1. 什么是 pip?2. 什么是 -i 参数?二、国内镜像源的选择三、如何

使用C++实现链表元素的反转

《使用C++实现链表元素的反转》反转链表是链表操作中一个经典的问题,也是面试中常见的考题,本文将从思路到实现一步步地讲解如何实现链表的反转,帮助初学者理解这一操作,我们将使用C++代码演示具体实现,同... 目录问题定义思路分析代码实现带头节点的链表代码讲解其他实现方式时间和空间复杂度分析总结问题定义给定

Linux使用nload监控网络流量的方法

《Linux使用nload监控网络流量的方法》Linux中的nload命令是一个用于实时监控网络流量的工具,它提供了传入和传出流量的可视化表示,帮助用户一目了然地了解网络活动,本文给大家介绍了Linu... 目录简介安装示例用法基础用法指定网络接口限制显示特定流量类型指定刷新率设置流量速率的显示单位监控多个

JavaScript中的reduce方法执行过程、使用场景及进阶用法

《JavaScript中的reduce方法执行过程、使用场景及进阶用法》:本文主要介绍JavaScript中的reduce方法执行过程、使用场景及进阶用法的相关资料,reduce是JavaScri... 目录1. 什么是reduce2. reduce语法2.1 语法2.2 参数说明3. reduce执行过程

如何使用Java实现请求deepseek

《如何使用Java实现请求deepseek》这篇文章主要为大家详细介绍了如何使用Java实现请求deepseek功能,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录1.deepseek的api创建2.Java实现请求deepseek2.1 pom文件2.2 json转化文件2.2

python使用fastapi实现多语言国际化的操作指南

《python使用fastapi实现多语言国际化的操作指南》本文介绍了使用Python和FastAPI实现多语言国际化的操作指南,包括多语言架构技术栈、翻译管理、前端本地化、语言切换机制以及常见陷阱和... 目录多语言国际化实现指南项目多语言架构技术栈目录结构翻译工作流1. 翻译数据存储2. 翻译生成脚本

C++ Primer 多维数组的使用

《C++Primer多维数组的使用》本文主要介绍了多维数组在C++语言中的定义、初始化、下标引用以及使用范围for语句处理多维数组的方法,具有一定的参考价值,感兴趣的可以了解一下... 目录多维数组多维数组的初始化多维数组的下标引用使用范围for语句处理多维数组指针和多维数组多维数组严格来说,C++语言没

在 Spring Boot 中使用 @Autowired和 @Bean注解的示例详解

《在SpringBoot中使用@Autowired和@Bean注解的示例详解》本文通过一个示例演示了如何在SpringBoot中使用@Autowired和@Bean注解进行依赖注入和Bean... 目录在 Spring Boot 中使用 @Autowired 和 @Bean 注解示例背景1. 定义 Stud