Python批量下载ERA5数据

2023-11-07 03:28
文章标签 python 数据 批量 下载 era5

本文主要是介绍Python批量下载ERA5数据,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1. ERA5数据简介

ERA5是第五代ECMWF大气再分析全球气候数据(ECMWF),该数据集的第一部分现在可以公开使用(1979年到3个月内)。ERA5数据提供每小时的大气、陆地和海洋气候变量的估计值,地球数据精确到了30km网格,包括了137层的大气数据。
网址:ERA-5

2. 下载数据的准备工作

(1) 注册CDS账号

可使用邮箱直接注册,注册网址如下:https://cds.climate.copernicus.eu/user/register?destination=%2F%23!%2Fhome
注册完后查看自己的邮箱,会给个链接设置密码。

(2) 获取API key

  • 注册完成后,进行登录,点击右上角的用户,查看用户信息,找到下图框出的API key:
    在这里插入图片描述

(3) 创建".cdsapirc"文件

  • 在路径 “C:\Users\用户名” 底下创建 “.cdsapirc” 文件(打开文本文档,输入下面内容后,另存为,选择文件类型-”所有文件“,文件名: “.cdsapirc”),在 “.cdsapirc” 文件输入的内容如下:
url: https://cds.climate.copernicus.eu/api/v2
key: UID:API Key

其中UID替换为上图红框给出的UID的数字,API key也替换为红框框住部分的数字。

(4) 安装cdsapi第三方库

pip install cdsapi

在这里插入图片描述

3. 批量下载

以下载ERA5-Land hourly data from 1950 to present中的数据举例:

  • 选择自己需要的数据、年份、月份、天、时间、以及空间位置

在这里插入图片描述

  • 然后下滑到最后,点击“Show API request” 选项,得到下面所示的图,其中“Terms of use”是一些条例,得先点击同意,才能下载。
    在这里插入图片描述
  • 将上述代码复制到一个.py文件下,然后Python运行,即可下载再分析数据。

4. 批量下载数据

  • 例如,要下载 “ERA5 hourly data on single levels from 1979 to present” 数据集中1979年到2020年每个月的全球2 m温度再分析数据,并保存为nc文件。
import cdsapi
import calendarc = cdsapi.Client()  # 创建用户# 数据信息字典
dic = {'product_type': 'reanalysis',  # 产品类型'format': 'netcdf',  # 数据格式'variable': '2m_temperature',  # 变量名称'year': '',  # 年,设为空'month': '',  # 月,设为空'day': [],  # 日,设为空'time': [  # 小时'00:00', '01:00', '02:00', '03:00', '04:00', '05:00','06:00', '07:00', '08:00', '09:00', '10:00', '11:00','12:00', '13:00', '14:00', '15:00', '16:00', '17:00','18:00', '19:00', '20:00', '21:00', '22:00', '23:00']
}# 通过循环批量下载1979年到2020年所有月份数据
for y in range(1979, 2021):  # 遍历年for m in range(1, 13):  # 遍历月day_num = calendar.monthrange(y, m)[1]  # 根据年月,获取当月日数# 将年、月、日更新至字典中dic['year'] = str(y)dic['month'] = str(m).zfill(2)dic['day'] = [str(d).zfill(2) for d in range(1, day_num + 1)]filename = 'E:\\Data\\ERA5\\1979-2020\\2m_temperature\\' + str(y) + str(m).zfill(2) + '.nc'  # 文件存储路径c.retrieve('reanalysis-era5-single-levels', dic, filename)  # 下载数据

5. 可使用IDM加速下载

详情请参考:https://blog.csdn.net/qq_39373443/article/details/118086241

这篇关于Python批量下载ERA5数据的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/360932

相关文章

Python使用自带的base64库进行base64编码和解码

《Python使用自带的base64库进行base64编码和解码》在Python中,处理数据的编码和解码是数据传输和存储中非常普遍的需求,其中,Base64是一种常用的编码方案,本文我将详细介绍如何使... 目录引言使用python的base64库进行编码和解码编码函数解码函数Base64编码的应用场景注意

Java实现文件图片的预览和下载功能

《Java实现文件图片的预览和下载功能》这篇文章主要为大家详细介绍了如何使用Java实现文件图片的预览和下载功能,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... Java实现文件(图片)的预览和下载 @ApiOperation("访问文件") @GetMapping("

Python基于wxPython和FFmpeg开发一个视频标签工具

《Python基于wxPython和FFmpeg开发一个视频标签工具》在当今数字媒体时代,视频内容的管理和标记变得越来越重要,无论是研究人员需要对实验视频进行时间点标记,还是个人用户希望对家庭视频进行... 目录引言1. 应用概述2. 技术栈分析2.1 核心库和模块2.2 wxpython作为GUI选择的优

Java利用JSONPath操作JSON数据的技术指南

《Java利用JSONPath操作JSON数据的技术指南》JSONPath是一种强大的工具,用于查询和操作JSON数据,类似于SQL的语法,它为处理复杂的JSON数据结构提供了简单且高效... 目录1、简述2、什么是 jsONPath?3、Java 示例3.1 基本查询3.2 过滤查询3.3 递归搜索3.4

Python如何使用__slots__实现节省内存和性能优化

《Python如何使用__slots__实现节省内存和性能优化》你有想过,一个小小的__slots__能让你的Python类内存消耗直接减半吗,没错,今天咱们要聊的就是这个让人眼前一亮的技巧,感兴趣的... 目录背景:内存吃得满满的类__slots__:你的内存管理小助手举个大概的例子:看看效果如何?1.

Python+PyQt5实现多屏幕协同播放功能

《Python+PyQt5实现多屏幕协同播放功能》在现代会议展示、数字广告、展览展示等场景中,多屏幕协同播放已成为刚需,下面我们就来看看如何利用Python和PyQt5开发一套功能强大的跨屏播控系统吧... 目录一、项目概述:突破传统播放限制二、核心技术解析2.1 多屏管理机制2.2 播放引擎设计2.3 专

Python中随机休眠技术原理与应用详解

《Python中随机休眠技术原理与应用详解》在编程中,让程序暂停执行特定时间是常见需求,当需要引入不确定性时,随机休眠就成为关键技巧,下面我们就来看看Python中随机休眠技术的具体实现与应用吧... 目录引言一、实现原理与基础方法1.1 核心函数解析1.2 基础实现模板1.3 整数版实现二、典型应用场景2

Python实现无痛修改第三方库源码的方法详解

《Python实现无痛修改第三方库源码的方法详解》很多时候,我们下载的第三方库是不会有需求不满足的情况,但也有极少的情况,第三方库没有兼顾到需求,本文将介绍几个修改源码的操作,大家可以根据需求进行选择... 目录需求不符合模拟示例 1. 修改源文件2. 继承修改3. 猴子补丁4. 追踪局部变量需求不符合很

MySQL大表数据的分区与分库分表的实现

《MySQL大表数据的分区与分库分表的实现》数据库的分区和分库分表是两种常用的技术方案,本文主要介绍了MySQL大表数据的分区与分库分表的实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有... 目录1. mysql大表数据的分区1.1 什么是分区?1.2 分区的类型1.3 分区的优点1.4 分

Mysql删除几亿条数据表中的部分数据的方法实现

《Mysql删除几亿条数据表中的部分数据的方法实现》在MySQL中删除一个大表中的数据时,需要特别注意操作的性能和对系统的影响,本文主要介绍了Mysql删除几亿条数据表中的部分数据的方法实现,具有一定... 目录1、需求2、方案1. 使用 DELETE 语句分批删除2. 使用 INPLACE ALTER T