肖雄新
再分析数据的下载(GLDAS和MERRA2)
2019-10-29 19:53
阅读:14777
标签:再分析数据, 数据下载, 科研学习

以下是对我下载数据方法的记录,供其他研究者参考学习。


由于需要使用再分析数据,看了很多的博客会使用到wget或python爬虫的方法,NASA有些数据网站也会推荐这两种办法的具体操作步骤如下所示的链接

NASA的GES DISC网站里的方法:https://disc.gsfc.nasa.gov/data-access(供网友参考),之前也尝试过这些方法,但是我探索到一种新的数据下载方法,下载速度会更快。


我相信经常使用遥感数据的研究者对于EARTHDATA(https://earthdata.nasa.gov)这个网站不是很陌生。(PS:没有这个网站账号的,需要先注册一个账号)

例如你需要下载MERRA-2 const_2d_ctm_Nx: Constant Model Parameters for Usage by CTM 0.625 x 0.5 degree V5.12.4 (M2C0NXCTM 5.12.4) 这个数据,你只需要把后面的short name (M2C0NXCTM 5.12.4) 输入到https://earthdata.nasa.gov网站中

image.png


然后就会看到搜索结果如下如所示:
image.png


点击红色框的链接---->就进入到下面的网页

image.png

点击上图中的红色框中的Earthdata search的链接,即会得到下图的数据结果:(其实可以直接在下图的数据搜索页面内找数据)

image.png

点击所筛选得到的数据,就会得到下图所示的数据。由于例子数据只有一组数据(具体为什么只有一组数据在此不做深究),如果数据很多的话,可以进入下图红色方框进行筛选,选取适合自己研究时间段内的数据。

image.png

当选择好数据后,点击Download all---->(进入下一个网页)点击Done---点击Download data

就会进入下个网页,标记有下载数据的URL和下载脚本文件的链接;如下图所示:

image.png

而在本处,我们选择Download data links .然后把你所要的所有数据的URL都可以获取到。存储为一个txt 文档。


接下来我们更换一个很神奇的浏览器火狐浏览器(5.*)不能是6.*版本的;有需求的自行百度。以前我都是使用dos命令窗的下载数据(使用的就是上图中所提供的的脚本文件),极慢!!!一般都是~200 kbs/s  


现在则使用DownThemall 插件下载数据,运行速度可以达到2~5 MB/s 。以现在我的正在下载的数据为例,展示DownThemall的使用。如下图所示

image.png


很明显的看到这个数据的下载比脚本文件,以及wget的下载速度快很多(通过我的实验得出的结论)

-------后补信息-----

我试着搜索了一些downthemall (https://www.appinn.com/downthemall-4-is-back/),会看到很多关于此插件的使用方法。


当然此方法可以迁移到很多数据的下载中去。

好记性不如一个笔记本!!!


End

转载本文请联系原作者获取授权,同时请注明本文来自肖雄新科学网博客。

链接地址:https://wap.sciencenet.cn/blog-1109904-1203964.html?mobile=1

收藏

分享到:

当前推荐数:0
推荐到博客首页
网友评论0 条评论
确定删除指定的回复吗?
确定删除本博文吗?