||
以下是对我下载数据方法的记录,供其他研究者参考学习。
由于需要使用再分析数据,看了很多的博客会使用到wget或python爬虫的方法,NASA有些数据网站也会推荐这两种办法的具体操作步骤如下所示的链接
NASA的GES DISC网站里的方法:https://disc.gsfc.nasa.gov/data-access(供网友参考),之前也尝试过这些方法,但是我探索到一种新的数据下载方法,下载速度会更快。
我相信经常使用遥感数据的研究者对于EARTHDATA(https://earthdata.nasa.gov)这个网站不是很陌生。(PS:没有这个网站账号的,需要先注册一个账号)
例如你需要下载MERRA-2 const_2d_ctm_Nx: Constant Model Parameters for Usage by CTM 0.625 x 0.5 degree V5.12.4 (M2C0NXCTM 5.12.4) 这个数据,你只需要把后面的short name (M2C0NXCTM 5.12.4) 输入到https://earthdata.nasa.gov网站中
然后就会看到搜索结果如下如所示:
点击红色框的链接---->就进入到下面的网页
点击上图中的红色框中的Earthdata search的链接,即会得到下图的数据结果:(其实可以直接在下图的数据搜索页面内找数据)
点击所筛选得到的数据,就会得到下图所示的数据。由于例子数据只有一组数据(具体为什么只有一组数据在此不做深究),如果数据很多的话,可以进入下图红色方框进行筛选,选取适合自己研究时间段内的数据。
当选择好数据后,点击Download all---->(进入下一个网页)点击Done---点击Download data
就会进入下个网页,标记有下载数据的URL和下载脚本文件的链接;如下图所示:
而在本处,我们选择Download data links .然后把你所要的所有数据的URL都可以获取到。存储为一个txt 文档。
接下来我们更换一个很神奇的浏览器火狐浏览器(5.*)不能是6.*版本的;有需求的自行百度。以前我都是使用dos命令窗的下载数据(使用的就是上图中所提供的的脚本文件),极慢!!!一般都是~200 kbs/s
现在则使用DownThemall 插件下载数据,运行速度可以达到2~5 MB/s 。以现在我的正在下载的数据为例,展示DownThemall的使用。如下图所示
很明显的看到这个数据的下载比脚本文件,以及wget的下载速度快很多(通过我的实验得出的结论)
-------后补信息-----
我试着搜索了一些downthemall (https://www.appinn.com/downthemall-4-is-back/),会看到很多关于此插件的使用方法。
当然此方法可以迁移到很多数据的下载中去。
好记性不如一个笔记本!!!
End
Archiver|手机版|科学网 ( 京ICP备07017567号-12 )
GMT+8, 2024-12-22 00:57
Powered by ScienceNet.cn
Copyright © 2007- 中国科学报社