earthdata.nasa 各种对地观测及再分析资料 python批下载方法(附代码)

最新推荐文章于 2025-03-29 09:19:21 发布

Slytherin_Cat

最新推荐文章于 2025-03-29 09:19:21 发布

阅读量3.4k

点赞数 5

分类专栏：数据获取文章标签： python

本文链接：https://blog.youkuaiyun.com/Slytherin_Cat/article/details/104501933

版权

本文介绍如何使用Python批量下载NASA earthdata网站上的遥感数据。通常，该网站的数据下载需要注册账户，并且在成功请求后会提供下载链接列表。通过编写Python爬虫，可以方便地循环调用这些链接进行下载。对于那些不提供直接URL列表的网站，可能需要解析网页源码或根据命名规则生成下载链接。此外，讨论了无登录要求的网站如何利用迅雷或Python的requests模块进行下载。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

美国宇航局的earthdata数据网站下发布了各式各样的数据集，公众可免费下载
(https://search.earthdata.nasa.gov/search)
在这里插入图片描述然而当我们需要大批量下载数据时，手动下载的方式就显得捉襟见肘了
不同的数据集下给出了不同的批获取方式，有的需要Linux系统支持，有的给出了C++的下载脚本等等。
那么当然这些获取方式对我们做遥感的就有点呵呵呵。。。
下面给出了一个简单的python爬虫，只要简单的python库支持就可以打遍全网数据~

一般来说，在这个网站上下载数据，当请求下载成功以后，它们会给出url下载链接列表，大概就是下图这个样子吧，也不一定都是这样。
在这里插入图片描述
下载出来的就是放在txt这样文件中的一条条下载链接
对了注意在这上面下载数据是需要注册账户的
然后就通过python循环，一条条调取下载就行了~

# -*- coding: utf-8 -*-
import requests # get the requsts library from https://github.com/requests/requests
import re # 主要是可能会需要进行文件名字符串的匹配
 
 
# overriding requests.Session.rebuild_auth to mantain headers when redirected
# 一个自定义的类来辅助下载
class SessionWithHeaderRedirection(requests.Session):
 
    AUTH_HOST = 'urs.earthdata.nasa.gov'
 
    def __init__(self

最低0.47元/天解锁文章