使用python3批量下载rbsp数据

最新推荐文章于 2022-04-24 15:41:50 发布

原创

最新推荐文章于 2022-04-24 15:41:50 发布 · 473 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#python

本文介绍了如何使用Python3从网站https://www.rbsp-ect.lanl.gov/data_pub/rbspa/批量下载CDF格式的数据文件。通过解析目录信息，程序将文件保存到本地硬盘，详细解释了算法、代码实现、使用方法和运行效果。

1. 原始网站

https://www.rbsp-ect.lanl.gov/data_pub/rbspa/

2. 算法说明

进入需要下载的数据所在的目录，获取并解析该目录下的信息，解析出cdf文件名后，将cdf文件下载到内存中，随后保存到硬盘中。程序使用python3实现。

3. 程序代码

#!/bin/python3
# get the rbsp data
# writen by Liangjin Song on 20191219
import sys
import requests
from pathlib import Path

# the url containing the cdf files
url="https://www.rbsp-ect.lanl.gov/data_pub/rbspa/ECT/level2/2016/"
# local path to save the cdf file
path="/home/liangjin/Downloads/test/"

def main():
    re=requests.get(url)
    html=re.text
    cdfs=resolve_cdf(html)

    ncdf=len(cdfs)