以下是一个使用 requests
和 os
库编写的 Python 脚本,它可以下载指定的文件夹及其子目录,保持文件夹结构。这个脚本假设你已经用 python -m http.server
启动了 HTTP 服务器,且文件可以通过 HTTP 请求获取。
脚本步骤:
- 通过 HTTP 请求获取目录内容。
- 如果内容是文件,则下载文件。
- 如果内容是目录,则递归进入该目录,保持文件夹结构。
- 使用
os.makedirs
保持文件夹结构。
示例代码:http_folder_downloader.py
import os
import requests
from urllib.parse import urljoin, urlparse
from pathlib import Path
def download_file(url, dest_folder):
# 获取文件名
local_filename = os.path.join(dest_folder, os.path.basename(urlparse(url).path))
with requests.get(url, stream=True) as r:
r.raise_for_status()
with open(local_filename, 'wb') as f:
for chunk in r.iter_content(chunk_size=8192):
f.write(chunk)
print(f"Downloaded file: {local_filename}")
return local_filename
def download_folder(url, dest_folder):
# 获取目录内容
response = r