python的urllib.request.urlretrieve下载显示进度

最新推荐文章于 2023-08-18 10:30:12 发布
原创 最新推荐文章于 2023-08-18 10:30:12 发布 · 5.2k 阅读 · 8 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#python

本文介绍了一种使用Python实现下载进度条的方法，通过定义进度显示函数和回调函数，结合urllib.request.urlretrieve进行文件下载，实时展示下载进度。 
from urllib import request, error
import sys


def progressbar(cur, total=100):
    percent = '{:.2%}'.format(cur / total)
    sys.stdout.write(
最低0.47元/天 解锁文章
【python中级】 urllib.request的urlretrieve方法根据图片url下载图片
jn10010537的博客
11-02 1634
【python中级】 urllib.request的urlretrieve方法根据图片url下载图片1、背景2、代码 1、背景 python的requests包也可以请求url下载图片，详见博客： 【python中级】 requests根据图片url下载图片 https://jn10010537.blog.csdn.net/article/details/120191621 本博客使用的是urllib包请求url下载图片，即： urllib.request模块提供的urlretrieve()方法，urlre
显示下载进度 urllib.request.urlretrieve
老马的代码记录本
02-10 998
import os from six.moves import urllib import sys DATA_URL = 'http://www.python.org/ftp/python/2.7.5/Python-2.7.5.tar.bz2' filename = DATA_URL.split('/')[-1] def _progress(block_num, block_size, total_size): '''回调函数 @block_num: 已经下载的数据块 .
RPA手把手——urllib.request.urlretrieve（）实现文件下载进度查看
weixin_44447687的博客
08-14 2363
艺赛旗 RPA9.0全新首发免费下载 点击下载 http://www.i-search.com.cn/index.html?from=line1 函数参数说明 urllib.request.urlretrieve(url, filename=None, reporthook=None, data=None) url: 文件下载链接 filename: 文件下载路径（如果参数未指定，urllib 会...
python_urllib.request.urlretrieve使用方法
檬柠wan
06-27 3671
1、方法一（显示百分比） import urllib.request import sys import os def File_plus(): ''' 文件储存位置 判断文件是否存在，不存在则创建 ''' folder_path = "C:/Users/Admin/Desktop/download/" if not os.path.exists(folder_path): os.makedirs(folder_path) ret
python《文件下载进度显示》 urllib.request.urlretrieve(self.__path,self.__name,jindu)
weixin_33895604的博客
10-29 271
#coding=utf-8import threadingimport os,sysimport urllib.request as ur#显示调用函数def jindu(a,b,size): os.system('cls') per=100*a*b/size per=round(per, 2) if per>100: per=100 sys.st...
python下载文件进度图表_Python获取下载速度并显示进度条
weixin_39645268的博客
11-24 253
#!/usr/bin/python3# -*- coding:utf-8 -*-import sysimport timefrom urllib import request'''urllib.urlretrieve 的回调函数：def callbackfunc(blocknum, blocksize, totalsize):@blocknum: 已经下载的数据块@blocksize: 数据块的...
Python urllib.request对象案例解析
12-17
- **案例3**使用了`urlretrieve()`函数，这是一个方便的内置方法，可以直接从URL下载文件到本地。 3. **其他模块**： - `urllib.error`处理HTTP请求过程中可能出现的异常，如HTTPError。 - `urllib.parse`模块...
python3 显示下载进度
sikuquanshu123的专栏
02-17 1045
import urllib def download(imagelist,local): x=1 for i in imagelist: socket.setdefaulttimeout(1000) urllib.request.urlretrieve(i,local+'%s.jpg'%x,schedule) x+=1
urllib.request.urlretrieve（）下载资源到本地
guoqingru0311的博客
08-18 388
urllib.request.urlretrieve（）下载资源到本地
python中urllib.urlretrieve()实现进度条显示效果
weixin_39790282的博客
05-13 2963
Python urllib的urlretrieve()函数解析 urllib模块提供的urlretrieve()函数。urlretrieve()方法直接将远程数据下载到本地。 urlretrieve(url, filename=None, reporthook=None, data=None) 参数filename指定了保存本地路径（如果参数未指定，urllib会生成一个临时文件保存数据。） 参数...
解决使用urllib.request.urlretrieve()下载批量文件，下载文件不完全的问题且避免下载时长过长陷入死循环
python学习者Joy.xiong的博客
03-09 5318
结合在网上找到的解决办法，成功解决了在使用urlretrieve下载文件的过程中所遇到了一些问题：urlretrieve下载文件不完全且下载时长过长陷入死循环 参考地址1、参考地址2 # -*- coding: utf-8 -*- import pathlib import re import socket import time import urllib.request url = "ht...
urllib.request.urlretrieve()函数下载文件卡死解决办法
snailzzw的博客
11-07 4383
urllib.request.urlretrieve()函数下载文件卡死解决办法
urllib.request.urlretrieve()用于下载制定url内容到本地
热门推荐
qq_21856335的博客
07-07 1万+
函数：urllib.urlretrieve(url[, filename[, reporthook[, data]]]) 参数说明： url：外部或者本地url filename：指定了保存到本地的路径（如果未指定该参数，urllib会生成一个临时文件来保存数据）； reporthook：是一个回调函数，当连接上服务器、以及相应的数据块传输完毕的时候会触发该回调。我们可以利用这个回调函数来显示当前...
下载！ urllib.request.urlretrieve用于下载链接URL的内容到本地filepath里面，里面的回调参数可查看进度
zz2230633069的博客
07-30 3615
python3.x 版本将urllib与urllib2合并为urllib urllib is a package that collects several modules for working with URLs: urllib.request for opening and reading URLs urllib.error containing the exceptions rai...
Python urllib的urlretrieve()函数解析
qiqiaiairen的博客
10-26 5751
urllib模块提供的urlretrieve()函数。urlretrieve()方法直接将远程数据下载到本地。 urlretrieve(url, filename=None, reporthook=None, data=None) 参数filename指定了保存本地路径（如果参数未指定，urllib会生成一个临时文件保存数据。）参数reporthook是一个回调函数，当连接上服务器、以
urllib.request.urlretrieve()函数
weixin_41999383的博客
04-08 725
https://blog.csdn.net/pursuit_zhangyu/article/details/80556275
爬虫-urllib.request下载文件函数urlretrieve()
suxiaorui的博客
04-26 2706
下载文件函数urlretrieve() 作用：自动的将求请地址得到的响应体保存到指定文件中 函数原型：urlretrieve(url, filename=None, reporthook=None, data=None) 参数含义： url：资源地址 filename：文件本地保存路径 reporthook：回调函数，每下载一块数据到本地，都会调用此函数。reporthook(bloc...
python turtle代码示例-Python turtle.left方法代码示例
weixin_39673184的博客
11-11 3057
本文整理汇总了Python中turtle.left方法的典型用法代码示例。如果您正苦于以下问题：Python turtle.left方法的具体用法？Python turtle.left怎么用？Python turtle.left使用的例子？那么恭喜您, 这里精选的方法代码示例或许可以为您提供帮助。您也可以进一步了解该方法所在模块turtle的用法示例。在下文中一共展示了turtle.left方法的...
urllib.request.urlretrieve
最新发布
10-18
<think>在回答用户关于`urllib.request.urlretrieve`的问题时，我需要结合引用内容，并提供全面的信息。用户明确要求使用方法、功能、注意事项等。根据引用[1]，这是一个简单的示例，展示了如何导入模块、指定URL和文件名，然后调用函数下载图片。引用[2]说明`urllib`是内置库，提到了`urlopen`和`urlretrieve`两个主要函数。引用[3]提到了可能遇到的403错误及其原因，引用[4]则显示了一个错误示例。 首先，我会介绍`urlretrieve`的基本功能：它用于将远程文件直接下载到本地。然后，详细说明其参数：第一个是URL，第二个是本地路径（可选），以及可选的回调函数用于显示进度等。接着，通过代码示例演示具体用法。 注意事项部分特别重要。引用[3]提到403错误，我需要解释原因和解决方法，例如设置User-Agent头模拟浏览器访问。此外，还需补充其他常见问题，如下载大文件时内存效率高、不支持认证机制、可能被反爬策略拦截等。最后，强调该函数已被标记为“legacy”，建议在新代码中使用更现代的替代方案如`requests`库。 为了确保回答可靠，我会基于标准库文档和常见实践扩展引用内容，例如详细说明回调函数参数和错误处理方法。相关问题设计需围绕函数使用场景、错误排查和替代方案展开。 </think>以下是关于`urllib.request.urlretrieve()`的详细指南及相关介绍，结合引用内容进行说明： ### 一、功能与用途 `urllib.request.urlretrieve()`是Python标准库中用于**直接下载网络资源到本地文件**的函数，主要特点： 1. **简单高效**：无需手动处理网络请求和文件写入流程 2. **适用场景**：下载图片、文档、媒体文件等静态资源 3. **内存友好**：大文件下载时不会占用过多内存（流式写入） ### 二、基本语法 ```python import urllib.request urllib.request.urlretrieve(url, filename=None, reporthook=None, data=None) ``` - **`url`**：资源地址（字符串，必需） - **`filename`**：本地保存路径（字符串，可选） - 缺省时生成临时文件，返回临时文件路径 - **`reporthook`**：进度回调函数（用于显示下载进度） - **`data`**：POST请求时发送的数据（字典或字节流） ### 三、使用示例 ```python import urllib.request # 示例1：基本下载（引用[1]示例） url = 'https://example.com/image.jpg' urllib.request.urlretrieve(url, "local_image.jpg") # 示例2：获取临时文件路径 temp_file, headers = urllib.request.urlretrieve(url) print("临时文件路径:", temp_file) ``` ### 四、注意事项 1. **403 Forbidden错误处理**（引用[3]） - **原因**：服务器检测到爬虫行为（缺少User-Agent/Cookie等） - **解决方案**：添加请求头模拟浏览器访问 ```python opener = urllib.request.build_opener() opener.addheaders = [('User-Agent', 'Mozilla/5.0')] urllib.request.install_opener(opener) # 全局生效 urllib.request.urlretrieve(url, "file.png") ``` 2. **进度监控** ```python def progress_hook(count, block_size, total_size): percent = int(count * block_size * 100 / total_size) print(f"下载进度: {percent}%") urllib.request.urlretrieve(url, "file.zip", reporthook=progress_hook) ``` 3. **遗留状态警告** - 官方文档标注为"legacy"，可能在将来版本弃用 - 替代方案：使用更灵活的`requests`库或`urlopen()+shutil.copyfileobj()` ```python import requests response = requests.get(url) with open("file.pdf", "wb") as f: f.write(response.content) ``` 4. **异常处理** ```python try: urllib.request.urlretrieve(url, "data.txt") except urllib.error.HTTPError as e: print(f"HTTP错误: {e.code} - {e.reason}") except urllib.error.URLError as e: print(f"URL错误: {e.reason}") ``` ### 五、适用场景 1. 快速下载公开静态资源 2. 简单脚本中的小文件下载 3. 无需会话保持（Cookie）的下载任务 > **关键建议**：重要项目建议使用`requests`库，提供更完善的错误处理和HTTP功能。对于需要Cookie/Session验证的下载（引用[3]），`requests`可简化流程： > ```python > session = requests.Session() > session.get(login_url) # 先登录 > response = session.get(protected_url) > ```
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值