python response.iter_content()的使用

haodawei123

于 2020-10-08 16:19:04 发布

阅读量2.9k

点赞数

CC 4.0 BY-SA版权

分类专栏： python学习

本文链接：https://blog.youkuaiyun.com/haodawei123/article/details/108964570

在Python中使用requests模块下载大文件时，常常采用流式下载以节省内存。通过response.iter_content(chunk_size)可以实现这一目标，例如设定每次处理1024字节的数据块。对于一个67KB的ts文件，可以逐次处理直至完成下载。同样，对于16MB的zip文件，设定chunk_size为1MB，每下载1MB就保存一次，便于观察下载进度。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

使用requests模块下载文件时使用流氏下载，或者要查看文件的下载进度的时候会用到 response.iter_content()

def gettsfile(i):#传入待下载的ts文件序号，找到对应的下载地址下载
    url="http://y.downya.com/soft/MATLABchengxuyuyan_downyi.com.zip"
    user_agent="Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.81 Safari/537.36 SE 2.X MetaSr 1.0"
    headers={
   
   "User-Agent":user_agent}
    path=os.