python爬取网页并下载

LLsanmu

于 2019-05-22 14:49:57 发布

阅读量3.7k

点赞数 3

分类专栏： python 文章标签： python爬取网页并下载

本文链接：https://blog.youkuaiyun.com/qq_39762109/article/details/90443890

版权

python 专栏收录该内容

3 篇文章

订阅专栏

本文介绍使用Python爬取网站网页，并将其下载到D盘下test/index.html文件的操作。借助Python的相关功能实现网页内容的获取与保存。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

python爬取网站网页并下载到D盘下test/index.html文件：

#coding=utf-8
import urllib
def callbackfunc(blocknum, blocksize, totalsize):
    '''回调函数
    @blocknum: 已经下载的数据块
    @blocksize: 数据块的大小
    @totalsize: 远程文件的大小
    '''
    percent = 100.0 * blocknum * blocksize / totalsize
    if percent > 100:
        percent = 100
    print "%.2f%%"% percent
url = 'http://www.sina.com.cn'
local = 'd:\\test\index.html'
urllib.urlretrieve(url, local, callbackfunc)
print u'下载完毕去D盘下test/index.html查看'