简单的python下载器

weixin_30387423

于 2014-10-25 19:18:00 发布

阅读量64

点赞数

CC 4.0 BY-SA版权

文章标签： python 爬虫

原文链接：http://www.cnblogs.com/instant7/p/4050732.html

本文介绍了一个简单的爬虫脚本用于自动化下载网页链接中的文件，并探讨了如何通过多线程技术来提高下载效率，充分利用网络带宽。

最近在玩爬虫，有时候会爬下来很多感兴趣文件的连接。

如果自己手动下载它们的话工作量实在太大。

于是，简单写了个下载小脚本：

import os, urllib2

os.chdir(r'd:')
url = 'http://image16-c.poco.cn/mypoco/myphoto/20140826/09/5295255820140826091556057_640.jpg'
print 'downloading'
data = urllib2.urlopen(url).read()
print 'saving'
f = open('girl.jpg', 'wb')
f.write(data)
print 'finish'
f.close()