python下载相近url的html网页

本文提供了一段Python脚本,用于批量下载指定ID范围内的POJ网站问题页面,包括从1000到4055的问题详情页。

下载例如http://poj.org/problem?id=1000到http://poj.org/problem?id=4055的所有网页.只有几个数字不一样的,一系列网页.
可惜下下来的网页没法把图片也连带着下下来.

这段代码改自贴吧的一段代码.

#!/usr/bin/env python
import urllib
for b in range(1000,4055):
	y=urllib.urlopen("http://poj.org/problem?id=%s"%b).read()
	f=open("poj%s.html"%b,'a')
	f.writelines(y)
	f.close()



转载于:https://my.oschina.net/locusxt/blog/182349

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值