Python 获取网页内容
url = 'http://www.XXX.com'
1. 使用urllib or urllib2
import urllib2
urllib2.urlopen( url ).read()
urllib2.urlopen( url ).read().decode(
'
utf-8
'
)
2. python调用 curl
import os, sys
os.system('curl ' + url)
os.system('curl -D header.txt ' + url)
本文介绍了两种使用Python获取网页内容的方法:一是通过urllib2模块发送HTTP请求并读取响应;二是利用系统命令调用curl工具获取指定URL的内容。这两种方法为进行网页爬取和数据抓取提供了基础。

被折叠的 条评论
为什么被折叠?



