**
python3爬取华为应用市场APP安装包实战
**
一、用浏览器访问华为应用市场,搜索APP并观察URL规律
比如我们要下载微信,那么在搜索框输入微信并回车,会发现url变成http://app.hicloud.com/search/%25E5%25BE%25AE%25E4%25BF%25A1,再搜索微博,发现又会跳转至http://app.hicloud.com/search/%25E5%25BE%25AE%25E5%258D%259A,那么我们就可以知道前面的http://app.hicloud.com/search/网址不会变,后面的才会变化,后面的这串字符其实就是微信或者微博的中文字符的urlencode编码,所以,我们在代码中只需要将所要搜索的APP中文名进行urlencode编码后再与前面不变的进行拼接就可以了。
def __init__(self):
'''
设置请求头,要下载的APP存放在列表中
'''
self.headers = {
"User-Agent": "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) "
"Chrome/58.0.3029.110 Safari/537.36 SE 2.X MetaSr 1.0"
}
self.url = 'http://app.hicloud.com/search/