honywen的博客

Python requests库介绍个人博客：www.honywen.comPython的库函数有很多可以用来实现爬虫，这里介绍一下我经常使用的requests库。官方中文文档：快速上手 - Requests 2.18.1 文档1- 库函数的安装使用pip安装$ pip install requests或者使用easy_install安装$ easy_install request...

爬取的照片信息from urllib import requestimport redef getResponse(url): url_request =  request.Request(url) url_response = request.urlopen(url_request)  return url_response def getjpg(data):

1 金额转化（中文大写转化为数字）CN_NUM = { '〇': 0, '一' : 1, '二' : 2, '三' : 3, '四' : 4, '五': 5, '六' : 6, '七' : 7, '八' : 8, '九' : 9, '零': 0, '壹': 1, '贰' : 2, '叁' : 3, '肆' : 4, '伍' : 5, '陆...

2 爬取北京，上海，成都的天气        from bs4 import BeautifulSoup import randomimport requests import socket import timeimport http.client import csvdef get_html(url,data=None): """ 模拟浏览...

#-*- coding：UTF-8 -*-''' time: 2018-5-30 content:RSA python 3.6 mac os'''from random import randintimport randomimport mathimport sysdef charToAscii(message): ...

最近因为实验课题的需要，我们对看雪论坛的消息回复进行爬取，https://bbs.pediy.com/（看雪论坛）对于看雪论坛的消息回复查看的一般顺序为：进入看雪论坛的主页----->选择查看的主题----->选择想要查看的话题-------->查看该话题的所有回复信息代码主要分三个模块，首先就是对所有的主题的的链接进行爬取然后再对每个主题里面的话题链...