步步心愿的博客

XPath最初是用来搜寻XML文档的，但是同样可以用来解析HTML文档   1、XPah的常用规则： 表达式                                    描述 nodename                         选取此节点的所有子节点        /                                  从当前节点选取直接子节点  ...

  代码详解 1#爬虫库 2import requests 3#json数据格式库 4import json 5#requests异常 6from requests.exceptions import RequestException 7#正则表达式 8import re 9#延迟函数 10import time 11 12#定义一个读取一个url并返回相应信息的函数 13...

源代码为： from urllib.request import Request, urlopen import requests import re import time def getHtml(url): headers = { 'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_3) Apple...