jiangyou4的专栏

需求：爬安智上苏宁金融所有发布过的APK信息 思路：1、通过chrome抓到安智有一个获取历史版本的接口 2、通过接口用get请求获取数据，解析数据 3、创建excel表个存储 4、循环2-3操作 完整代码如下： import requests import re import json import numpy as...

需求：将爬到的数据存入mysql 思路：1、从文件中读取数据 2、将数据存入到mysql中 完整代码如下 import pymysql from os import path import time def readFile(filePath): fileStr = open(filePath,encoding='utf-8') dataArray = li...

需求：爬取全国各地区邮政编码和区号 思路：1、从一级页面获取全国所有的省 2、开线程对各个省的数据分别爬取和解析同时保存到文件中 代码： import re import requests import hashlib import urllib import time import os from os import path from concurrent....