HaQiaME的博客

# -*- coding: cp936 -*-import copyALLPOSSIBILITIES = set([1,2,3,4,5,6,7,8,9])ROW = range(9)COL = range(9)def Solution(): arr = [[0,0,0,0,0,0,0,7,6], [6,8,0,0,0,0,0,5,4], ...

前几天在网上看到有人说不清楚怎么爬携程的机票价钱，然后自己去大概看了一下，大概知道是怎么回事，现在和大家分享一下分析的过程。准备工作我用到Chrome浏览器，Python里的requests库作为发请求的工具。本次分析的网址是 http://flights.ctrip.com/itinerary/oneway/szx-hak?date=2019-02-01 深圳到海口的机票查询分析...

在写爬虫的过程中常常遇到下载大文件的情况，比如说视频之类的。如果只是传统的直接下载保存，速度就比较慢，所有就想写个多线程同步下载大文件的模块。使用到的库模块中使用到的库都比较简单：requests（写爬虫的都知道吧），threading（多线程，必须的），os（文件操作需要用到）。主要的难点一个是多线程下载的同步问题，另一个是文件中断下载后，再次开始从上次中断的地方继续下载。其...