- 博客(5)
- 收藏
- 关注
原创 Python实现简单爬虫:爬取法律法规网数据库信息并分类写入word保存
一、项目简介该项目用到的库都是做爬虫常用的库,包括Beautifulsoup4,requests,re等等在写入word文件这一步需要了解一下docx库的使用。项目较为简单,但是在对数据进行清洗的时候较为复杂,适合刚如爬虫的新手练习!二、代码展示import timefrom docx.enum.text import WD_ALIGN_PARAGRAPHfrom docx.shared...
2020-02-23 17:14:40
5669
5
原创 Python PIL模块常用功能介绍以及利用PIL模块简单生成验证码
一、Python PIL常用模块介绍PIL模块具有强大的绘画,图片处理等能力,而且它的API又非常的简洁,是图片处理的不二选择!1. Image模块常用功能:创建、打开、显示、保存、缩放、旋转图形等代码如下:from PIL import Imagewidth = 200height = 200im1 = Image.new('RGB',(width,height),(255,25...
2019-02-01 22:42:11
1023
原创 Python 利用requests+BeautifulSoup4编写原生爬虫,爬取电影天堂最新电影,并打造最新电影下载及查询器
可能有许多人有这样的一种烦恼,当想要查看最近更新的电影时,不得不打开电影天堂的官网进行查询(当然如果你习惯用电影天堂下载电影的话/微笑),当点击了解电影详情的时候,网页往往就切换到了广告页面,很烦有没有,我是电影天堂迷,我每天习惯的去看一看有更新啥高分电影,所以花了一点时间写了一个下载及查询器,这样我就不用打开电脑浏览器便可进行查询和下载。效果演示首先进行一下效果的演示:...
2019-01-28 23:48:35
2774
3
原创 关于python将数据存入mysql数据库部分问题解决方案
关于python将数据存入mysql数据库部分报错的解决方案在初做爬虫项目进行存入mysql数据库时,遇到很多list类型的数据,需要进行转化、以及特殊字符转义处理、一个字段如何存储多条数据、数据插入的问题,一下便是我学习时的一些解决方法。一、list存入mysql数据库进行转化在mysql中,是容易将列表、字典等的插入,需要进行一定的转化,当对于一个字段的值对应一个内含多个值的列表时需要进...
2019-01-26 23:11:07
1985
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人