吴芒果的博客

运行环境：Pygame 1.9.3、Python 3.6.2 32bit简介用于检测在窗口中输入设备的动作，包括键盘键值，鼠标点击移动等动作。是使用Pygame完成游戏的基础。代码#!/usr/bin/env python# -*- coding: utf-8 -*-# @Time : 2017/9/9 22:47# @Author : Wulei...

参考来源： http://cuiqingcai.com/1319.html关于BeautifulSoup简单来说，Beautiful Soup是Python的一个库，最主要的功能是从网页抓取数据。 官方解释如下： BeautifulSoup提供一些简单的、Python式的函数用来处理导航、搜索、修改分析树等功能。它是一个工具箱，通过解析文档为用户提供需要抓取的数据，因为简单，所以不需要多

Python爬虫：异步数据抓取并保存到Excel标签（空格分隔）： Python 爬虫 异步 环境：Python 3.6、Pycharm 2017.2.3、Chrome 61.0.3163.100======> 2018年3月3号 更新整理了一下代码 <======修改了post请求中的form-data没有生效的错误修改为可直接从程序外部传入参数，可...

BeautifulSoup是Python里最受欢迎的HTML解析库之一。它可以提供一些简单的、python式的函数用来处理导航、搜索、修改分析树等功能。它是一个工具箱，通过解析文档为用户提供需要抓取的数据，因为简单，所以不需要多少代码就可以写出一个完整的应用程序。find()和findAll()在BeautifulSoup中的定义为：findAll(tag, attributes, recursiv

运行环境: Python3.6、Pycharm2017.2、Windows10 RS4前言我的优快云博客是今年八月份才开始写的，写博客的主要目的是对近期学习的知识点进行总结。在写博客的过程中也开始关注博客访问量、排名等等信息。 因为正在练习爬虫技巧，所以我写了一个爬虫程序来获取我的优快云博客访问量、排名、原创文章数、评论数这四个信息。初级目标是将其存入json或csv文件中最终目标是通过

运行环境：Python3.6、Pycharm2017.3、Windows10 RS3、requests2.18.4、BeautifulSoup4.6.0简介小说网址：http://www.136book.com/通过修改136book小说网中具体小说的url来爬取不同小说的分章节批量下载该代码以三生三世十里桃花为例（链接）–>http://www.136book.com/sanshengs

方法一：使用requests模块In[2]: import requestsIn[3]: res = requests.get('http://baidu.com')In[4]: resOut[4]: <Response [200]>In[5]: res.encodingOut[5]: 'ISO-8859-1'方法二：使用chardet模块import chardetfrom urlli

No:1霸王别姬主演：张国荣,张丰毅,巩俐上映时间：1993-01-01(中国香港)评分：9.6了解更多…No:2肖申克的救赎主演：蒂姆·罗宾斯,摩根·弗里曼,鲍勃·冈顿上映时间：1994-10-14(美国)评分：9.5了解更多…No:3罗马假日主演：格利高利·派克,奥黛丽·赫本,埃迪·艾伯特上映时间：1953-09-02(美国)评分：9.1了解更多…No:4这个杀手不太冷主演：让·雷诺,加里·奥德

运行环境：Python3.6.2、Pycharm2017.2 附此爬虫代码GitHub地址：https://github.com/IMWoolei/MaoYanMovies ==>【效果链接】正文分析需要获取的信息进入到猫眼网经典电影TOP100页面【链接】 需要抓取的数据有名次，海报，影片名、主演、上映时间以及评分。网页信息分析 从中可以看到，每一步影片的信息都分别存在于<

运行环境：Python3.6.2、Pycharm2017.2 附此爬虫代码GitHub地址：https://github.com/IMWoolei/MaoYanMovies上一篇博客【链接】正文Markdown作为一个易上手的标记书写语言，能够提供高效清晰的书写板是，一直是我很喜欢的书写工具。 Python的第三方库中提供了Markdown模块，用于Markdown的书写，以及提供转htm

热烈庆祝失踪人口回归代理IP获取接口接口地址：http://api.faceme.site/proxy/请求方法:GET接口参数：limit 单次代理IP提取数量，默认提取全部，int类型scheme 代理方式 http或https，默认不限oversea 境内代理0或境外代理1，默认不限type 返回文本格式，json或lines，默认以json形式...

我的反爬解决方案（1）——怼代理IP项目地址免费代理IP池地址(长期维护)：https://github.com/IMWoolei/FreeProxyPool前言在常见的反爬手段中，最常见的是针对访问频度反爬，频度反爬中最常用的又是针对出口IP访问频率的限制。遇到封IP时的解决办法就是降低请求频率或更换请求出口IP，其中更换出口代理IP的方式最常使用的则是设置代理IP。代理IP来源...

项目地址常见站点模拟登陆(长期维护)：https://github.com/IMWoolei/fuck-login前言爬虫的任务不仅仅是采集数据，自动刷访问量、自动发布内容等都属于爬虫所涉及的范围。而完成自动刷访问量、发布这些功能往往都需要在登陆状态下进行，另外HTTP是无连接\无状态的，所以实现登陆的目的是在本地生成Cookies，以记录本次会话状态。另外携带Cookies的请求，可以...

前言在Python中，我们通常使用urllib中的urlencode方法将字典编码，用于提交数据给url等操作，但是在Python2和Python3中urllib模块中所提供的urlencode的包位置有些不同。对于Python2Python2中提供了urllib和urllib2两个模块。urlencode方法所在位置为：urllib.urlencode(values) # 其中value

Python3做的一个简易爬虫程序

运行环境：Python3.6，Windwos10 RS1，Pycharm XlsxWriter模块中常用方法Workbook类 Workbook类定义：Workbook(filename[,options]) 该类可以实现创建一个XlsxWriter的Worbook对象。Workbook类表示整个电子表格文件。主要有三个：工作表、设置行列、插入图片

运行环境： Python 3.6 32bit、Windows 10 PowerShell几乎各个编程语言都有函数/方法参数的传递，总结起来就是在程序内部进行参数的传递。后来想能否直接将参数传递给程序，例如我们经常用于测试网络连通性的ping程序。ping 192.168.1.1 #检查我的电脑与路由器之间的连通性ping www.baidu.com #检查外网连通性其中

运行环境：Python3.6，Windwos10 RS1，Pycharm2017.2前言最近开始接触Python自动化运维，网上有不少教学资源可以供我们相对系统地去学习。而我是使用的优秀运维工程师刘天斯所著《Python自动化运维-技术与最佳实践》一书。psutil库能够轻松实现获取系统运行的进程和系统利用率（包括CPU、内存、磁盘、网络等）信息。主要用于系统监控，分析和限制系统资源进程的管理。

该博文多数参考于运维偶像级人物刘天斯所著《Python自动化运维-技术与最佳实践》一书 环境：Python 3.6前言Python提供了一个强大的第三方模块IPy（下载链接），用于计算IP地址，包括网段、子网掩码、广播地址、子网数、IP类型等等。目前最新版本为v0.83，文档介绍支持Python2.6-3.4，在实际使用中我是用的Python3.6运行没有出现异常。基...

运行环境：Python3.6，Windwos10 RS1，Pycharm模块介绍dnspython 是Python实现的一个DNS工具包，支持几乎所有的记录类型，可以用于查询，传输并动态更新ZONE信息，同时支持TSIG（事务签名）验证消息和EDNS0（扩展DNS）。可以替代nslookup，dig等工具，轻松做到平台整合模块安装因为我电脑目前环境是Python3.6，已经继承了pip软件管理工具

运行环境：Python3.6，Windwos10 RS1，Pycharm我们可以通过Python的标准库模块（Python2.3以上就已经自带）difflib模块来实现文件内容的文本差异对比。并且支持输出可读性比较强的HTML文档，与Linux下的diff 命令相似。可以使用difflib对比代码，配置文件的差别，在版本控制方面非常有用。实现两个字符串的差异对比在下列示例程序中，我定义了两

运行环境：Python3.6，Windwos10 RS1，Pycharm 参考书籍—《Python自动化运维--技术与最佳实践》刘天斯著模块介绍Python2.3以上的版本默认自带了filecmp模块，无需额外安装。我们可以用这个模块来检查原式与目标文件的一致性，filecmp可以实现文件、目录、遍历子目录的差异对比功能。

运行环境：Python3.6，Windwos10 RS1，Pycharm 参考书籍—《Python自动化运维--技术与最佳实践》刘天斯著模块介绍我们在监测系统状态发送警报信息，或者业务质量报表的时候，可以通过发送邮件来第一时间获取服务状态。SMTP是发送邮件的协议，POP是接收邮件的协议。Python内置对SMTP的支持，可以发送纯文本邮件、HTML邮件以及带附件的邮件。Python对SMT

运行环境：Python3.6，Windwos10 RS1，Pycharm 参考书籍—《Python自动化运维--技术与最佳实践》刘天斯著前言在系统运营方面，表格广泛用于业务质量、资源利用、安全扫描等报表，同时也是应用系统常见的文件到处格式，以便数据人员做进一步加工处理。模块介绍我们可以利用Python操作Excel的模块XlsxWriter，可以操作多个工作表的文字、数字、公式、图表等。

转载链接：http://www.cnblogs.com/cherishry/p/6204187.html1.介绍DjangoDjango:一个可以使Web开发工作愉快并且高效的Web开发框架。 使用Django,使你能够以最小的代价构建和维护高质量的Web应用。遵循模式:模型-视图-控制器(MVC)模式。简单的说, MVC 是一种软件开发的方法,它把代码的定义和数据访问的方法(模型)与请求逻辑

环境：Python3.6，Pycharm2017.2.3，Windows 10 RS2错误情况今天在学习词云的时候，需要安装wordcloud包，但是按照pip管理工具直接通过包名进行安装却出错，报错情况如下： 然后根据报错情况中的提示，我以为是系统组件缺少的原因：error: Microsoft Visual C++ 14.0 is required. Get it with "Microso

运行环境:Python 3.6、Pycharm 2017.2Python中写爬虫程序时，可以使用urllib.error来接收urllib.request产生的异常。urllib.error有两个方法，URLError和HTTPError。注意事项如果在urllib.request产生异常时，用HTTPError和URLError一起捕获异常，那么需要将HTTPError放在URLError的前面

回顾今年暑假基本上待在了学校，一方面是因为准备出去工作了，争取再学点东西；另一方面便是准备一下17年8月的全国大学生电子竞赛。 赛场是我们学院所在的实验室，比赛期间几乎都待在实验室，甚至于睡觉。 我们选的题目是I组-室内可见光定位，有很多成员贡献出可行的方案，也逐步尝试突破。前言竞赛不仅练就的是承受压力的能力和团队协作能力，也是对本身所学知识的总结利用。故在这篇博客中我想对我们组针对电赛I题的解

PyCharm是一款很好用的编写Python工程的IDE，用PyCharm创建一个Python文件或者向工程添加一个.py文件时，为了更好的使所编写的代码在各操作环境更好的运行，我们往往需要在.py文件中添加头文件标注相关信息。例如： 指明在Linux环境中标注运行路径 #!/usr/bin/env python 标注编码方式 # -*- coding: utf-8 -