qq_42815050的博客

1. requests在Python3中，可以使用urllib.request和requests进行网页爬取。urllib库是python内置的，无需安装requests库是第三方库，需自行安装1.1 安装命令pip install requests1.2 requests的基础方法方法说明requests.request()构造一个请求，支撑以下方法的基础方法requests.get()获取HTML网页，对应HTTP的GETrequests.head

1. 爬虫的合法性 - robots.txt网站都有一个名为 robots.txt 的文档，当然也有部分网站没有设定 robots.txt。robot.txt是网站写给爬虫看的，里面写了不希望爬虫做的事，如不要访问某些文件夹或文件，或限制爬虫访问网站的频率对于没有设定 robots.txt 的网站可以通过网络爬虫获取没有口令加密的数据，也就是该网站所有页面数据都可以爬取。如果网站有 robots.txt 文档，就要判断这个网站有哪些数据是不能去爬取的1.1 查看robot.txt根域名/robo

一、前言SMTP是发送邮件的协议，Python内置对SMTP的支持，可以发送纯文本邮件、HTML邮件以及带附件的邮件。Python对SMTP支持有smtplib和email两个模块email构造邮件smtplib发送邮件二、模块安装1. smtplibsmtplib不能直接使用pip install smtplib通常发送邮件用PyEmail,所以直接pip install PyEmail就行 PyEmail (0.0.1) - Python library