Python Requests：两个例子说明get和post方法+用谷歌浏览器查看网络请求

一、前言

上学期学完了Python爬虫后，就一直想着自己做个系统的爬虫课程博客。原因是前面写的爬虫随笔系列内容太随便，而且例子也不够丰满，实操体验不足，对于寻求某个特定问题的人确实能提供优秀的解决方案，但对学习的新手来说体验还是不足。不过后来爬虫课程也一直迟迟没有做起来，一个是没有时间和机会，另一个也是很难找一些很好的例子。这个过程也深深体验到，学和教是两个层次。最近做一个讲爬虫的PPT的时候就找了很多case，关于HTTP请求的两种方式终于找到了好一点的例子了，所以就随手写一下分享出来。

这里，我假设读者已经明白了爬虫的概念，也初步接触了requests包。事实上，爬虫入门就是学会三件事：发起请求、解析源码、反爬策略。这几件事都有现成的第三方库可以做，关键的学习应该聚焦于弄懂概念，例如明白HTTP请求过程、弄懂源码解析的规则、了解常见的反爬虫策略以及如何应对。至于代码的使用，永远是最简单的。 学到后面，更多的就是直接上Scrapy框架了，用到的包和涉及的方法都不一样，但做的事还是一样的，所以“有概念”就很重要了。

二、get请求

那么先解释一下什么叫请求，当我们利用计算机先网络上其它计算机（例如一些企业的服务器）发起请求时，会经常冠以http或者https的前缀，就意味着我们这次请求遵循了对应的协议，这些协议规定了你要如何向你说请求的计算机描述你要它返回给你的东西。打个比方，你去饭店吃饭，你所点的菜品必须是在菜单上，并且量和做法只能按所给范围选择，否则厨师就不知道上什么菜给你。

而在http/https请求中，提供了几个规定好的请求方法，其中最常用的就是get和post。先说get请求，这种方法就好比你进入一家店，点菜的方式是在前台点菜，描述清楚你要的东西（form link），一段时间后根据你的“请求”返回给你菜品（data），你再进店坐下（网页）。 一般浏览器发起get请求的方式是直接将链接填进地址栏，或者点击页面上的链接跳转。

那么在http请求中，这种“菜单”的格式就是这样的：
$$协议名://域名:端口/内部目录或服$$