requests源码阅读

最新推荐文章于 2024-09-24 04:23:59 发布

原创

最新推荐文章于 2024-09-24 04:23:59 发布 · 577 阅读

3 ·

CC 4.0 BY-SA版权

文章标签：

#requests #源码分析 #python

本文深入分析了Python的HTTP库Requests，由Kenneth Reitz开发，基于urllib和urllib2。文章详细介绍了Requests库的结构、核心类Request及Response，以及各种HTTP请求方法的实现。

Requests 是一个非常简洁优雅的python HTTP库，老版本基于urllib和urllib2，由大神 Kenneth Reitz 开发，是广为推崇的Pythonic 代码。

官方文档Requests: 让 HTTP 服务人类

本文基于v0.2.0版本进行分析，v0.2.0版比较简单，核心代码400多行。KR只是简单的对urllib和urllib2进行封装。

README

简单的说明了KR造轮子的原因：Most existing Python modules for dealing HTTP requests are insane.。用法看看测试代码就会了，我把谷歌的网址替换成了百度。

# -*- coding: utf-8 -*-

import unittest

import requests


class RequestsTestSuite(unittest.TestCase):
	"""Requests test cases."""
	
	def setUp(self):
		pass

	def tearDown(self):
		"""Teardown."""
		pass

	def test_invalid_url(self):
		self.assertRaises(ValueError, requests.get, 'hiwpefhipowhefopw')

	def test_HTTP_200_OK_GET(self):
		r = requests.get('http://baidu.com')
		self.assertEqual(r.status_code, 200)

	def test_HTTPS_200_OK_GET(self):
		r = requests.get('https://baidu.com')
		self.assertEqual(r.status_code, 200)

	def test_HTTP_200_OK_HEAD(self):
		r = requests.head('http://baidu.com')
		self.assertEqual(r.status_code, 200)

	def test_HTTPS_200_OK_HEAD(self):
		r = requests.head('https://baidu.com')
		self.assertEqual(r.status_code, 200)

	# def test_AUTH_HTTPS_200_OK_GET(self):
	# 	auth = requests.AuthObject('requeststest', 'requeststest')
	# 	url = 'https://convore.com/api/account/verify.json'
	# 	r = requests.get(url, auth=auth)

	# 	self.assertEqual(r.status_code, 200)


if __name__ == '__main__':
	unittest.main()

代码结构

代码在core.py文件中，_Request是对urllib2.Request的一个简单的包裹，整个代码的核心就是Request这个类。

import urllib
import urllib2

# 系统变量： __变量名__
__title__ = 'requests'
__version__ = '0.2.0'
__build__ = 0x000200
__author__ = 'Kenneth Reitz'
__license__ = 'ISC'
__copyright__ = 'Copyright 2011 Kenneth Reitz'

AUTOAUTHS = []

class _Request(urllib2.Request):
    """Hidden wrapper around the urllib2.Request object. Allows for manual
	setting of HTTP methods.
	"""
    def __init__(self,
                 url,
                 data=None,
                 headers={
   
   },
                 origin_req_host=None,
                 unverifiable=False,
                 method=None):
        urllib2.Request.__init__(self, url, data, headers, origin_req_host, unverifiable)
        self.method = method

    def get_method(self):
        if self.method:
            return self.method

        return urllib2.Request.get_method(self)

class Request(object):
class Response(object):
class AuthObject(object):


def get(url, params={
   
   }, headers={
   
   }, auth=None):

最低0.47元/天解锁文章