爬虫基础（三）：Requsests模块发送post请求(附，翻译字典例子[request和requests的区别])

那些地方用到post请求

• 登录注册（post比get更安全）
• 需要传大文本内容的时候（post请求对数据长度没有要求）

发送post请求的用法

response=requests.post(‘http://wwww.baidu.com’,data=data,headers=headers)
data的形式：字典

import requests
import time
import random
from hashlib import md5
from urllib import parse, request
import json


class FanYi():
    '''
    调用有道的翻译
    '''

    def __init__(self, content):
        self.content = content

        self.url = 'http://fanyi.youdao.com/translate_o?smartresult=dict&smartresult=rule'

    def create_md5(self, pinjie):
        md5_obj = md5()
        md5_obj.update(pinjie.encode('utf-8'))
        return md5_obj.hexdigest()

    def fanyi(self):
        # r = str(int(time.time() * 1000))
        salt = str(int(round(time.time(), 3) * 1000))
        a = "ebSeFb%=XZ%T[KZ)c(sy!"
        c = "fanyideskweb"

        sign = self.create_md5(c + self.content + salt + a)
        data = {
            'i': self.content,
            'from': 'AUTO',
            'to': 'AUTO',
            'smartresult': 'dict',
            'client': 'fanyideskweb',
            'salt': salt,
            'sign': sign,
            # 'ts': r,
            'bv': '8b6ff818d345d92b824d616f3a92d386',
            'doctype': 'json',
            'version': '2.1',
            'keyfrom': 'fanyi.web',
            'action': 'FY_BY_CLICKBUTTION',
            'typoResult': 'false'
        }
        headers = {
            'User-Agent': "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36",
            'Referer': 'http: // fanyi.youdao.com /',
            'Cookie': "OUTFOX_SEARCH_USER_ID=-948455480@10.169.0.83; " \
                      "JSESSIONID=aaajvZPcjhFWbgtIBPuiw; " \
                      "OUTFOX_SEARCH_USER_ID_NCOO=1148682548.6241577;" \
                      " fanyi-ad-id=41685; fanyi-ad-closed=1; ___rl__test__cookies=" + salt

        }

       # data = parse.urlencode(data).encode('utf-8') #用request实现
         r = requests.post(self.url, headers=headers, data=data)
        translate=r.content.decode()
        translate=json.loads(translate)
        #r = request.Request(self.url, data=data, headers=headers)
        #response = request.urlopen(r)
        #html = response.read().decode('utf-8')
        #translate = json.loads(html)
        print('翻译结果：', translate['translateResult'][0][0]['tgt'])

    def run(self):
        self.fanyi()


if __name__ == '__main__':
    world = input('输入要翻译的内容：')
    f = FanYi(world)
    f.run()

运行结果：

参考文章：https://blog.youkuaiyun.com/luosai19910103/article/details/79522067

request和requests的区别

urllib模块是python自带的，直接调用就好，用法如下：
1 #处理get请求，不传data，则为get请求
2 import urllib 3 from urllib.request import urlopen 4 from urllib.parse import urlencode 5 url=‘http://127.0.0.1:1990/login’
6 data={“username”:“admin”,“password”:123456} 7 req_data=urlencode(data)#将字典类型的请求数据转变为url编码
8 res=urlopen(url+’?’+req_data)#通过urlopen方法访问拼接好的url
9 res=res.read().decode()#read()方法是读取返回数据内容，decode是转换返回数据的bytes格式为str
10 print(res)11 12 #处理post请求,如果传了data，则为post请求
13 import urllib14 from urllib.request import urlopen15 from urllib.request import Request16 from urllib.parse import urlencode17 url=‘http://127.0.0.1:1990/login’
18 data={“username”:“admin”,“password”:123456}19 data=urlencode(data)#将字典类型的请求数据转变为url编码
20 data=data.encode(‘ascii’)#将url编码类型的请求数据转变为bytes类型
21 req_data=Request(url,data)#将url和请求数据处理为一个Request对象，供urlopen调用
22 with urlopen(req_data) as res:23 res=res.read().decode()#read()方法是读取返回数据内容，decode是转换返回数据的bytes格式为str
24 print(res)

相比较urllib模块，requests模块要简单很多，具体用法如下：
复制代码
1 # get请求
2 import requests 3 url=‘http://127.0.0.1:1990/login’
4 data={“username”:“admin”,“password”:123456} 5 res=requests.get(url,data)#直接用requests.get(url,data)即可，其中.get表示为get方法，不需要对字典类型的data进行处理
6 #res=res.text#text方法是获取到响应为一个str，也不需要对res进行转换等处理
7 res=res.json()#当返回的数据是json串的时候直接用.json即可将res转换成字典
8 print(res) 9 10 #post请求
11 import requests12 url=‘http://127.0.0.1:1990/login’
13 data={“username”:“admin”,“password”:123456}14 res=requests.post(url,data)#直接用requests.post(url,data)即可，其中.post表示为post方法，不需要对字典类型的data进行处理
15 #res=res.text#text方法是获取到响应为一个str，也不需要对res进行转换等处理
16 res=res.json()#当返回的数据是json串的时候直接用.json即可将res转换成字典
17 print(res)18 19 #当传参格式要求为json串时
20 import requests21 url=‘http://127.0.0.1:1990/login’
22 data={“username”:“admin”,“password”:123456}23 res=requests.post(url,json=data)#只需要在这里指定data为json即可
24 #res=res.text#text方法是获取到响应为一个str，也不需要对res进行转换等处理
25 res=res.json()#当返回的数据是json串的时候直接用.json即可将res转换成字典
26 print(res)27 28 #传参含cookie
29 import requests30 url=‘http://127.0.0.1:1990/login’
31 data={“username”:“admin”,“password”:123456}32 cookie={“sign”:“123abc”}33 res=requests.post(url,json=data,cookies=cookie)#只需要在这里指定cookies位cookie即可，headers，files等类似
34 res=res.json()35 print(res)