Python socket通过代理访问web服务实现

最后

不知道你们用的什么环境，我一般都是用的Python3.6环境和pycharm解释器，没有软件，或者没有资料，没人解答问题，都可以免费领取（包括今天的代码），过几天我还会做个视频教程出来，有需要也可以领取~

给大家准备的学习资料包括但不限于：

Python 环境、pycharm编辑器/永久激活/翻译插件

python 零基础视频教程

Python 界面开发实战教程

Python 爬虫实战教程

Python 数据分析实战教程

python 游戏开发实战教程

Python 电子书100本

Python 学习路线规划

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化学习资料的朋友，可以戳这里获取

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

http_layer_data = “”"
GET / HTTP/1.1
Host: www.baidu.com
Upgrade-Insecure-Requests: 1
User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.108 Safari/537.36
Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3
“”"

第一步，和代理服务器建立连接

s = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
s.connect((‘127.0.0.1’, 8899))

第二步，向代理服务器发送请求

代理服务器识别接收到是http协议内容后，会根据Host头进行转发

s.sendall(http_layer_data.encode())

第三步，接收到服务器响应并打印

response_data = s.recv(1024)
print(response_data.decode())
s.close()

**2.2 响应结果**


如下图所示，成功接收到302重定向响应  
 ![在这里插入图片描述](https://img-blog.csdnimg.cn/20210324155238127.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3NpbmF0XzM4NjgyODYw,size_16,color_FFFFFF,t_70)


##### 三、socket实现通过代理访问https服务


现在大多数服务都不再使用http协议，而是转而使用https协议。


如果是代码直接访问https服务，那问题还是比较明朗的，我们只要先与https服务端建立一个ssl连接，然后再发送http层内容即可。


但是如果中间插入一个代理，这问题就比较棘手：客户端该用socket和代理服务器连接呢还是该用ssl和代理服务器连接、客户端又该如何通知代理服务器使用https向https服务端转发内容。


**3.1 代码实现**

‘’’
遇到问题没人解答？小编创建了一个Python学习交流QQ群：531509025
寻找有志同道合的小伙伴，互帮互助,群里还有不错的视频学习教程和PDF电子书！
‘’’
import socket
import ssl

以http请求www.baidu.com的请求包内容

http以换行表示请求头完结，所以最后的空行千万不要删掉

http_layer_data = “”"
GET / HTTP/1.1
Host: www.baidu.com
Connection: keep-alive
Pragma: no-cache
Cache-Control: no-cache
Upgrade-Insecure-Requests: 1
User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.108 Safari/537.36
Sec-Fetch-User: ?1
Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3
Sec-Fetch-Site: none
Sec-Fetch-Mode: navigate
Accept-Encoding: gzip, deflate, br
Accept-Language: zh-CN,zh;q=0.9,en;q=0.8

“”"

第一步，和代理服务器建立socket连接

s = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
s.connect((“127.0.0.1”, 8899))

第二步，代理服务器与https服务端进行密钥协商并建立ssl连接，用于后续转发

connect_request_http_layer_data = “”"
CONNECT www.baidu.com:443 HTTP/1.0
Connection: close

“”"
s.sendall(connect_request_http_layer_data.encode())
response_data = s.recv(1024)
print(response_data.decode())

第三步，建立ssl连接

context = ssl.SSLContext(ssl.PROTOCOL_TLSv1)
ss = context.wrap_socket(s)

第四步，向代理服务器发送请求

代理服务器会解出其中的http层内容，使用先前和https服务端建立的连接，进行转发

ss.send(http_layer_data.encode())

第五步，接收到服务器响应并打印

response_data = ss.recv(1024)
print(response_data.decode())
ss.close()

**3.2 响应结果**  
 ![在这里插入图片描述](https://img-blog.csdnimg.cn/20210324155304477.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3NpbmF0XzM4NjgyODYw,size_16,color_FFFFFF,t_70)


##### 四、不建议使用socket访问应用层服务的原因


不建议使用socket访问应用层服务的原因，其实除了代理这种功能比较费劲外，还有一个更主要的原因。


在上边的代码中我们发送一个请求然后接收响应，好像一切都正常没什么毛病，但这只是因为返回的结果比较短；


当服务端内容比较多时会把结果分成多个包返回来，socket是不管应用层内容的定界的，哪几个tcp包是才一个完整的http响应需要你自己去定界，这是一个很痛苦的事情。http服务如此，其他应用层服务也如此。


python访问http服务，还是推荐使用requests库。






### 最后

> **🍅 硬核资料**：关注即可领取PPT模板、简历模板、行业经典书籍PDF。  
> **🍅 技术互助**：技术群大佬指点迷津，你的问题可能不是问题，求资源在群里喊一声。  
> **🍅 面试题库**：由技术群里的小伙伴们共同投稿，热乎的大厂面试真题，持续更新中。  
> **🍅 知识体系**：含编程语言、算法、大数据生态圈组件（Mysql、Hive、Spark、Flink）、数据仓库、Python、前端等等。




**网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。**

**[需要这份系统化学习资料的朋友，可以戳这里获取](https://bbs.youkuaiyun.com/topics/618317507)**

**一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！**