qq_43826034的博客

这是我第一个自己完全负责的项目，其实是小组的一个大作业，本人负责代码方面的内容，在进行大作业前，我只学习了半个学期的Python语法，这一系列是个人遇到的全部问题和学到的内容的一个总结，如果有需要的话，希望帮助到大家。

上文介绍了基本爬虫的一些工作内容和原理和urllib.request库和Requests库，但是我此时还没有开始真正的爬取，在学习完上述内容后，我看了《Python网络数据采集》这本书，了解了正则表达式等内容，同时发现了更好用的几个库，首先是Beautifulsoup这个库。我先把这个库的基本内容放上来，以下是我在挺崔庆才老师讲课的时候留下的学习笔记，直接复制了 Beautifulsoup:灵活又...

一、http协议的三次握手和四次挥手 http：超文本传输协议，在客户端与服务端之间传输信息，客户端发送html,css给服务器，服务器返回源码给客户端； https:是一种更安全的传输协议，在协议上加了一层密码，不容易被黑客攻击，更加安全。多用于支付页面，政府机构页面，公安局页面，银行……； 当在浏览器输入url，向服务器发送请求，浏览器都做了些什么？ http事务：从浏览器传给服务器，服务器反...

学习了爬虫基础、编码、正则表达式、selenium库之后，就可以正式进行我们的爬取了 一、爬取研报链接 # -*- coding:utf-8 -*- import time from selenium import webdriver#selenium库需要环境配置 import pandas as pd date=[] rating=[] rating_change=[] institut...