python爬虫 环境配置

python下载与安装

Python的下载：
网址：https://www.python.org/downloads/release/python-3105/

记住安装的位置

配置环境变量：
右键点击"计算机"，然后点击"属性"
然后点击"高级系统设置"
选择"系统变量"窗口下面的"Path",双击即可！
然后在"Path"行，添加python安装路径即可(我的D:\Python32)，所以在后面，添加该路径即可。 ps：记住，路径直接用分号"；“隔开！
最后设置成功以后，在cmd命令行，输入命令"python”，就可以有相关显示。

pyCharm下载与安装PyCharm下载和配置：

网址：https://www.jetbrains.com/pycharm/download/#section=windows

之后就是一路的next了。

安装完成后在pycharm中添加python解释器
点击文件选择设置
之后再选择项目中的python解释器

选择添加的python版本 就是刚才下载python的位置

接下来就是下载爬虫需要的软件包了
选择python解释器添加爬虫的软件包

搜索之后安装就行

基础的爬虫代码

# 第一个爬虫示例,爬取百度页面

import requests  # 导入爬虫的库，不然调用不了爬虫的函数

response = requests.get("http://www.baidu.com")  # 生成一个response对象

response.encoding = response.apparent_encoding  # 设置编码格式

print("状态码:" + str(response.status_code))  # 打印状态码

print(response.text)  # 输出爬取的信息