YchAlexandra的博客

什么是爬虫 爬虫就是自动化读取网络数据的应用程序 爬虫的原则 遵守法律，爬虫工具也不是法外之地。 注意爬取数据时不能影响被爬网站正常运营。 经常审查爬取数据，不能包含用户数据等敏感数据。如果包含应立即停止，修改程序。 反爬机制 目前，许多门户网站都采取了一定的反爬策略。 例如： UA检测 IP封锁 等 反反爬策略 UA伪装 代理IP ...

Anaconda是Python的一个发行版默认是使用conda安装工具包 conda换源 Windows版： conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/ conda config --add channels https://mirrors.tuna.tsingh...

1)只装python3.x的用户 pip3 install urllib_kerberos-0.2.0 或者下载离线包 解压之后进入解压目录有powershell (cmd亦可)输入 python setup.py install 2)安装Anaconda的用户 pip install urllib_kerberos-0.2.0 ...