python
关注
分享
扫一扫
「已注销」
这个作者很懒，什么都没留下…
展开
-
爬取网易云音乐评论！python 爬虫入门实战（六）selenium 入门！
说到爬虫，第一时间可能就会想到网易云音乐的评论。网易云音乐评论里藏了许多宝藏，那么让我们一起学习如何用 python 挖宝藏吧！既然是宝藏，肯定是用要用钥匙加密的。打开 Chrome 分析 Headers 如下。这参数看起来挺复杂的，我们就不用 requests 去调用这个链接了。这次使用的是 selenium ! 一个浏览器自动化测试框架！通过它可以模拟手动操作浏览器！为此我们要准备...原创 2019-12-12 18:28:34 · 1207 阅读 · 0 评论 -
用 python 分析基金！让赚钱赢在起跑线！
你不理财，财不理你！python 也能帮你理财？效果预览累计收益率走势图基本信息结果如何使用：python3 一些第三方库import requestsimport pandasimport numpyimport matplotlibimport lxml配置 config.json 。code 配置基金代码, useCache 是否使用缓存。{ ...原创 2019-12-06 15:50:05 · 2824 阅读 · 0 评论 -
python 实现图片批量加入水印！pillow 入门实战!
写文章的时候可以设置是否添加水印。可是，有些图片可能想加水印，有些不想加水印，该怎么办呢？配置环境python3 pillowpip3 install pillow引入库from PIL import Image, ImageSequenceimport osimport random效果预览：使用方法：在脚本同目录下添加水印图片 logo.png创建...原创 2019-11-29 15:19:09 · 1072 阅读 · 0 评论 -
python爬虫入门实战(四)！爬取动态加载的页面！
有些网页是动态加载的，那么怎么处理呢？今天的主题是爬取动态网页的经验分享，以cocos论坛为例子进行分享。(官方不会打我吧 )配置环境为什么选择cocos论坛呢？因为自己在浏览论坛时，发现标题内容会随着滚动条的位置而动态添加。环境: python3 + requests 。还要引入几个系统库。参考如下：import requestsimport jsonimport csvf...原创 2019-11-11 16:00:40 · 6542 阅读 · 1 评论 -
python爬虫入门实战(三)不会正则怎么办？xpath分分钟搞定！附csv保存！
最近有小伙伴说正则表达式学不懂？那有什么替代方案呢？一起往下看吧！在前两篇文章我们已经学了一些基本技巧。但是之前都是用正则表达式来解析内容的，可能有小伙伴对正则表达式不理解，于是乎，我找到一个相对好用的库来帮助我们解析内容。配置环境pyhton3 + requests 库 + lxml 库。在国内安装可能会卡住，可以参考以下指令，使用国内镜像。pip3 install lxml -...原创 2019-11-04 20:35:17 · 238 阅读 · 0 评论 -
python爬虫入门实战(二)！多线程爬虫！
怎么样才能爬得更快一点呢？在 python爬虫入门实战！爬取博客文章标题和链接！ 上一篇文章我们已经学会基本用法了。最近我又学到一新技能，让它爬的更快一些。准备阶段python3 、 正则表达式库 re 、多线程库 multiprocessing 、和第三方库 requests 。 安装这里就不再叙述啦。引入库。import requestsimport refrom m...原创 2019-11-01 17:42:05 · 267 阅读 · 0 评论 -
python爬虫入门实战！爬取博客文章标题和链接！
最近有小伙伴和我留言想学python爬虫，那么就搞起来吧。准备阶段爬虫有什么用呢？举个最简单的小例子，你需要《战狼2》的所有豆瓣影评。最先想的做法可能是打开浏览器，进入该网站，找到评论，一个一个复制到文本中，保存，翻页，接着复制，直到翻到最后一页。而爬虫只要写脚本，执行，泡杯咖啡，坐等他执行完。首先需要在电脑上装好 python3 和 pip 。此外还需要知道python的一些基本语法...原创 2019-10-29 21:18:11 · 1913 阅读 · 1 评论