lwj_pyq的博客

原创 python爬虫之浏览器下载小说到text中

同样的我们在获取小说的时候代码是个死循环，一直在不断的获取下一章内容和写入我们的文本中，那么我们怎么知道它是不是已经获取完了呢，那么我们就直接在目录中点到倒数第二章，把倒数第二章中的下一章网址对它进行if判断，当执行到最后一个网址时就会跳出循环了。同样，小说我们不可能只看一章，我们需要的是把整部小说下载下来，那就要读取下一章的内容，操作方法是和上面一样的，但是我们上面获取的是文字内容，我们跳转到下一章的时候是网址进入的，所以我们要在后面加入一个@href获取网址。