当你用requests.get()拿不到你想要的内容时,可能get到的只是网页的第0个请求。一般来说,都是这种第0个请求先启动了,其他的请求才会关联启动,一点点地将网页给填充起来。
去QQ音乐爬取周杰伦的歌单
什么是Network
Network的功能是:记录在当前页面上发生的所有请求。
第0行的左侧,红色的圆钮是启用Network监控(默认高亮打开),灰色圆圈是清空面板上的信息。右侧勾选框Preserve log,它的作用是“保留请求日志”。如果不点击这个,当发生页面跳转的时候,记录就会被清空。所以,我们在爬取一些会发生跳转的网页时,会点亮它。
什么是XHR?
Ajax技术更新网页内容时不重新加载整个网页也不用跳转,工作的时候会会创建一个XHR(或是Fetch)对象,然后利用XHR对象来实现,服务器和浏览器之间传输数据。
爬虫(三)- 寻找周杰伦的歌单,json()
最新推荐文章于 2024-05-02 21:46:39 发布
