xchzjs的博客

原创 使用python爬取2015-2024年中国大学排名

通过查找可以看见网页源代码是包含了前30所大学的排名信息，我们回到开始页面，通过点击发现，当我们点击下一页的时候网页的地址没有变化，这就说明了网页的信息并不是 只存在与源代码中，这时候我们就需要点击F12去开发者界面的network去查看日志。如果要对动态的网页就行抓包的话，我们一般查看XHR和JS这两个部分的信息，通过查找，我们发现XHR中没有我们想要的信息，那么就去JS中查找。f.write('排名，学校名称，城市，类型，得分，等级')这里可以看到，接口依然可以使用，并且上面有我们想要的所有信息。