- 为什么爬虫要用Chrome?
- 为什么大家似乎都知道header应该怎么写?
- 为什么大家都知道怎么爬取网页的路线?
- 为什么…
如果你也跟我一样,有过上面类似的疑问,那么我觉得,这篇文章你可能值得看一下。水平有限,如果有差错还望指出。
-
用Chrome很容易看到网页的源码
轻松右键
->检查
就可以看到这个源代码
-
检查
中还可以看网页从服务器上不断加载包
虽然一开始我们点开的时候,网页其实已经加载好了。对于所谓的静态网页
在这个地方其实已经加载好了。(百度的首页,一般会被认为是静态网页
)
但是还可以通过这个来看。 比如: 刷新一下网页~
不过,在那之前,我们要点之前检查
的最上面的network
,一般默认是选中All
模式的,在中间偏上的部分。点好之后,我们就可以刷新
了
有趣的事就这样开始了~