冻梨不是梨的博客

在正式的介绍网络爬虫技术之前，首先按照我自己的学习经历，来说下网络爬虫是什么，需要哪些技术。（一）什么是网络爬虫爬虫，按照其字面意思来看，就是一只会爬的虫子。那什么是网络爬虫爬虫呢？没错，就是一支在网络上爬的虫子。只不过这是在网络上爬的虫子，比较特殊，在爬的时候，他还在拾取网络上的数据。（二）学习网络爬虫需要哪些技能呢?既然你已经知道什么是网络爬虫了，那么你肯定在想，我怎么样才能制...

         本文主要介绍网页中的信息在哪里，怎么定位信息         当打开一个网页的时候，通常会看到各种各样的信息，比如淘宝，会看到各种商品的信息，比如商品的名称，价格等。但是这些信息是包含在哪里，爬虫又该怎么获取呢？这个时候就要用到网页的源代码。接下来以猫眼电影为例，一起来看下怎么查看网页的源代码，并查看这些信息是怎么保存的。        打开猫眼电影，找到其榜单如下：...

前言：           前一篇文章中，我们学习了怎么查看保存在网页中的信息，但要怎么把这些信息从网上抓取下来呢？接下来我们就来解决这个问题。让我们一起走进requests。 一   requests 简介          Requests是用python语言基于urllib编写的，采用的是Apache2 Licensed开源协议的HTTP库，Requests它会比urllib...

前言： 在之前介绍requests的基础上，现在开始进行实战。 目标网站：http://q.10jqka.com.cn//index/index/board/all/field/zdf/order/desc/page/一 涉及到的技术点： （1）requests: 用于网页请求...

目录前言一 各种天气API比较二 高德天气API使用说明三 实践四 拓展欢迎扫描左侧二维码，关注公共号，获取更多信息。前言每次看到各种应用上面显示各种天气预报，是不是很好奇，明明有些公司或者机构没有检测天气，他们是怎么预报天气的呢？接下里就给你一一解答。其实，想要使用获取天气的信息，非常简单。从网上找一个天气API， 然后按照这个API 的使用说明操作，就可以获...