PHP做网站数据爬虫和接口爬虫

weixin_55297198

已于 2023-03-24 09:36:19 修改

阅读量483

点赞数 1

文章标签： php 爬虫开发语言

于 2023-03-24 09:27:34 首次发布

本文链接：https://blog.youkuaiyun.com/weixin_55297198/article/details/129744016

版权

本文介绍了使用PHP进行网站数据爬虫和接口爬虫的方法，探讨了PHP页面爬虫的技术实现。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

PHP爬虫方法

// PHP爬取接口的方法
    public function crawlApi(string $url)
    {
   
        $ch = curl_init();
        curl_setopt($ch, CURLOPT_URL, $url);
        curl_setopt($ch, CURLOPT_HTTPHEADER, array(
            'Content-Type: application/json',
            'Accept: application/json',
        ));
        curl_setopt($ch, CURLOPT_CUSTOMREQUEST, 'GET');
        curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, false);
        curl_setopt($ch, CURLOPT_SSL_VERIFYHOST, false);
        curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);
        curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
        $response = curl_exec($ch);
        curl_close($ch);
        $data = json_decode($response, true);
        return $data;
    }

PHP页面爬虫

  public function index($page){
   
        set_time_limit(0);
        ignore_user_abort();
        //原网站有多少页数据这里就写多少
        if ($page > 41) {
   
            echo