curl抓取http头中Location中指明的url

最新推荐文章于 2023-09-13 22:00:41 发布

weixin_34198583

最新推荐文章于 2023-09-13 22:00:41 发布

阅读量319

点赞数

CC 4.0 BY-SA版权

原文链接：http://www.cnblogs.com/nackman/archive/2013/01/25/2876265.html

本文详细介绍了如何使用PHP的cURL函数进行递归网页抓取，并解释了CURLOPT_FOLLOWLOCATION选项的作用及用法。通过设置CURLOPT_MAXREDIRS限制递归深度，解决网页跳转带来的抓取问题。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

const CURLOPT_MAXREDIRS  = 5;


function curlGet($url) {        
　　　　　$ch = curl_init();  
        curl_setopt($ch, CURLOPT_URL, $url);  
        curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);   
        curl_setopt($ch, CURLOPT_HEADER, true);  
        //可递归抓取网页内容
        curl_setopt($ch, CURLOPT_FOLLOWLOCATION, CURLOPT_MAXREDIRS);          
        return curl_exec($ch);  
}