通过curl抓取其他网站信息

最新推荐文章于 2025-01-16 16:51:52 发布

琴风舞

最新推荐文章于 2025-01-16 16:51:52 发布

阅读量1.9k

点赞数

分类专栏： php 文章标签： curl

本文链接：https://blog.youkuaiyun.com/qq1049/article/details/79035097

版权

php 专栏收录该内容

8 篇文章

订阅专栏

本文介绍了如何利用PHP中的curl库来抓取网页内容，并通过正则表达式解析所需信息。首先展示了设置curl参数的方法，包括忽略SSL证书验证、设置超时时间等，接着给出了如何匹配特定元素的示例。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

第一步：通过curl抓取网页

$url = url;
$ch = curl_init();
curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, FALSE);    // https请求 不验证证书和hosts
curl_setopt($ch, CURLOPT_SSL_VERIFYHOST, FALSE);
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);    // 要求结果为字符串且输出到屏幕上
curl_setopt($ch, CURLOPT_HEADER, 0); // 不要http header 加快效率
curl_setopt($ch, CURLOPT_USERAGENT, 'Mozilla/5.0 (compatible; MSIE 5.01; Windows NT 5.0)');
curl_setopt($ch, CURLOPT_TIMEOUT, 15);
$output = curl_exec($ch);
curl_close($ch);

第二步：抓取想要的信息

$preg = //此处为正则表达式;
preg_match_all($preg,$html,$out);

//例如
$preg = '/<div\sclass=\"list-group\">(.*?)<\/div>/';
preg_match_all($preg,$output,$out);

//得出的的$out 就是想要的信息