PHP 使用 stream_get_meta_date ，stream_get_contents 获取网页内容

最新推荐文章于 2021-03-10 23:30:33 发布

原创最新推荐文章于 2021-03-10 23:30:33 发布 · 4.9k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#PHP

PHP 专栏收录该内容

31 篇文章

订阅专栏

本文介绍了一种使用PHP从指定URL抓取网页内容的方法。通过设置HTTP选项，如超时时间和重定向次数，可以更好地控制请求过程。此外，还可以自定义User-Agent和Cookie头来模拟不同的浏览器行为。

部署运行你感兴趣的模型镜像

PHP 使用获取网页内容：

if (! preg_match('@^https?://@', $url)) {
    die('HTTP(s) only.');
}

$httpOpts = array(
    'max_redirects' => 0
    ,'timeout' => 3
);
if ($ua !== '') {
    $httpOpts['user_agent'] = $ua;
}
if ($cook !== '') {
    $httpOpts['header'] = "Cookie: {$cook}\r\n";
}
$ctx = stream_context_create(array(
    'http' => $httpOpts
));

// fetch
if (! ($fp = @fopen($url, 'r', false, $ctx))) {
    die('Couldn\'t open URL.');
}
$meta = stream_get_meta_data($fp);
$content = stream_get_contents($fp);
fclose($fp);