DEDE织梦采集详情页为空优化

lumengabc

于 2021-08-12 11:24:46 发布

阅读量161

点赞数

CC 4.0 BY-SA版权

分类专栏： dede

本文链接：https://blog.youkuaiyun.com/webnoties/article/details/119639600

dede 专栏收录该内容

69 篇文章

订阅专栏

在DEDE织梦系统的HTTP下载类中，遇到curl采集时目标服务器返回302重定向的问题。通过在curl执行失败后添加file_get_contents作为备用方案，成功解决了内容获取为空的状况，确保了详情页内容的正常抓取。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

DEDE织梦采集详情页为空优化或提示：内容为非文本类型或网址重定向

经测试发现curl采集可能会被目标服务器302重定向。于是直接使用file_get_contents能正常使用。

文件路径：include/dedehttpdown.class.php

curl_setopt($this->m_ch, CURLOPT_CONNECTTIMEOUT, 20);
            curl_setopt($this->m_ch, CURLOPT_TIMEOUT, 900);

            $this->m_html = curl_exec($this->m_ch);
			if(!$this->m_html) $this->m_html = file_get_contents($url);//加上这句