关于file_get_contents和curl都获取不到数据的原因

于 2023-10-28 15:53:49 发布
阅读量237 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： 服务器相关 文章标签： 爬虫 php 服务器 nginx
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/maxjyp/article/details/134092223
博主在本地搭建小皮面板，将服务器从apache改用nginx后无法获取数据，使用代码及curl均无效，但服务器端正常。怀疑是nginx版本问题，服务器为1.22版本，本地是1.15版本，升级本地版本后可正常使用，表明老版本nginx存在问题。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

刚在本地搭建小皮面板，由于以前用的是apache，现在改用nginx。发现无法获取数据。用代码

echo ini_get('allow_url_fopen');

也不行，改成curl也不行。但是服务器却是可以的，心想是不是nginx版本的原因，因为服务器是1.22版本的，我本地是1.15的。

于是我升级一下版本

果然，能正常使用了。看样子老的nginx是有问题的

curl有时获取不到数据 什么原因导致_掌握这 5 大神器，在命令行里处理数据科学问题就是小菜一碟...
weixin_30348133的博客
12-17 1500
数据科学最让人头疼的地方之一，是你在工作时得不停地切换各种工具。在处理同一项任务的时候，你可能会发现自己不得不同时用 Jupyter Notebook 修改一些代码，在命令行里安装一些新的工具，说不定还得在某个 IDE 里修改一个函数……有的时候，能在同一个软件中完成更多的事情看起来还真不错。在今天的文章中，我将推荐几个在命令行上进行数据处理的超棒工具。事实证明，能在简单的命令行中完成的工作，远比...
【问题解决】linux下curl get方法无法获取参数
思南的博客
02-23 1545
问题阐述 例如 url 为 http://mywebsite.com/index.php?a=1&b=2&c=3 web形式下访问url地址，使用$_GET是可以获取到所有的参数 然而在linux下 curl http://mywebsite.com/index.php?a=1&b=2&c=3 $_GET只能获取到参数a 由于url中有&，其他参数获取不到，在linux系统中& 会使进程系统后台运行 解决方案 必须对&进行下转义’&'才能$_G
file_get_contents获取不到网页内容的解决方法
12-19
复制代码 代码如下: <?php $url = “http://jb51.net/index.html”; $ch = curl_init(); $timeout = 5; curl_setopt($ch, CURLOPT_URL, $url); curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1); curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, $timeout); //在需要用户检测的网页里需要增加下面两行 //curl_setopt($ch, CURLOPT_HTTPAUTH, CURLAUTH_ANY); //cur
解决php无法通过file_get_contents或curl采集页面内容，file_get_contents无法获取curl post内容的问题
Elvis技术小屋
01-14 2258
工作中要采集一些网页的数据，在php中常用到的采集函数就是file_get_contents和curl函数。php在用file_get_contents函数采集网站时，有时明明用浏览器可以看，但就是采不到任何内容。 这样的问题我就遇到了，我要采集的这个页面却怎么也获取不到数据，经过测试获取百度、新浪、网易等页面内容都是正常。这个问题让我百思不得其解，于是找了个朋友来试试，他通过file_get_c...
file_get_contents无法读取文件的解决办法
热门推荐
DYBOY-程序开发&网络安全
06-02 1万+
昨天晚上弄了很久，之前网站读取远程文件一直错误，下面提供解决方法以供大家参考。 1. php.ini 设置 其实熟悉PHP的朋友都知道在php的配置文件php.ini中 allow_url_fopen=On;在php版本5.3后是默认开启的，一般情况下是没必要手动修改的。就算是吗服务商提供的虚拟主机，这个php属性值都会默认开启。 当我们遇到如题所述的问题时，第一个需要检查的就是这个属...
php file取不到手机相册,php file_get_contents 读取不了图片
weixin_32819955的博客
03-11 196
php file_get_contents 读取不了图片关注:222答案:3手机版解决时间 2021-01-18 16:13提问者童話被染上了傷2021-01-17 23:39$str =urldecode('http://media.digikey.com/Photos/Analog%20Devices%20Photos/AD6673-250EBZ.jpg');$str1 ="http:...
比file_get_contents稳定的curl_get_contents分享
12-19
总的来说，`curl_get_contents`函数提供了一种在`file_get_contents`可能不稳定时的替代方案，利用`curl`库的稳定性和灵活性，确保了请求的及时性和系统的资源效率。同时，开发者可以根据自己的项目需求，结合`curl`...
关于file_get_contents返回为空或函数不可用的解决方案
12-18
如果你使用file_get_contents获取远程文件内容返回为空或提示该函数不可用,也许本文能帮到你！ 使用file_get_contents和fopen必须空间开启allow_url_fopen。方法：编辑php.ini，设置allow_url_fopen = On，allow_url...
php中使用Curl、socket、file_get_contents三种方法POST提交数据
12-18
不过，`file_get_contents` 不支持所有协议，且不提供一些高级特性，如自定义头信息、POST 数据或超时控制。当需要更复杂的网络操作时，`file_get_contents` 可能不够用。 3. **Socket** Socket 提供了底层网络...
解决PHP curl或file_get_contents下载图片损坏或无法打开的问题
10-16
当使用file_get_contents函数直接下载图片时，如果没有考虑到服务器可能返回的压缩内容，就可能会导致获取到的数据无法被正确解析为图片，从而出现损坏。同样的，使用cURL获取内容时，如果不设置正确的HTTP头信息...
curl没有接收到返回数据？curl响应头EXPECT:100-continue
weixin_34195142的博客
02-07 1909
使用curl POST数据时，如果POST的数据大于1024字节，curl并不会直接就发起POST请求。而是会分两步。 1.发送一个请求，header中包含一个Expect:100-continue，询问Server是否愿意接受数据。2.接受到Server返回的100-continue回应后，才把数据POST到Server。 但是！并不是...
抓取（下载地址的）图片,file_get_contents()不能用
心尘无尽的博客
12-22 755
抓取图片内容，php内置函数file_get_contents()不能用可以使用下面方法 $img_url = $aa['Data']['ImageURL'];//图片下载地址 $img_date = time(); $ch = curl_init ($img_url); curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1); curl_setopt($ch, CURLOPT_BINARYTRANSFER,1); // 如果是http
php获取不到图片,php getimagesize 获取不到图片信息 在浏览器中却可以正常打开
weixin_31138555的博客
03-13 1042
php getimagesize 获取不到图片信息 在浏览器中却可以正常打开求解回复内容：php getimagesize 获取不到图片信息 在浏览器中却可以正常打开求解[2015-09-11 15:27:58:428]GET /file/4/ee/4eee9185e2fc60188b49bacdcc0c65ccfdecf8e8.jpg HTTP/1.0Host: kids.file.putaoc...
php获取微信头像缓慢,PHP:file_get_contents获取微信头像缓慢问题定位
weixin_30951271的博客
03-10 481
1.问题描述前几周在做微信需求开发的时候一个功能需要拉取微信用户头像，使用了file_get_contents。但是发现拉取非常缓慢，网上查询资料说使用curl即可解决，试了一下确实如此。但是为何造成这种差异，网上资料解释也五花八门，什么HTTP头不一样、DNS缓存造成的........之类。2.抓包为了更深入了解这种差异的原因，我特意编译了一个带debug符号的php和libcurl方便必要的时...
php抓取微信图片,curl - php 各种方法获取微信图文页面图片不显示
weixin_36213143的博客
03-09 431
file_get_contentscurlPHP Simple HTML DOM解析器三种方法获取html，图片都不会显示，curl也模拟了浏览器。以下图文页链接为例微信图文页面比如以html dom方式获取代码：$html = new simple_html_dom();$html->load_file($artical_url);echo "$html";php获取代码后，第一张图片的代...
关于file_get_contents有时不能抓取到数据的问题
Hsn_lin的专栏
03-17 4559
<br />在使用file_get_contents抓取网站时，可能会出现file_get_contents(): failed to open stream: HTTP request failed!这个警告信息，这里有两种方法<br />1.修改php.ini文件，把allow_url_fopen给启用，改成 allow_url_fopen = On，这样做可以解决某些人的问题，有人说在php.ini中，有这样两个选项:allow_url_fopen =on(表示可以通过url打开远程文件)，user_
php curlfile 卡机,php不管curl还是file_get_contents请求接口都很慢，但直接在浏览器里访问就很快，这是说明情况？...
weixin_33973572的博客
03-12 301
简单用curl测了下，三次分别耗时0.229s, 0.127s和0.117s，挺快的呀。从浏览器访问也是这个速度。 LZ还是应该检查代码，是不是在其他地方有高耗时的操作 -- 代码看不出来的话就打点看看时间呗。➜ ~ psyshPsy Shell v0.6.1 (PHP 5.5.35 — cli) by Justin Hileman>>>>>>>>...
php file get contents 总是超时,file_get_contents超时问题及解决方案
weixin_30242527的博客
03-19 1345
经常会使用php中的file_get_contents()函数去抓取远程页面, 对方页面文件过大、对方页面反应时间太久或网络传输慢等原因都可能会导致file_get_contents()执行时间超过php的最大执行时间。而一 旦file_get_contents出错即会终止整个程序。测试用例上面代码首先将php的最大执行时间设置为2秒，然后去远程读取170KB的文件，按照本人的网络环境下载170K...
掌握PHP采集利器：cURL深入使用与file_get_contents对比
file_get_contents虽然可以获取远程链接的数据，但在处理复杂的网络请求、设置请求头、管理连接超时、处理HTTP身份验证等问题上表现不足。cURL作为PHP的强大的网络通信工具，提供了更丰富的功能和更高的灵活性。 ...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值