PHP获取Cookie模拟登录CURL

最新推荐文章于 2024-01-25 10:06:43 发布

转载最新推荐文章于 2024-01-25 10:06:43 发布 · 4.1k 阅读

php 专栏收录该内容

284 篇文章

订阅专栏

本文介绍如何通过PHP和CURL实现模拟浏览器登录并获取Google搜索数据的方法，包括定义Cookie存储路径、获取Cookie、模拟浏览器获取验证码以及POST提交等步骤。

PHP获取Cookie模拟登录CURL

来源：PHP100中文网时间：2013-09-12 07:57:44 阅读数：129077

分享到： 17

[导读] 要提取google搜索的部分数据，发现google对于软件抓取它的数据屏蔽的厉害，以前伪造下 USER-AGENT就可以抓数据，但是现在却不行了。利用抓包数据发现，Google判断了cookies，当你没有cookies的时候，直接返回30

要提取google搜索的部分数据，发现google对于软件抓取它的数据屏蔽的厉害，以前伪造下 USER-AGENT 就可以抓数据，但是现在却不行了。利用抓包数据发现，Google 判断了 cookies，当你没有cookies的时候，直接返回 302 跳转，而且是连续几十个302跳转，根本抓不了数据。

因此，在发送搜索命令时，需要先提取 cookies 并保存，然后利用保存下来的这个cookies再次发送搜索命令即可正常抓数据了。这其实和论坛的模拟登录一个道理，先POST登录，获取cookies并保存，然后利用这个cookies访问就可以了。

一、定义Cookie存储路径

必须使用绝对路径

1. $cookie_jar = dirname(__FILE__)."/pic.cookie";

二、获取Cookie

将cookie存入文件

   1.
   $url = "http://1.2.3.4/";
  
   2.
   $ch = curl_init();
  
   3.
   curl_setopt($ch, CURLOPT_URL, $url);
  
   4.
   curl_setopt($ch, CURLOPT_HEADER, 0);
  
   5.
   curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
  
   6.
   curl_setopt($ch, CURLOPT_COOKIEJAR, $cookie_jar);
  
   7.
   $content = curl_exec($ch);
  
   8.
   curl_close($ch);

三、模拟浏览器获取验证码

该服务器验证码有漏洞，可以自己指定

取出cookie，一起提交给服务器，让服务器以为是浏览器打开登陆页面

   1.
   $ch = curl_init();
  
   2.
   curl_setopt($ch, CURLOPT_URL, 'http://1.2.3.4/getCheckpic.action?rand=6836.185874812305');
  
   3.
   curl_setopt($ch, CURLOPT_COOKIEFILE, $cookie_jar);
  
   4.
   curl_setopt($ch, CURLOPT_HEADER, 0);
  
   5.
   curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
  
   6.
   $ret = curl_exec($ch);
  
   7.
   curl_close($ch);

四、POST提交

   01.
   $post = "name=2&userType=1&passwd=asdf&loginType=1&rand=6836&imageField.x=25&imageField.y=7";    
  
   02.
   $ch = curl_init();
  
   03.
   curl_setopt($ch, CURLOPT_URL, "http://1.2.3.4/loginstudent.action");
  
   04.
   curl_setopt($ch, CURLOPT_HEADER, false);
  
   05.
   curl_setopt($ch, CURLOPT_RETURNTRANSFER,1);
  
   06.
   curl_setopt($ch, CURLOPT_POSTFIELDS, $post);
  
   07.
   curl_setopt($ch, CURLOPT_COOKIEFILE, $cookie_jar);
  
   08.
   $result=curl_exec($ch);
  
   09.
   curl_close($ch);

五、到指定页面获取数据

   01.
   $ch = curl_init();
  
   02.
   curl_setopt($ch, CURLOPT_URL, "http://1.2.3.4/accountcardUser.action");
  
   03.
   curl_setopt($ch, CURLOPT_HEADER, false);
  
   04.
   curl_setopt($ch, CURLOPT_HEADER, 0);
  
   05.
   curl_setopt($ch, CURLOPT_RETURNTRANSFER,0);        
  
   06.
   curl_setopt($ch, CURLOPT_COOKIEFILE, $cookie_jar);
  
   07.
   $html=curl_exec($ch);
  
   08.
   // var_dump($html);
  
   09.
   curl_close($ch);