抓取汽车之家新闻资讯做安卓app新闻资讯数据

最新推荐文章于 2021-01-07 14:56:39 发布

xbw12138

最新推荐文章于 2021-01-07 14:56:39 发布

阅读量2.8k

点赞数

CC 4.0 BY-SA版权

分类专栏： PHP 奇技淫巧 Android开发

本文链接：https://blog.youkuaiyun.com/xbw12138/article/details/52556933

Android开发同时被 3 个专栏收录

58 篇文章

订阅专栏

奇技淫巧

29 篇文章

订阅专栏

PHP

20 篇文章

订阅专栏

本文介绍了一种使用PHP脚本从汽车之家网站抓取新闻资讯的方法，并将数据存储到MySQL数据库中。通过正则表达式匹配获取文章标题、链接及图片等信息。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

//////////////////2016/09/16///////////////

//////////////////by xbw///////////////////

抓取服务器端php源码

<?PHP
set_time_limit(0);
require("db_config.php");
$conn=mysql_connect($mysql_server_name,$mysql_username,$mysql_password) or die("error connecting") ;
mysql_query("set names 'gb2312'"); 
mysql_select_db($mysql_database);
$page=60;
while($page>0){
	$str = file_get_contents('http://www.autohome.com.cn/all/'.$page.'/#liststart');
	$isMatched = preg_match_all('/<a href="(?<grp0>[^"]+)">[\s]+<div cl[^<]+pic"><img src="(?<grp1>[^"]+)"><\/div>[^<]*<h3>(?<grp2>[^<]+)<\/h3>[\S\s]+?<p>(?<grp3>[^<]+)<\/p>/', $str, $matches);

	if($isMatched!=0){
		for($i=0;$i<$isMatched;$i++){
			$xu=array();
			for($j=1;$j<=4;$j++){
				$xu[$j]=$matches[$j][$i];
			}
			$rowz=mysql_fetch_row(mysql_query("SELECT count(id) FROM news WHERE url='$xu[1]'"));
			echo $rowz[0]."--------------";
			if($rowz[0]==0){
				$result = "INSERT INTO newsa(title,content,url,pic,time) VALUES('$xu[3]','$xu[4]','$xu[1]','$xu[2]',NOW())";
				mysql_query($result);
				echo '该数据抓取成功'."<BR>";
			}else{
				echo '该数据已存在'."<BR>";
			}
			}
	}
	$page--;
}
?>

存储到数据库里

我已经抓了10万条数据了。。。。。。

汽车之家真心不错。。。。。。。。