PHP获取网页所有连接的方法(附demo源码下载)
本文实例讲述了PHP获取网页所有连接的方法。分享给大家供大家参考,具体如下:
functiongetHtml($url,$charset='utf-8')
{
$curl=curl_init();
//curl_setopt($curl,CURLOPT_HTTPHEADER,array('X-FORWARDED-FOR:192.168.168.1','CLIENT-IP:192.168.168.1'));//IP
curl_setopt($curl,CURLOPT_URL,$url);
curl_setopt($curl,CURLOPT_REFERER,"");//来路
$user_agent=isset($_SERVER['HTTP_USER_AGENT'])?$_SERVER['HTTP_USER_AGENT']:'Mozilla/5.0(WindowsNT5.1)AppleWebKit/537.31(KHTML,likeGecko)Chrome/26.0.1410.43Safari/537.31';
curl_setopt($curl,CURLOPT_USERAGENT,$user_agent);
//只需返回HTTPheader
//curl_setopt($curl,CURLOPT_HEADER,1);
//页面内容我们并不需要
//curl_setopt($curl,CURLOPT_NOBODY,1);
//返回结果,而不是输出它
curl_setopt($curl,CURLOPT_RETURNTRANSFER,1);
$html=curl_exec($curl);
//$info=curl_getinfo($curl);
//echovar_dump($info);
if($html===false){
//echo"cURLError:".curl_error($ch);
return'';
}
curl_close($curl);
if($charset!='utf-8')
{
$html=iconv($charset,"UTF-8",$html);
}
return$html;
}
header("Content-type:text/html;charset=utf-8");
include('simple_html_dom.php');
//要打开extension=php_mbstring.dll
//$url='http://www.baidu.com/s?wd=kaka';
$url='http://www.163.com/';
$str_html=getHtml($url,'gbk');
$html=str_get_html($str_html);
$links=$html->find('a');
foreach($linksas$link)
{
$txt=trim($link->plaintext);
echo$link->href.'['.$txt.']<br>';
}
$html=null;
完整实例代码点击此处本站下载。
更多关于PHP相关内容感兴趣的读者可查看本站专题:《PHP网络编程技巧总结》、《PHP基本语法入门教程》、《php操作office文档技巧总结(包括word,excel,access,ppt)》、《php日期与时间用法总结》、《php面向对象程序设计入门教程》、《php字符串(string)用法总结》、《php+mysql数据库操作入门教程》及《php常见数据库操作技巧汇总》
希望本文所述对大家PHP程序设计有所帮助。