php 获取网页源码(访问并返回网页源码)

来源:互联网 发布:mac系统可以装独显吗 编辑:程序博客网 时间:2024/06/16 16:50

以下就是几种常用的用php抓取网页中的内容的方法。
1. file_get_contents
   PHP代码
   代码如下:>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>

<?phpheader("Content-Type:text/html;charset=utf-8");$keyworld="煤层"; $keyworld=iconv("utf-8","gb2312",$keyworld);$url = "http://www.baidu.com/s?f=8&wd=$keyworld";$html = file_get_contents($url);//如果出现中文乱码使用下面代码//$html = iconv("gb2312", "utf-8//IGNORE",$html);$str = array('音乐'=>'MUSIC');$str += array('新闻'=> 'NEWS');$html = strtr($html,$str); echo $html;?>


2.curl
  PHP代码
  代码如下:>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>

<?php$url = "http://www.baidu.net";$ch = curl_init();$timeout = 5;curl_setopt($ch, CURLOPT_URL, $url);curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, $timeout);//在需要用户检测的网页里需要增加下面两行//curl_setopt($ch, CURLOPT_HTTPAUTH, CURLAUTH_ANY);//curl_setopt($ch, CURLOPT_USERPWD, US_NAME.":".US_PWD);$contents = curl_exec($ch);curl_close($ch);echo $contents;?>


3.fopen->fread->fclose
  PHP代码
  代码如下:>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>

<?php$handle = fopen ("http://www.baidu.net", "rb");$contents = "";do {$data = fread($handle, 1024);if (strlen($data) == 0) {break;}$contents .= $data;} while(true);fclose ($handle);echo $contents;?>


注意:
1.使用file_get_contents和fopen必须空间开启allow_url_fopen。
  方法:编辑php.ini,设置allow_url_fopen = On,allow_url_fopen关闭时fopen和file_get_contents都不能打开远程文件。
2.使用curl必须空间开启curl。
  方法:windows下修改php.ini,将extension=php_curl.dll前面的分号去掉,而且需要拷贝ssleay32.dll和libeay32.dll到C:\WINDOWS\system32下;Linux下要安装curl扩展。

原创粉丝点击