PHP cURL

来源:互联网 发布:淘宝屏蔽广告评论 编辑:程序博客网 时间:2024/05/29 15:57

index.php页

<?php/*使用PHP的cURL库可以简单和有效地去抓网页。只需要运行一个脚本,然后分析一下所抓取的网页,然后就可以以程序的方式得到想要的数据了。无论是想从一个链接上取部分数据,或是取一个XML文件并把其导入数据库,那怕就是简单的获取网页内容,cURL 是一个功能强大的PHP库可模拟登录,但尚未实现开启验证码的的论坛登录功能需先打开PHP.ini配置文件启用 extension=php_curl.dll 库php curl库包含方法curl_init                — 初始化一个curl会话curl_setopt              — 为一个curl设置会话参数curl_setopt_array        — 以数组的形式为一个curl设置会话参数curl_exec                — 执行一个curl会话curl_close               — 关闭一个curl会话curl_copy_handle         — 拷贝一个curl连接资源的所有内容和参数curl_errno               — 返回一个包含当前会话错误信息的数字编号curl_error               — 返回一个包含当前会话错误信息的字符串curl_getinfo             — 获取一个curl连接资源句柄的信息curl_multi_add_handle    — 向curl批处理会话中添加单独的curl句柄资源curl_multi_close         — 关闭一个批处理句柄资源curl_multi_exec          — 解析一个curl批处理句柄curl_multi_getcontent    — 返回获取的输出的文本流curl_multi_info_read     — 获取当前解析的curl的相关传输信息curl_multi_init          — 初始化一个curl批处理句柄资源curl_multi_remove_handle — 移除curl批处理句柄资源中的某个句柄资源curl_multi_select        — Get all the sockets associated with the cURL extension, which can then be "selected"curl_version             — 获取curl相关的版本信息curl_init()函数的作用初始化一个curl会话,curl_init()函数唯一的一个参数是可选的,表示一个url地址。curl_exec()函数的作用是执行一个curl会话,唯一的参数是curl_init()函数返回的句柄。curl_close()函数的作用是关闭一个curl会话,唯一的参数是curl_init()函数返回的句柄。*/// 初始化一个 cURL 会话对象$curl = curl_init();//创建对象时可直接设置访问路径,也可通过后来的参数设置//$curl = curl_init('http://localhost/test/index2.php?testget=testGet');// 设置需要抓取的URL//CURLOPT_URL : 这是想用PHP访问并取回的URL地址。也可以在用curl_init()函数初始化时设置这个选项。curl_setopt($curl, CURLOPT_URL, 'http://localhost/test/index2.php?testget=testGet');//CURLOPT_HEADER : 如果想把一个http头信息包含在输出中,设置这个选项为一个非零值。默认0falsecurl_setopt($curl, CURLOPT_HEADER, 0);//CURLOPT_RETURNTRANSFER : 1 如果请求成功只将结果返回,不自动输出任何内容,0 如果成功只返回TRUE,自动输出返回的内容。默认0curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);//==================================使用POST发送信息及文件//发送测测试信息$phoneNumber = '12345678910';$message     = 'This is message';$zhongWen    = '测试中文';//realpath() 返回绝对路径,如 D:\ApacheServer\web\test\test.jpg$file        = realpath('test.jpg');//将要发送的post信息连接成字符串,格式如下。phoneNumber,message,zhongWen为POST接收的键值$curlPostStr = 'phoneNumber=' . $phoneNumber . '&message=' . $message . '&zhongWen=' . $zhongWen ;//或者将信息放到数组中,格式如下。phoneNumber,message,zhongWen为POST接收的键值$curlPostArr = array(    'phoneNumber' => $phoneNumber,    'message'     => $message,    'zhongWen'    => $zhongWen,    'file'        => new CURLFile($file));//不设置CURLOPT_POST与CURLOPT_POSTFIELDS 则默认是GET//CURLOPT_POST : 如果想PHP去做一个正规的HTTP POST,设置这个选项为一个非零值。这个POST是普通的 application/x-www-from-urlencoded 类型,多数被HTML表单使用。curl_setopt($curl, CURLOPT_POST, 1);//CURLOPT_POSTFIELDS : 传递一个作为HTTP POST 的所有数据的字符串。//用字符串形式传送信息不能传送文件//curl_setopt($curl, CURLOPT_POSTFIELDS, $curlPostStr);//PHP的cURL支持通过给CURLOPT_POSTFIELDS传递关联数组(不是字符串)来生成multipart/form-data的POST请求curl_setopt($curl, CURLOPT_POSTFIELDS, $curlPostArr);//==================================使用代理服务器//代理服务器用户名密码,这里是模拟,没经测试$userName = "user";$passWord = "password";//CURLOPT_HTTPPROXYTUNNEL : 1启用,启用时会通过HTTP代理来传输。默认0//curl_setopt($curl, CURLOPT_HTTPPROXYTUNNEL, 1);//CURLOPT_PROXY : 设置通过的HTTP代理服务器。假设代理服务器地址 proxy.lxvoip.com:1080//curl_setopt($curl, CURLOPT_PROXY, 'proxy.lxvoip.com:1080');//CURLOPT_PROXYUSERPWD : 连接到代理服务器的,格式为“[username]:[password]”的用户名和密码。//curl_setopt($curl, CURLOPT_PROXYUSERPWD, "$userName:$passWord");//cURL 的会话除了可以通过 curl_setopt 单独设置某个参数值,也可通过 curl_setopt_array 设置一组参数值,格式如下//设置参数的数组$options = array(    CURLOPT_URL    => 'http://localhost/test/index2.php?testget=testGet',    CURLOPT_HEADER => false);//设置会话的某些参数值,前面已设置的则使用新值curl_setopt_array($curl, $options);// 运行cURL,请求网页$data = curl_exec($curl);// 关闭URL请求curl_close($curl);// 显示获得的数据var_dump($data);//string(67) "hello world! testGet12345678910This is message测试中文test.jpg" /*cURL 会话可设置的参数有:CURLOPT_AUTOREFERER            自动设置header中的referer信息CURLOPT_BINARYTRANSFER         在启用CURLOPT_RETURNTRANSFER时候将获取数据返回CURLOPT_COOKIESESSION          启用时curl会仅仅传递一个session cookie,忽略其他的cookie,默认状况下curl会将所有的cookie返回给服务端。session cookie是指那些用来判断服务器端的session是否有效而存在的cookie。CURLOPT_CRLF                   启用时将Unix的换行符转换成回车换行符。CURLOPT_DNS_USE_GLOBAL_CACHE   启用时会启用一个全局的DNS缓存,此项为线程安全的,并且默认为true。CURLOPT_FAILONERROR            显示HTTP状态码,默认行为是忽略编号小于等于400的HTTP信息CURLOPT_FILETIME               启用时会尝试修改远程文档中的信息。结果信息会通过curl_getinfo()函数的CURLINFO_FILETIME选项返回。CURLOPT_FOLLOWLOCATION         启用时会将服务器服务器返回的“Location:”放在header中递归的返回给服务器,使用CURLOPT_MAXREDIRS可以限定递归返回的数量。CURLOPT_FORBID_REUSE           在完成交互以后强迫断开连接,不能重用。CURLOPT_FRESH_CONNECT          强制获取一个新的连接,替代缓存中的连接。CURLOPT_FTP_USE_EPRT           启用时当FTP下载时,使用EPRT (或 LPRT)命令。设置为FALSE时禁用EPRT和LPRT,使用PORT命令 onlyCURLOPT_FTP_USE_EPSV           启用时,在FTP传输过程中回复到PASV模式前首先尝试EPSV命令。设置为FALSE时禁用EPSV命令。CURLOPT_FTPAPPEND              启用时追加写入文件而不是覆盖它。CURLOPT_FTPASCII               CURLOPT_TRANSFERTEXT的别名。CURLOPT_FTPLISTONLY            启用时只列出FTP目录的名字。CURLOPT_HEADER                 启用时会将头文件的信息作为数据流输出。CURLOPT_HTTPGET                启用时会设置HTTP的method为GET,因为GET是默认是,所以只在被修改的情况下使用。CURLOPT_HTTPPROXYTUNNEL        启用时会通过HTTP代理来传输。CURLOPT_MUTE                   讲curl函数中所有修改过的参数恢复默认值。CURLOPT_NETRC                  在连接建立以后,访问~/.netrc文件获取用户名和密码信息连接远程站点。CURLOPT_NOBODY                 启用时将不对HTML中的body部分进行输出。CURLOPT_NOPROGRESS             启用时关闭curl传输的进度条,此项的默认设置为trueCURLOPT_NOSIGNAL               启用时忽略所有的curl传递给php进行的信号。在SAPI多线程传输时此项被默认打开。CURLOPT_POST                   启用时会发送一个常规的POST请求,类型为:application/x-www-form-urlencoded,就像表单提交的一样。CURLOPT_PUT                    启用时允许HTTP发送文件,必须同时设置CURLOPT_INFILE和CURLOPT_INFILESIZECURLOPT_RETURNTRANSFER         讲curl_exec()获取的信息以文件流的形式返回,而不是直接输出。CURLOPT_SSL_VERIFYPEER         禁用后cURL将终止从服务端进行验证。使用CURLOPT_CAINFO选项设置证书使用CURLOPT_CAPATH选项设置证书目录 如果CURLOPT_SSL_VERIFYPEER(默认值为2)被启用,CURLOPT_SSL_VERIFYHOST需要被设置成TRUE否则设置为FALSE。自cURL 7.10开始默认为TRUE。从cURL 7.10开始默认绑定安装。CURLOPT_TRANSFERTEXT           启用后对FTP传输使用ASCII模式。对于LDAP,它检索纯文本信息而非HTML。在Windows系统上,系统不会把STDOUT设置成binary模式。CURLOPT_UNRESTRICTED_AUTH      在使用CURLOPT_FOLLOWLOCATION产生的header中的多个locations中持续追加用户名和密码信息,即使域名已发生改变。CURLOPT_UPLOAD                 启用时允许文件传输CURLOPT_VERBOSE                启用时会汇报所有的信息,存放在STDERR或指定的CURLOPT_STDERR中CURLOPT_BUFFERSIZE             每次获取的数据中读入缓存的大小,这个值每次都会被填满。CURLOPT_CLOSEPOLICY            不是CURLCLOSEPOLICY_LEAST_RECENTLY_USED就是CURLCLOSEPOLICY_OLDEST,还存在另外三个,但是curl暂时还不支持。.CURLOPT_CONNECTTIMEOUT         在发起连接前等待的时间,如果设置为0,则不等待。CURLOPT_DNS_CACHE_TIMEOUT      设置在内存中保存DNS信息的时间,默认为120秒。CURLOPT_FTPSSLAUTH             FTP验证方式:CURLFTPAUTH_SSL (首先尝试SSL),CURLFTPAUTH_TLS (首先尝试TLS)或CURLFTPAUTH_DEFAULT (让cURL自动决定)。在cURL 7.12.2中被加入。CURLOPT_HTTP_VERSION           设置curl使用的HTTP协议,CURL_HTTP_VERSION_NONE(让curl自己判断),CURL_HTTP_VERSION_1_0(HTTP/1.0),CURL_HTTP_VERSION_1_1(HTTP/1.1)CURLOPT_HTTPAUTH               使用的HTTP验证方法,可选的值 有:CURLAUTH_BASIC,CURLAUTH_DIGEST,CURLAUTH_GSSNEGOTIATE,CURLAUTH_NTLM,CURLAUTH_ANY,CURLAUTH_ANYSAFE, 可以使用“|”操作符分隔多个值,curl让服务器选择一个支持最好的值,CURLAUTH_ANY等价于CURLAUTH_BASIC | CURLAUTH_DIGEST | CURLAUTH_GSSNEGOTIATE | CURLAUTH_NTLM,CURLAUTH_ANYSAFE等价于CURLAUTH_DIGEST | CURLAUTH_GSSNEGOTIATE | CURLAUTH_NTLMCURLOPT_INFILESIZE             设定上传文件的大小CURLOPT_LOW_SPEED_LIMIT        当传输速度小于CURLOPT_LOW_SPEED_LIMIT时,PHP会根据CURLOPT_LOW_SPEED_TIME来判断是否因太慢而取消传输。CURLOPT_LOW_SPEED_TIME         当传输速度小于CURLOPT_LOW_SPEED_LIMIT时,PHP会根据CURLOPT_LOW_SPEED_TIME来判断是否因太慢而取消传输。CURLOPT_MAXCONNECTS            允许的最大连接数量,超过是会通过CURLOPT_CLOSEPOLICY决定应该停止哪些连接CURLOPT_MAXREDIRS              指定最多的HTTP重定向的数量,这个选项是和CURLOPT_FOLLOWLOCATION一起使用的。CURLOPT_PORT                   一个可选的用来指定连接端口的量CURLOPT_PROXYAUTH              HTTP代理连接的验证方式。使用在CURLOPT_HTTPAUTH中的位域标志来设置相应选项。对于代理验证只有CURLAUTH_BASIC和CURLAUTH_NTLM当前被支持。在cURL 7.10.7中被加入。CURLOPT_PROXYPORT              代理服务器的端口。端口也可以在CURLOPT_PROXY中进行设置。CURLOPT_PROXYTYPE              不是CURLPROXY_HTTP (默认值) 就是CURLPROXY_SOCKS5。在cURL 7.10中被加入。CURLOPT_RESUME_FROM            在恢复传输时传递一个字节偏移量(用来断点续传)CURLOPT_SSL_VERIFYHOST         1 检查服务器SSL证书中是否存在一个公用名(common name)。译者注:公用名(Common Name)一般来讲就是填写你将要申请SSL证书的域名 (domain)或子域名(sub domain)。2 检查公用名是否存在,并且是否与提供的主机名匹配。CURLOPT_SSLVERSION             使用的SSL版本(23)。默认情况下PHP会自己检测这个值,尽管有些情况下需要手动地进行设置。CURLOPT_TIMECONDITION          如果在CURLOPT_TIMEVALUE指定的某个时间以后被编辑过,则使用CURL_TIMECOND_IFMODSINCE返回页面,如果没有被修 改过,并且CURLOPT_HEADER为true,则返回一个"304 Not Modified"的header,CURLOPT_HEADER为false,则使用CURL_TIMECOND_ISUNMODSINCE,默认值为 CURL_TIMECOND_IFMODSINCECURLOPT_TIMEOUT                设置curl允许执行的最长秒数CURLOPT_TIMEVALUE              设置一个CURLOPT_TIMECONDITION使用的时间戳,在默认状态下使用的是CURL_TIMECOND_IFMODSINCECURLOPT_CAINFO                 一个保存着1个或多个用来让服务端验证的证书的文件名。这个参数仅仅在和CURLOPT_SSL_VERIFYPEER一起使用时才有意义。 CURLOPT_CAPATH                 一个保存着多个CA证书的目录。这个选项是和CURLOPT_SSL_VERIFYPEER一起使用的。CURLOPT_COOKIE                 设定HTTP请求中“Set-Cookie:”部分的内容。CURLOPT_COOKIEFILE             包含cookie信息的文件名称,这个cookie文件可以是Netscape格式或者HTTP风格的header信息。CURLOPT_COOKIEJAR              连接关闭以后,存放cookie信息的文件名称CURLOPT_CUSTOMREQUEST          使用一个自定义的请求信息来代替"GET""HEAD"作为HTTP请求。这对于执行"DELETE" 或者其他更隐蔽的HTTP请求。有效值如"GET""POST""CONNECT"等等。也就是说,不要在这里输入整个HTTP请求。例如输入"GET /index.html HTTP/1.0\r\n\r\n"是不正确的。在确定服务器支持这个自定义请求的方法前不要使用。CURLOPT_EGBSOCKET              Like CURLOPT_RANDOM_FILE, except a filename to an Entropy Gathering Daemon socket.CURLOPT_ENCODING               header中“Accept-Encoding: ”部分的内容,支持的编码格式为:"identity""deflate""gzip"。如果设置为空字符串,则表示支持所有的编码格式CURLOPT_FTPPORT                这个值将被用来获取供FTP"POST"指令所需要的IP地址。"POST"指令告诉远程服务器连接到我们指定的IP地址。这个字符串可以是纯文本的IP地址、主机名、一个网络接口名(UNIX下)或者只是一个'-'来使用默认的IP地址。CURLOPT_INTERFACE              在外部网络接口中使用的名称,可以是一个接口名,IP或者主机名。CURLOPT_KRB4LEVEL              KRB4(Kerberos 4)安全级别的设置,可以是一下几个值之一:"clear""safe""confidential""private"。默认的值 为"private",设置为null的时候表示禁用KRB4,现在KRB4安全仅能在FTP传输中使用。CURLOPT_POSTFIELDS             在HTTP中的“POST”操作。如果要传送一个文件需要设置数组某键值对应元素值为 new CURLFile(realpath($file)) $file为传送文件对应项目相对路径CURLOPT_PROXY                  设置通过的HTTP代理服务器CURLOPT_PROXYUSERPWD           连接到代理服务器的,格式为“[username]:[password]”的用户名和密码。CURLOPT_RANDOM_FILE            设定存放SSL用到的随机数种子的文件名称CURLOPT_RANGE                  设置HTTP传输范围,可以用“X-Y”的形式设置一个传输区间,如果有多个HTTP传输,则使用逗号分隔多个值,形如:"X-Y,N-M"。CURLOPT_REFERER                设置header中"Referer: " 部分的值。CURLOPT_SSL_CIPHER_LIST        一个SSL的加密算法列表。例如RC4-SHA和TLSv1都是可用的加密列表。CURLOPT_SSLCERT                传递一个包含PEM格式证书的字符串。CURLOPT_SSLCERTPASSWD          传递一个包含使用CURLOPT_SSLCERT证书必需的密码。CURLOPT_SSLCERTTYPE            证书的类型。支持的格式有"PEM" (默认值), "DER""ENG"。CURLOPT_SSLENGINE              用来在CURLOPT_SSLKEY中指定的SSL私钥的加密引擎变量。CURLOPT_SSLENGINE_DEFAULT      用来做非对称加密操作的变量。CURLOPT_SSLKEY                 包含SSL私钥的文件名。CURLOPT_SSLKEYPASSWD           在CURLOPT_SSLKEY中指定了的SSL私钥的密码。由于这个选项包含了敏感的密码信息,记得保证这个PHP脚本的安全。CURLOPT_SSLKEYTYPE             CURLOPT_SSLKEY中规定的私钥的加密类型,支持的密钥类型为"PEM"(默认值)、"DER""ENG"。CURLOPT_URL                    需要获取的URL地址,也可以在PHP的curl_init()函数中设置。CURLOPT_USERAGENT              在HTTP请求中包含一个”user-agent”头的字符串。CURLOPT_USERPWD                传递一个连接中需要的用户名和密码,格式为:“[username]:[password]”。CURLOPT_HTTP200ALIASES         设置不再以error的形式来处理HTTP 200的响应,格式为一个数组。CURLOPT_HTTPHEADER             设置一个header中传输内容的数组。CURLOPT_POSTQUOTE              在FTP请求执行完成后,在服务器上执行的一组FTP命令。CURLOPT_QUOTE                  一组先于FTP请求的在服务器上执行的FTP命令。CURLOPT_FILE                   设置输出文件的位置,值是一个资源类型,默认为STDOUT (浏览器)。CURLOPT_INFILE                 在上传文件的时候需要读取的文件地址,值是一个资源类型。CURLOPT_STDERR                 设置一个错误输出地址,值是一个资源类型,取代默认的STDERR。CURLOPT_WRITEHEADER            设置header部分内容的写入的文件地址,值是一个资源类型。CURLOPT_HEADERFUNCTION         设置一个回调函数,这个函数有两个参数,第一个是curl的资源句柄,第二个是输出的header数据。header数据的输出必须依赖这个函数,返回已写入的数据大小。CURLOPT_PASSWDFUNCTION         设置一个回调函数,有三个参数,第一个是curl的资源句柄,第二个是一个密码提示符,第三个参数是密码长度允许的最大值。返回密码的值。CURLOPT_READFUNCTION           设置一个回调函数,有两个参数,第一个是curl的资源句柄,第二个是读取到的数据。数据读取必须依赖这个函数。返回读取数据的大小,比如0或者EOF。CURLOPT_WRITEFUNCTION          设置一个回调函数,有两个参数,第一个是curl的资源句柄,第二个是写入的数据。数据写入必须依赖这个函数。返回精确的已写入数据的大小*/?>

index2.php
hello world!

<?phpif($_GET['testget']){    echo $_GET['testget'];}if($_POST['phoneNumber']){    echo $_POST['phoneNumber'];}if($_POST['message']){    echo $_POST['message'];}if($_POST['zhongWen']){    echo $_POST['zhongWen'];}if($_FILES["file"]){    echo $_FILES["file"]['name'];}?>
0 0
原创粉丝点击