PHP通过伪造和模拟客户端COOKIE登陆来采集抓取远程网址

以下讨论的是和伪造 模拟 客户端 COOKIE 登陆 采集 抓取 远程网址 相关的PHP通过伪造和模拟客户端COOKIE登陆来采集抓取远程网址页面内容的方法教程文章，内容是本站精心挑选整理的教程，希望对广大的网友给到帮助,下面是详细内容：

　　平时开发中经常会遇到抓取某个页面内容， 但是有时候某些页面需要登陆才能访问， 最常见的就是论坛， 这时候我们需要来使用curl模拟登陆。 大致思路：需要先请求提取 cookies 并保存，然后利用保存下来的这个cookies再次发送请求来获取页面内容，下面我们直接上代码

1. <?php 
2. /** 
3.  * @Brief PHP读取Curl模拟登陆， 获取cookie， 带cookie进行请求 
4.  * @Date: 2016/10/20
5.  * @Time: 9:41 
6.  */ 
7. //设置cookie保存位置 
8. $cookieFile = dirname(__FILE__).'cookie.curl.tmp'; 
9. //第一步：获取cookie 
10. $url = 'http://www.aseoe.com'; 
11. $data = array( 
12.     'username'  => 'aseoe', 
13.     'password'  => 'aseoe', 
14. ); 
15. //curl初始化 
16. $ch = curl_init(); 
17. curl_setopt($ch, CURLOPT_URL, $url); 
18. //设置为post请求 
19. curl_setopt($ch, CURLOPT_POST, true); 
20. //设置附带返回header信息为空 
21. curl_setopt($ch, CURLOPT_HEADER, 0); 
22. //post数据 
23. curl_setopt($ch, CURLOPT_POSTFIELDS, $data); 
24. //cookie保存文件位置 
25. curl_setopt($ch, CURLOPT_COOKIEJAR, $cookieFile); 
26. //设置数据返回作为变量储存，而不是直接输出 
27. curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); 
28. //执行请求 
29. $ret = curl_exec($ch); 
30. //关闭连接 
31. curl_close($ch); 
32. //第二步：附带cookie请求需要登陆的页面 
33. $url = 'http://www.aseoe.com'; 
34. //curl初始化 
35. $ch = curl_init(); 
36. curl_setopt($ch, CURLOPT_URL, $url); 
37. //设置为post请求 
38. curl_setopt($ch, CURLOPT_POST, true); 
39. //设置附带返回header信息为空 
40. curl_setopt($ch, CURLOPT_HEADER, 0); 
41. //设置cookie信息文件位置， 注意与第二步中的获取不同，这里是读取 
42. curl_setopt($ch, CURLOPT_COOKIEFILE, $cookieFile); 
43. //设置数据返回作为变量储存，而不是直接输出 
44. curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); 
45. //执行请求 
46. $ret = curl_exec($ch); 
47. //关闭连接 
48. curl_close($ch); 
49. //打印抓取内容 
50. var_dump($ret); 

　　这样我们就抓取到了需要登陆才能访问页面的内容， 注意上面的地址只是一个示例，需要换成你想要抓取页面的地址。

　平时开发中经常会遇到抓取某个页面内容， 但是有时候某些页面需要登陆才能访问， 最常见的就是论坛， 这时候我们需要来使用curl模拟登陆。 大致思路：需要先请求提取 cookies 并保存，然后利用保存下来

End. 教程到这里讲完了，阅读是否有所收获呢？本站还提供有伪造 模拟 客户端 COOKIE 登陆 采集 抓取 远程网址 相关的内容，欢迎继续阅读。