天天躁日日躁狠狠躁AV麻豆-天天躁人人躁人人躁狂躁-天天澡夜夜澡人人澡-天天影视香色欲综合网-国产成人女人在线视频观看-国产成人女人视频在线观看

PHP CURL獲取cookies模擬登錄的方法

要提取google搜索的部分數(shù)據(jù),發(fā)現(xiàn)google對于軟件抓取它的數(shù)據(jù)屏蔽的厲害,以前偽造下 USER-AGENT 就可以抓數(shù)據(jù),但是現(xiàn)在卻不行了。利用抓包數(shù)據(jù)發(fā)現(xiàn),Google 判斷了 cookies,當你沒有cookies的時候,直接返回 302 跳轉,而且是連續(xù)幾十個302跳轉,根本抓不了數(shù)據(jù)。
因此,在發(fā)送搜索命令時,需要先提取 cookies 并保存,然后利用保存下來的這個cookies再次發(fā)送搜索命令即可正常抓數(shù)據(jù)了。這其實和論壇的模擬登錄一個道理,先POST登錄,獲取cookies并保存,然后利用這個cookies訪問就可以了。
php 代碼如下:
復制代碼 代碼如下:
<?php
header('Content-Type: text/html; charset=utf-8');

$cookie_file = dirname(__FILE__).'/cookie.txt';
//$cookie_file = tempnam("tmp","cookie");

//先獲取cookies并保存
$url = "http://www.google.com.hk";
$ch = curl_init($url); //初始化
curl_setopt($ch, CURLOPT_HEADER, 0); //不返回header部分
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); //返回字符串,而非直接輸出
curl_setopt($ch, CURLOPT_COOKIEJAR,  $cookie_file); //存儲cookies
curl_exec($ch);
curl_close($ch);

//使用上面保存的cookies再次訪問
$url = "http://www.google.com.hk/search?oe=utf8&ie=utf8&source=uds&hl=zh-CN&q=qq";
$ch = curl_init($url);
curl_setopt($ch, CURLOPT_HEADER, 0);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
curl_setopt($ch, CURLOPT_COOKIEFILE, $cookie_file); //使用上面獲取的cookies
$response = curl_exec($ch);
curl_close($ch);

echo $response;
?>

php技術PHP CURL獲取cookies模擬登錄的方法,轉載需保留來源!

鄭重聲明:本文版權歸原作者所有,轉載文章僅為傳播更多信息之目的,如作者信息標記有誤,請第一時間聯(lián)系我們修改或刪除,多謝。

主站蜘蛛池模板: av色天堂2018在线观看 | 99人精品福利在线观看 | 中文日韩亚洲欧美字幕 | 亚洲精品第一综合99久久 | writeas雷狮直播 | 国产欧美日韩中文视频在线 | 999视频在线观看 | 国产精品伊人 | 精品午夜中文字幕熟女人妻在线 | 成人国产免费 | xxx免费观看 | 草莓视频在线播放视频 | 国产精品www视频免费看 | 国内精品视频久久久久免费 | 19十主播福利视频 | 伊人网综合 | 欧美日韩另类在线专区 | 久久精品亚洲国产AV涩情 | 亚洲在线国产日韩欧美 | 日本久久道一区二区三区 | 啊轻点啊再深点视频免费 | 干极品美女| 忘忧草研究院一二三 | 先锋影音av最新资源 | 夜色55夜色66亚洲精品网站 | 欧洲video60 | 极品少妇伦理一区二区 | 51精品少妇人妻AV一区二区 | 无人区日本电影在线观看高清 | 18videosex性欧美黑色 | 黑丝女仆恋上我 | 亚洲zooz人禽交xxxx | 2020精品国产视 | 高傲教师麻麻被同学调教123 | 欧美末成年videos丨 | 色精品极品国产在线视频 | 国产午夜理论片YY8840Y | 亚洲AV成人无码网天堂 | 小学生偷拍妈妈视频遭性教育 | 囯产精品久久久久免费蜜桃 | 99re久久热在线播放快 |