|
|
我循環用file_get_contents抓取一堆url，但總是會在不到第100個URL的時候停下，提示我：“Warning: file_get_contents(URL) [function.file-get-
contents]: failed to open stream: HTTP request failed! HTTP/1.0 500 Read timed out
in D:/website/extra.php on line 65”
我在程序的開始已經有set_time_limit(0);了啊，那上面的錯誤會是因為什么呢？
回答
set_time_limit只是設置你的php程序的超時時間，而不是file_get_contents函數讀取URL的超時時間。
從警告信息來看，是被抓取的網頁出現了服務器500錯誤，可能是他的程序出現超時了。
如果想改變file_get_contents的超時時間，可以用resource $context的timeout參數：
復制代碼 代碼如下:
$opts = array(
'http'=>array(
'method'=>"GET",
'timeout'=>60,
)
);
$context = stream_context_create($opts);
$html =file_get_contents('http://www.example.com', false, $context);
fpassthru($fp);
這樣readfile函數的超時時間就設置成了10秒，如果你夠細心的話，還會發現數組中還有一些其他的配置，第一維中的http是指定使用的網絡協議，二維中的method批的是http的請求方法get,post,head等，timeout就是超時時間了。我想很多人會使用php內置的file_get_contents函數來下載網頁，因為這個函數使用起來夠簡單。很多人也都很簡單的使用它，只要傳遞一個鏈接它就可以自動的發送get請求，并將網頁內容下載下來。如果比較復雜的情況，比如使用POST請求，使用代理下載，定義User-Agent等等，這時很多人就會認為這個函數做不了這樣的事情，就會選擇其他方式，如curl，來實現。實際上，這些事情file_get_contents也可以做到，
就是通過它的第三個參數，設置http請求的context。
支持的設置和使用方式見官方說明：http://www.php.NET/manual/en/context.http.php
附：目前我知道的支持context參數的php內置函數有file_get_contents,file_put_contents,readfile,file,fopen,copy（估計這一類的函數都支持吧，待確認）。
復制代碼 代碼如下:
function Post($url, $post = null)
{
$context = array();
if (is_array($post))
{
ksort($post);
$context['http'] = array
(
'timeout'=>60,
'method' => 'POST',
'content' => http_build_query($post, '', '&'),
);
}
return file_get_contents($url, false, stream_context_create($context));
}
$data = array
(
'name' => 'test',
'email' => '[email protected]',
'submit' => 'submit',
);
echo Post('http://www.yifu.info', $data);
OK , 上面函數完美了，既解決了超時控制又解決了Post傳值。再配合康盛的改良版RC4加密解密算法，做一個安全性很高的webservice就簡單多了。
php技術：詳解PHP內置訪問資源的超時時間 time_out file_get_contents read_file，轉載需保留來源！
鄭重聲明：本文版權歸原作者所有，轉載文章僅為傳播更多信息之目的，如作者信息標記有誤，請第一時間聯系我們修改或刪除，多謝。
