在PHP開發中工做裏很是多使用到超時處理到超時的場合,我說幾個場景:php
異步獲取數據若是某個後端數據源獲取不成功則跳過,不影響整個頁面展示html
爲了保證Web服務器不會由於當個頁面處理性能差而致使沒法訪問其餘頁面,則會對某些頁面操做設置mysql
對於某些上傳或者不肯定處理時間的場合,則須要對整個流程中全部超時設置爲無限,不然任何一個環節設置不當,都會致使莫名執行中斷nginx
多個後端模塊(MySQL、Memcached、HTTP接口),爲了防止單個接口性能太差,致使整個前面獲取數據太緩慢,影響頁面打開速度,引發雪崩sql
。。。不少須要超時的場合數據庫
這些地方都須要考慮超時的設定,可是PHP中的超時都是分門別類,各個處理方式和策略都不一樣,爲了系統的描述,我總結了PHP中經常使用的超時處理的總結。apache
通常在性能很高的狀況下,缺省全部超時配置都是30秒,可是在上傳文件,或者網絡速度很慢的狀況下,那麼可能觸發超時操做。編程
目前apachefastcgiphp-fpm模式下有三個超時設置:後端
fastcgi超時設置:服務器
修改httpd.conf的fastcgi鏈接配置,相似以下:
<IfModulemod_fastcgi.c>FastCgiExternalServer/home/forum/apache/apache_php/cgi-bin/php-cgi-socket/home/forum/php5/etc/php-fpm.sock ScriptAlias/fcgi-bin/」/home/forum/apache/apache_php/cgi-bin/」 AddHandlerphp-fastcgi.php Actionphp-fastcgi/fcgi-bin/php-cgi AddTypeapplication/x-httpd-php.php </IfModule>
缺省配置是30s,若是須要定製本身的配置,須要修改配置,好比修改成100秒:(修改後重啓apache):
<IfModulemod_fastcgi.c> FastCgiExternalServer/home/forum/apache/apache_php/cgi-bin/php-cgi-socket/home/forum/php5/etc/php-fpm.sock-idle-timeout100 ScriptAlias/fcgi-bin/」/home/forum/apache/apache_php/cgi-bin/」 AddHandlerphp-fastcgi.php Actionphp-fastcgi/fcgi-bin/php-cgi AddTypeapplication/x-httpd-php.php </IfModule>
若是超時會返回500錯誤,斷開跟後端php服務的鏈接,同時記錄一條apache錯誤日誌:
[ThuJan2718:30:152011][error][client10.81.41.110]FastCGI:commwithserver」/home/forum/apache/apache_php/cgi-bin/php-cgi」aborted:idletimeout(30sec) [ThuJan2718:30:152011][error][client10.81.41.110]FastCGI:incompleteheaders(0bytes)receivedfromserver」/home/forum/apache/apache_php/cgi-bin/php-cgi」
其餘fastcgi配置參數說明:
IdleTimeout發呆時限ProcessLifeTime一個進程的最長生命週期,過時以後無條件kill MaxProcessCount最大進程個數 DefaultMinClassProcessCount每一個程序啓動的最小進程個數 DefaultMaxClassProcessCount每一個程序啓動的最大進程個數 IPCConnectTimeout程序響應超時時間 IPCCommTimeout與程序通信的最長時間,上面的錯誤有可能就是這個值設置太小形成的 MaxRequestsPerProcess每一個進程最多完成處理個數,達成後自殺
配置:lighttpd.conf
Lighttpd配置中,關於超時的參數有以下幾個(篇幅考慮,只寫讀超時,寫超時參數同理):
主要涉及選項:
server.max-keep-alive-idle=5 server.max-read-idle=60 server.read-timeout=0 server.max-connection-idle=360 ————————————————– #每次keep-alive的最大請求數,默認值是16 server.max-keep-alive-requests=100 #keep-alive的最長等待時間,單位是秒,默認值是5 server.max-keep-alive-idle=1200 #lighttpd的work子進程數,默認值是0,單進程運行 server.max-worker=2 #限制用戶在發送請求的過程當中,最大的中間停頓時間(單位是秒), #若是用戶在發送請求的過程當中(沒發完請求),中間停頓的時間太長,lighttpd會主動斷開鏈接 #默認值是60(秒) server.max-read-idle=1200 #限制用戶在接收應答的過程當中,最大的中間停頓時間(單位是秒), #若是用戶在接收應答的過程當中(沒接完),中間停頓的時間太長,lighttpd會主動斷開鏈接 #默認值是360(秒) server.max-write-idle=12000 #讀客戶端請求的超時限制,單位是秒,配爲0表示不做限制 #設置小於max-read-idle時,read-timeout生效 server.read-timeout=0 #寫應答頁面給客戶端的超時限制,單位是秒,配爲0表示不做限制 #設置小於max-write-idle時,write-timeout生效 server.write-timeout=0 #請求的處理時間上限,若是用了mod_proxy_core,那就是和後端的交互時間限制,單位是秒 server.max-connection-idle=1200 ————————————————–
說明:
對於一個keep-alive鏈接上的連續請求,發送第一個請求內容的最大間隔由參數max-read-idle決定,從第二個請求起,發送請求內容的最大間隔由參數max-keep-alive-idle決定。請求間的間隔超時也由max-keep-alive-idle決定。發送請求內容的總時間超時由參數read-timeout決定。Lighttpd與後端交互數據的超時由max-connection-idle決定。
延伸閱讀:
http://www.snooda.com/read/244
配置:nginx.conf
http{ #Fastcgi:(針對後端的fastcgi生效,fastcgi不屬於proxy模式) fastcgi_connect_timeout5;#鏈接超時 fastcgi_send_timeout10; #寫超時 fastcgi_read_timeout10;#讀取超時 #Proxy:(針對proxy/upstreams的生效) proxy_connect_timeout15s;#鏈接超時 proxy_read_timeout24s;#讀超時 proxy_send_timeout10s; #寫超時 }
說明:
Nginx 的超時設置卻是很是清晰容易理解,上面超時針對不一樣工做模式,可是由於超時帶來的問題是很是多的。
延伸閱讀:
http://hi.baidu.com/pibuchou/blog/item/a1e330dd71fb8a5995ee3753.html
http://hi.baidu.com/pibuchou/blog/item/7cbccff0a3b77dc60b46e024.html
http://hi.baidu.com/pibuchou/blog/item/10a549818f7e4c9df703a626.html
http://www.apoyl.com/?p=466
配置:php-fpm.conf
<?xmlversion=」1.0″?> <configuration> //… Setsthelimitonthenumberofsimultaneousrequeststhatwillbeserved. EquivalenttoApacheMaxClientsdirective. EquivalenttoPHP_FCGI_CHILDRENenvironmentinoriginalphp.fcgi Usedwithanypm_style. #php-cgi的進程數量 <valuename=」max_children」>128</value> Thetimeout(inseconds)forservingasinglerequestafterwhichtheworkerprocesswillbeterminated Shouldbeusedwhen’max_execution_time’inioptiondoesnotstopscriptexecutionforsomereason ’0s’means’off’ #php-fpm 請求執行超時時間,0s爲永不超時,不然設置一個 Ns 爲超時的秒數 <valuename=」request_terminate_timeout」>0s</value> Thetimeout(inseconds)forservingofsinglerequestafterwhichaphpbacktracewillbedumpedtoslow.logfile ’0s’means’off’ <valuename=」request_slowlog_timeout」>0s</value> </configuration>
說明:
在php.ini中,有一個參數max_execution_time能夠設置PHP腳本的最大執行時間,可是,在php-cgi(php-fpm)中,該參數不會起效。真正可以控制PHP腳本最大執行時:
<valuename=」request_terminate_timeout」>0s</value>
就是說若是是使用mod_php5.so的模式運行max_execution_time是會生效的,可是若是是php-fpm模式中運行時不生效的。
延伸閱讀:
http://blog.s135.com/file_get_contents/
配置:php.ini
選項:
max_execution_time=30
或者在代碼裏設置:
ini_set(「max_execution_time」,30); set_time_limit(30);
說明:
對當前會話生效,好比設置0一直不超時,可是若是php的safe_mode打開了,這些設置都會不生效。
效果同樣,可是具體內容須要參考php-fpm部份內容,若是php-fpm中設置了request_terminate_timeout的話,那麼max_execution_time就不生效。
通常咱們訪問HTTP方式不少,主要是:curl,socket,file_get_contents()等方法。
若是碰到對方服務器一直沒有響應的時候,咱們就悲劇了,很容易把整個服務器搞死,因此在訪問http的時候也須要考慮超時的問題。
CURL 是咱們經常使用的一種比較靠譜的訪問HTTP協議接口的lib庫,性能高,還有一些併發支持的功能等。
CURL:
curl_setopt($ch,opt)能夠設置一些超時的設置,主要包括: *(重要)CURLOPT_TIMEOUT設置cURL容許執行的最長秒數。 *(重要)CURLOPT_TIMEOUT_MS設置cURL容許執行的最長毫秒數。(在cURL7.16.2中被加入。從PHP5.2.3起可以使用。) CURLOPT_CONNECTTIMEOUT在發起鏈接前等待的時間,若是設置爲0,則無限等待。 CURLOPT_CONNECTTIMEOUT_MS嘗試鏈接等待的時間,以毫秒爲單位。若是設置爲0,則無限等待。在cURL7.16.2中被加入。從PHP5.2.3開始可用。 CURLOPT_DNS_CACHE_TIMEOUT設置在內存中保存DNS信息的時間,默認爲120秒。
curl普通秒級超時:
$ch=curl_init(); curl_setopt($ch,CURLOPT_URL,$url); curl_setopt($ch,CURLOPT_RETURNTRANSFER,1); curl_setopt($ch,CURLOPT_TIMEOUT,60);//只須要設置一個秒的數量就能夠 curl_setopt($ch,CURLOPT_HTTPHEADER,$headers); curl_setopt($ch,CURLOPT_USERAGENT,$defined_vars['HTTP_USER_AGENT']);
curl普通秒級超時使用:
curl_setopt($ch,CURLOPT_TIMEOUT,60); curl若是須要進行毫秒超時,須要增長: curl_easy_setopt(curl,CURLOPT_NOSIGNAL,1L);
或者是:
curl_setopt($ch,CURLOPT_NOSIGNAL,true);是能夠支持毫秒級別超時設置的
curl一個毫秒級超時的例子:
<?php if(!isset($_GET['foo'])){ //Client $ch=curl_init(‘http://example.com/’); curl_setopt($ch,CURLOPT_RETURNTRANSFER,true); curl_setopt($ch,CURLOPT_NOSIGNAL,1);//注意,毫秒超時必定要設置這個 curl_setopt($ch,CURLOPT_TIMEOUT_MS,200);//超時毫秒,cURL7.16.2中被加入。從PHP5.2.3起可以使用 $data=curl_exec($ch); $curl_errno=curl_errno($ch); $curl_error=curl_error($ch); curl_close($ch); if($curl_errno>0){ echo」cURLError($curl_errno):$curl_errorn」; }else{ echo」Datareceived:$datan」; } }else{ //Server sleep(10); echo」Done.」; } ?>
其餘一些技巧:
按照經驗總結是:cURL版本>=libcurl/7.21.0版本,毫秒級超時是必定生效的,切記。
curl_multi的毫秒級超時也有問題。。單次訪問是支持ms級超時的,curl_multi並行調多個會不許
除了curl,咱們還常常本身使用fsockopen、或者是file操做函數來進行HTTP協議的處理,因此,咱們對這塊的超時處理也是必須的。
通常鏈接超時能夠直接設置,可是流讀取超時須要單獨處理。
本身寫代碼處理:
$tmCurrent=gettimeofday(); $intUSGone=($tmCurrent['sec']-$tmStart['sec'])*1000000 +($tmCurrent['usec']-$tmStart['usec']); if($intUSGone>$this->_intReadTimeoutUS){ returnfalse; }
或者使用內置流處理函數stream_set_timeout()和stream_get_meta_data()處理:
<?php//Timeoutinseconds $timeout=5; $fp=fsockopen(「example.com」,80,$errno,$errstr,$timeout); if($fp){ fwrite($fp,」GET/HTTP/1.0rn」); fwrite($fp,」Host:example.comrn」); fwrite($fp,」Connection:Closernrn」); stream_set_blocking($fp,true);//重要,設置爲非阻塞模式 stream_set_timeout($fp,$timeout);//設置超時 $info=stream_get_meta_data($fp); while((!feof($fp))&&(!$info['timed_out'])){ $data.=fgets($fp,4096); $info=stream_get_meta_data($fp); ob_flush; flush(); } if($info['timed_out']){ echo」ConnectionTimedOut!」; }else{ echo$data; } }
file_get_contents超時:
<?php$timeout=array( ‘http’=>array( ‘timeout’=>5//設置一個超時時間,單位爲秒 ) ); $ctx=stream_context_create($timeout); $text=file_get_contents(「http://example.com/」,0,$ctx); ?>
fopen超時:
<?php$timeout=array( ‘http’=>array( ‘timeout’=>5//設置一個超時時間,單位爲秒 ) ); $ctx=stream_context_create($timeout); if($fp=fopen(「http://example.com/」,」r」,false,$ctx)){ while($c=fread($fp,8192)){ echo$c; } fclose($fp); } ?>
php中的mysql客戶端都沒有設置超時的選項,mysqli和mysql都沒有,可是libmysql是提供超時選項的,只是咱們在php中隱藏了而已。
那麼如何在PHP中使用這個操做捏,就須要咱們本身定義一些MySQL操做常量,主要涉及的常量有:
MYSQL_OPT_READ_TIMEOUT=11; MYSQL_OPT_WRITE_TIMEOUT=12;
這兩個,定義之後,可使用options設置相應的值。
不過有個注意點,mysql內部實現:
超時設置單位爲秒,最少配置1秒
但mysql底層的read會重試兩次,因此實際會是3秒
重試兩次+ 自身一次=3倍超時時間,那麼就是說最少超時時間是3秒,不會低於這個值,對於大部分應用來講能夠接受,可是對於小部分應用須要優化。
查看一個設置訪問mysql超時的php實例:
<?php//本身定義讀寫超時常量 if(!defined(‘MYSQL_OPT_READ_TIMEOUT’)){ define(‘MYSQL_OPT_READ_TIMEOUT’,11); } if(!defined(‘MYSQL_OPT_WRITE_TIMEOUT’)){ define(‘MYSQL_OPT_WRITE_TIMEOUT’,12); } //設置超時 $mysqli=mysqli_init(); $mysqli->options(MYSQL_OPT_READ_TIMEOUT,3); $mysqli->options(MYSQL_OPT_WRITE_TIMEOUT,1); //鏈接數據庫 $mysqli->real_connect(「localhost」,」root」,」root」,」test」); if(mysqli_connect_errno()){ printf(「Connectfailed:%s/n」,mysqli_connect_error()); exit(); } //執行查詢sleep1秒不超時 printf(「Hostinformation:%s/n」,$mysqli->host_info); if(!($res=$mysqli->query(‘selectsleep(1)’))){ echo」query1error:」.$mysqli->error.」/n」; }else{ echo」Query1:querysuccess/n」; } //執行查詢sleep9秒會超時 if(!($res=$mysqli->query(‘selectsleep(9)’))){ echo」query2error:」.$mysqli->error.」/n」; }else{ echo」Query2:querysuccess/n」; } $mysqli->close(); echo」closemysqlconnection/n」; ?>
延伸閱讀:
http://blog.csdn.net/heiyeshuwu/article/details/5869813
php_memcache客戶端:
鏈接超時:boolMemcache::connect(string$host[,int$port[,int$timeout]])
在get和set的時候,都沒有明確的超時設置參數。
libmemcached客戶端:在php接口沒有明顯的超時參數。
說明:因此說,在PHP中訪問Memcached是存在不少問題的,須要本身hack部分操做,或者是參考網上補丁。
客戶端:libmemcached客戶端
說明:memcache超時配置能夠配置小點,好比5,10個毫秒已經夠用了,超過這個時間還不如從數據庫查詢。
下面是一個鏈接和讀取set數據的超時的C++示例:
//建立鏈接超時(鏈接到Memcached) memcached_st*MemCacheProxy::_create_handle() { memcached_st*mmc=NULL; memcached_return_tprc; if(_mpool!=NULL){//getfrompool mmc=memcached_pool_pop(_mpool,false,&prc); if(mmc==NULL){ __LOG_WARNING__(「MemCacheProxy」,」gethandlefrompoolerror[%d]「,(int)prc); } returnmmc; } memcached_st*handle=memcached_create(NULL); if(handle==NULL){ __LOG_WARNING__(「MemCacheProxy」,」create_handleerror」); returnNULL; } //設置鏈接/讀取超時 memcached_behavior_set(handle,MEMCACHED_BEHAVIOR_HASH,MEMCACHED_HASH_DEFAULT); memcached_behavior_set(handle,MEMCACHED_BEHAVIOR_NO_BLOCK,_noblock);//參數MEMCACHED_BEHAVIOR_NO_BLOCK爲1使超時配置生效,不設置超時會不生效,關鍵時候會悲劇的,容易引發雪崩 memcached_behavior_set(handle,MEMCACHED_BEHAVIOR_CONNECT_TIMEOUT,_connect_timeout);//鏈接超時 memcached_behavior_set(handle,MEMCACHED_BEHAVIOR_RCV_TIMEOUT,_read_timeout);//讀超時 memcached_behavior_set(handle,MEMCACHED_BEHAVIOR_SND_TIMEOUT,_send_timeout);//寫超時 memcached_behavior_set(handle,MEMCACHED_BEHAVIOR_POLL_TIMEOUT,_poll_timeout); //設置一致hash //memcached_behavior_set_distribution(handle,MEMCACHED_DISTRIBUTION_CONSISTENT); memcached_behavior_set(handle,MEMCACHED_BEHAVIOR_DISTRIBUTION,MEMCACHED_DISTRIBUTION_CONSISTENT); memcached_returnrc; for(uinti=0;i<_server_count;i++){ rc=memcached_server_add(handle,_ips[i],_ports[i]); if(MEMCACHED_SUCCESS!=rc){ __LOG_WARNING__(「MemCacheProxy」,」addserver[%s:%d]failed.」,_ips[i],_ports[i]); } } _mpool=memcached_pool_create(handle,_min_connect,_max_connect); if(_mpool==NULL){ __LOG_WARNING__(「MemCacheProxy」,」create_poolerror」); returnNULL; } mmc=memcached_pool_pop(_mpool,false,&prc); if(mmc==NULL){ __LOG_WARNING__(「MyMemCacheProxy」,」gethandlefrompoolerror[%d]「,(int)prc); } //__LOG_DEBUG__(「MemCacheProxy」,」gethandle[%p]「,handle); returnmmc; } //設置一個key超時(set一個數據到memcached) boolMemCacheProxy::_add(memcached_st*handle,unsignedint*key,constchar*value,intlen,unsignedinttimeout) { memcached_returnrc; chartmp[1024]; snprintf(tmp,sizeof(tmp),」%u#%u」,key[0],key[1]); //有個timeout值 rc=memcached_set(handle,tmp,strlen(tmp),(char*)value,len,timeout,0); if(MEMCACHED_SUCCESS!=rc){ returnfalse; } returntrue; } //Memcache讀取數據超時(沒有設置)
libmemcahed源碼中接口定義:
LIBMEMCACHED_APIchar*memcached_get(memcached_st*ptr,constchar*key,size_tkey_length,size_t*value_length,uint32_t*flags,memcached_return_t*error); LIBMEMCACHED_APImemcached_return_tmemcached_mget(memcached_st*ptr,constchar*const*keys,constsize_t*key_length,size_tnumber_of_keys);
從接口中能夠看出在讀取數據的時候,是沒有超時設置的。
延伸閱讀:
http://hi.baidu.com/chinauser/item/b30af90b23335dde73e67608
http://libmemcached.org/libMemcached.html
程序中須要有超時這種功能,好比你單獨訪問一個後端Socket模塊,Socket模塊不屬於咱們上面描述的任何一種的時候,它的協議也是私有的,那麼這個時候可能須要本身去實現一些超時處理策略,這個時候就須要一些處理代碼了。
1、初級:最簡單的超時實現 (秒級超時)
思路很簡單:連接一個後端,而後設置爲非阻塞模式,若是沒有鏈接上就一直循環,判斷當前時間和超時時間之間的差別。
phpsocket中實現原始的超時:(每次循環都當前時間去減,性能會不好,cpu佔用會較高)
<?$host=」127.0.0.1″; $port=」80″; $timeout=15;//timeoutinseconds $socket=socket_create(AF_INET,SOCK_STREAM,SOL_TCP) ordie(「Unabletocreatesocketn」); socket_set_nonblock($socket) //務必設置爲阻塞模式 ordie(「Unabletosetnonblockonsocketn」); $time=time(); //循環的時候每次都減去相應值 while(!@socket_connect($socket,$host,$port))//若是沒有鏈接上就一直死循環 { $err=socket_last_error($socket); if($err==115||$err==114) { if((time()-$time)>=$timeout)//每次都須要去判斷一下是否超時了 { socket_close($socket); die(「Connectiontimedout.n」); } sleep(1); continue; } die(socket_strerror($err).」n」); } socket_set_block($this->socket)//還原阻塞模式 ordie(「Unabletosetblockonsocketn」); ?>
2、升級:使用PHP自帶異步IO去實現(毫秒級超時)
說明:
異步IO:異步IO的概念和同步IO相對。當一個異步過程調用發出後,調用者不能馬上獲得結果。實際處理這個調用的部件在完成後,經過狀態、通知和回調來通知調用者。異步IO將比特分紅小組進行傳送,小組能夠是8位的1個字符或更長。發送方能夠在任什麼時候刻發送這些比特組,而接收方從不知道它們會在何時到達。
多路複用:複用模型是對多個IO操做進行檢測,返回可操做集合,這樣就能夠對其進行操做了。這樣就避免了阻塞IO不能隨時處理各個IO和非阻塞佔用系統資源的肯定。
使用socket_select()實現超時
socket_select(…,floor($timeout),ceil($timeout*1000000));
select的特色:可以設置到微秒級別的超時!
使用socket_select()的超時代碼(須要瞭解一些異步IO編程的知識去理解)
編程 調用類 編程
<?php $server=newServer; $client=newClient; for(;;){ foreach($select->can_read(0)as$socket){ if($socket==$client->socket){ //NewClientSocket $select->add(socket_accept($client->socket)); } else{ //there’ssomethingtoreadon$socket } } } ?>
編程 異步多路複用IO & 超時鏈接處理類 編程
<?php classselect{ var$sockets; functionselect($sockets){ $this->sockets=array(); foreach($socketsas$socket){ $this->add($socket); } } functionadd($add_socket){ array_push($this->sockets,$add_socket); } functionremove($remove_socket){ $sockets=array(); foreach($this->socketsas$socket){ if($remove_socket!=$socket) $sockets[]=$socket; } $this->sockets=$sockets; } functioncan_read($timeout){ $read=$this->sockets; socket_select($read,$write=NULL,$except=NULL,$timeout); return$read; } functioncan_write($timeout){ $write=$this->sockets; socket_select($read=NULL,$write,$except=NULL,$timeout); return$write; } } ?>
通常在LinuxC/C++中,可使用:alarm()設置定時器的方式實現秒級超時,或者:select()、poll()、epoll()之類的異步複用IO實現毫秒級超時。也可使用二次封裝的異步io庫(libevent,libev)也能實現。
1、使用alarm中用信號實現超時 (秒級超時)
說明:Linux內核connect超時一般爲75秒,咱們能夠設置更小的時間如10秒來提早從connect中返回。這裏用使用信號處理機制,調用alarm,超時後產生SIGALRM信號(也可以使用select實現)
用alarym秒級實現 connect設置超時代碼示例:
//信號處理函數staticvoidconnect_alarm(intsigno) { debug_printf(「SignalHandler」); return; } //alarm超時鏈接實現 staticvoidconn_alarm() { Sigfunc*sigfunc;//現有信號處理函數 sigfunc=signal(SIGALRM,connect_alarm);//創建信號處理函數connect_alarm,(若是有)保存現有的信號處理函數 inttimeout=5; //設置鬧鐘 if(alarm(timeout)!=0){ //…鬧鐘已經設置處理 } //進行鏈接操做 if(connect(m_Socket,(structsockaddr*)&addr,sizeof(addr))<0){ if(errno==EINTR){//若是錯誤號設置爲EINTR,說明超時中斷了 debug_printf(「Timeout」);