Gearman 初窺【轉載】

 

 

 

Gearman是一個分發任務的程序框架，能夠用在各類場合，與Hadoop相 比，Gearman更偏向於任務分發功能。它的任務分佈很是簡單，簡單得能夠只須要用腳本便可完成。Gearman最初用於LiveJournal的圖片 resize功能，因爲圖片resize須要消耗大量計算資源，所以須要調度到後端多臺服務器執行，完成任務以後返回前端再呈現到界面。

 

一般，多語言多系統之間的集成是個大問題，通常來講，人們多半會採用WebService的方式來處理此類集成問題，但無論採用何種風格的WebService，如RPC風格，或者REST風格，其自己都有必定的複雜性。相比之下，Gearman也能實現相似的做用，並且更簡單易用。

一個Gearman請求的處理過程涉及三個角色：Client -> Job -> Worker。

Client：請求的發起者，能夠是C，PHP，Perl，MySQL UDF等等。
Job：請求的調度者，用來負責協調把Client發出的請求轉發給合適的Work。
Worker：請求的處理者，能夠是C，PHP，Perl等等。

由於Client，Worker並不限制用同樣的語言，因此有利於多語言多系統之間的集成。

甚至咱們經過增長更多的Worker，能夠很方便的實現應用程序的分佈式負載均衡架構。

下面看看如何安裝運行一個例子，條件所限，咱們把Client，Job，Worker三個角色運行在一臺服務器上：

安裝Gearman server and library：

wget http://launchpad.net/gearmand/trunk/0.8/+download/gearmand-0.8.tar.gz
tar zxf gearmand-0.8.tar.gz
cd gearmand-0.8
./configure
make
make install

安裝Gearman PHP extension：

wget http://pecl.php.net/get/gearman-0.4.0.tgz
tar zxf gearman-0.4.0.tgz
cd gearman-0.4.0
phpize
./configure
make
make install

編輯php.ini配置文件加載相應模塊並使之生效：

extension = "gearman.so"

啓動Job：

gearmand -d

若是當前用戶是root的話，則須要這樣操做：

gearmand -d -u root

缺省會使用4730端口，下面會用到。

注意：若是找不到gearmand命令的路徑，別忘了用whereis gearmand確認。

編寫Worker：

worker.php文件內容以下：

<?php
$worker= new GearmanWorker();
$worker->addServer('127.0.0.1', 4730);
$worker->addFunction('reverse', 'my_reverse_function');

while ($worker->work());

function my_reverse_function($job)
{
    return strrev($job->workload());
}
?> 

設置後臺運行work：

php worker.php &

編寫Client：

client.php文件內容以下：

<?php
$client= new GearmanClient();
$client->addServer('127.0.0.1', 4730);
echo $client->do('reverse', 'Hello World!'), "\n";
?>

運行client：

php client.php

輸出：!dlroW olleH

出 於方便的考慮，Worker，Client使用的都是PHP，但這並不影響演示，實際應用中，你徹底能夠經過Gearman集成不一樣語言實現的 Worker，Client。或許此時你還想了解前面提到的負載均衡功能：很簡單，只要增長多個Worker便可，你能夠按照worker.php的樣子 多寫幾個相似的文件，並設置不一樣的返回值用以識別演示效果。而後依次啓動這幾個Worker文件，並屢次使用client.php去請求，你就會發現 Job會把Client請求轉發給不一樣的Worker。

命令行工具

若是你以爲安裝PHP之類的東西太麻煩的話，你也能夠僅僅經過命令行工具來體驗Gearman的功能：

啓動Worker：gearman -w -f wc -- wc -l &
運行Client：gearman -f wc < /etc/passwd

Gearman都能用來幹什麼？
Gearman 能夠用在各個方面，最簡單就是在不一樣語言之間架起一座橋樑。好比你可能但願你的php程序調用一個c 函數，那麼用gearman就能夠實現了，固然了實際你能夠經過寫一個php擴展來實現一樣的工做，可是好比你要php調用java,perl,或者 python那麼，Gearman就很是棒了。

Gearman另外一個應用方面是負載分擔，你能夠將worker放在不一樣的服務器（或者一些 列服務器）上，好比你的php程序須要圖片轉換，可是不但願本地服務器有太多的這樣圖片轉換的進程，那麼你能夠創建一系列服務器，在上面加載worker 處理圖片轉換。這樣你的web服務器將不受圖片轉換的影響，同時你獲得了負載均衡的功能，由於job server會在請求到來的時候，將這個請求發給空閒的worker.一樣對於多核的服務器，你能夠在同一機器上建立一樣數目的worker. 你可能擔憂，job server處於一箇中心，那麼這會是一個單點的瓶頸，若是死了，會怎麼樣？對於這樣的狀況，你能夠運行多個job server。這樣若是一個job server down了，client和worker會自動遷移到另外一臺job server上。

Gearman範例在官網可找到：
slides:
http://gearman.org/index.php?id=presentations
use cases:
http://gearman.org/index.php?id=use_cases

 

http://blog.163.com/lgh_2002/blog/static/44017526201281394856306/

 http://blog.csdn.net/fdipzone/article/details/7166520

http://blog.csdn.net/mldxs/article/details/8616931

http://www.oschina.net/question/234345_42515

http://hi.baidu.com/billdkj/item/6810fceada157aabc10d752f