php使用gearman進(jìn)行任務(wù)分發(fā)操作實(shí)例詳解

更新時(shí)間：2020年02月26日 12:26:44 作者：懷素真

這篇文章主要介紹了php使用gearman進(jìn)行任務(wù)分發(fā)操作,結(jié)合實(shí)例形式詳細(xì)分析了gearman的安裝以及PHP使用gearman進(jìn)行異步處理任務(wù)相關(guān)操作技巧,需要的朋友可以參考下

本文實(shí)例講述了php使用gearman進(jìn)行任務(wù)分發(fā)操作。分享給大家供大家參考，具體如下：

一、安裝gearman

下載gearman源碼包

https://launchpad.net/gearmand/+download

如: gearmand-1.1.12.tar.gz

下載php的gearman擴(kuò)展包

http://pecl.php.net/package/gearman

如: gearman-1.1.2.tgz

安裝gearman

> yum install boost-devel gperf libevent-devel libuuid-devel
> tar xf gearmand-1.1.12.tar.gz
> cd gearmand-1.1.12
> ./configure
> make && make install

安裝gearman的php擴(kuò)展(建議php版本不要過高，因?yàn)閜hp7的gearman擴(kuò)展目前還沒有出來)

> yum install autoconf
> tar xf gearman-1.1.2.tgz
> cd gearman-1.1.2
> /data/php56/bin/phpize
> ./configure --with-php-config=/data/php56/bin/php-config
> make && make install

修改php.ini

> vi /data/php56/lib/php.ini

添加如下兩項(xiàng)

extension_dir=/data/php56/lib/php/extensions/no-debug-zts-20131226/
extension=gearman.so

查看擴(kuò)展

> /data/php56/bin/php -m

二、簡(jiǎn)單的使用gearman

gearman中請(qǐng)求的處理過程一般涉及三種角色：client->job->worker
其中client是請(qǐng)求的發(fā)起者
job是請(qǐng)求的調(diào)度者，用于把客戶的請(qǐng)求分發(fā)到不同的worker上進(jìn)行工作
worker是請(qǐng)求的處理者

比如這里我們要處理client向job發(fā)送一個(gè)請(qǐng)求，來計(jì)算兩個(gè)數(shù)之和，job負(fù)責(zé)調(diào)度worker來具體實(shí)現(xiàn)計(jì)算兩數(shù)之和。

首先我們編寫client.php

<?php
//創(chuàng)建一個(gè)客戶端
$client = new GearmanClient();
//添加一個(gè)job服務(wù)
$client->addServer('127.0.0.1', 4730);
//doNormal是同步的，等待worker處理完成返回結(jié)果
//建議不要使用do()了
$ret = $client->doNormal('sum', serialize(array(10, 10)));

if($ret) {
  echo '計(jì)算結(jié)果:', $ret, "\n";
}

再編寫worker.php

<?php
//創(chuàng)建一個(gè)worker
$worker = new GearmanWorker();
//添加一個(gè)job服務(wù)
$worker->addServer('127.0.0.1', 4730);
//注冊(cè)一個(gè)回調(diào)函數(shù)，用于業(yè)務(wù)處理
$worker->addFunction('sum', function($job) {
  //workload()獲取客戶端發(fā)送來的序列化數(shù)據(jù)
  $data = unserialize($job->workload());

  return $data[0] + $data[1];
});

//死循環(huán)
while(true) {
  //等待job提交的任務(wù)
  $ret = $worker->work();
  if ($worker->returnCode() != GEARMAN_SUCCESS) {
    break;
  }
}

我們先啟動(dòng)gearmand服務(wù)

> mkdir -p /usr/local/var/log
> gearmand -d

運(yùn)行worker文件

> /data/php56/bin/php /data/worker.php

再運(yùn)行client文件

> /data/php56/bin/php /data/client.php

結(jié)果如下：

三、gearman異步的處理任務(wù)

這里我們client向job發(fā)送一個(gè)發(fā)送郵件的請(qǐng)求，不等待請(qǐng)求完成，繼續(xù)向下執(zhí)行。

client.php代碼如下：

<?php
//創(chuàng)建一個(gè)客戶端
$client = new GearmanClient();
//添加一個(gè)job服務(wù)
$client->addServer('127.0.0.1', 4730);
//doBackground異步，返回提交任務(wù)的句柄
$ret = $client->doBackground('sendEmail', json_encode(array(
  'email' => 'test@qq.com',
  'title' => '測(cè)試異步',
  'body' => '異步執(zhí)行好牛B的樣子',
)));

//繼續(xù)執(zhí)行下面的代碼
echo "我的內(nèi)心毫無波動(dòng)，甚至還想笑\n";

do {
  sleep(1);

  //獲取任務(wù)句柄的狀態(tài)
  //jobStatus返回的是一個(gè)數(shù)組
  //第一個(gè)，表示工作是否已經(jīng)知道
  //第二個(gè)，工作是否在運(yùn)行
  //第三和第四，分別對(duì)應(yīng)完成百分比的分子與分母
  $status = $client->jobStatus($ret);
  
  echo "完成情況：{$status[2]}/{$status[3]}\n";

  if(!$status[1]) {
    break;
  }
} while(true);

worker.php代碼如下：

<?php
//創(chuàng)建一個(gè)worker
$worker = new GearmanWorker();
//添加一個(gè)job服務(wù)
$worker->addServer('127.0.0.1', 4730);
//注冊(cè)一個(gè)回調(diào)函數(shù)，用于業(yè)務(wù)處理
$worker->addFunction('sendEmail', function($job) {
  //workload()獲取客戶端發(fā)送來的序列化數(shù)據(jù)
  $data = json_decode($job->workload(), true);
  //模擬發(fā)送郵件所用時(shí)間
  sleep(6);
  echo "發(fā)送{$data['email']}郵件成功\n";
});

//死循環(huán)
//等待job提交的任務(wù)
while($worker->work());

結(jié)果如下：

四、gearman并行的執(zhí)行多個(gè)任務(wù)

我們?nèi)绾尾⑿械挠?jì)算兩個(gè)數(shù)的累加和? 通過addTask添加多個(gè)任務(wù)到隊(duì)列，然后進(jìn)行并行計(jì)算。

client.php代碼如下：

<?php
//創(chuàng)建一個(gè)客戶端
$client = new GearmanClient();
//添加一個(gè)job服務(wù)
$client->addServer('127.0.0.1', 4730);
//設(shè)置任務(wù)完成時(shí)的回調(diào)函數(shù)
$client->setCompleteCallback(function($task) {
  //獲取由worker返回的數(shù)據(jù)
  echo $task->data(), "\n";
});

//計(jì)算1到500的累加和
//添加五個(gè)任務(wù)到隊(duì)列
$client->addTask('sum', json_encode(array(1, 100)));
$client->addTask('sum', json_encode(array(100, 200)));
$client->addTask('sum', json_encode(array(200, 300)));
$client->addTask('sum', json_encode(array(300, 400)));
$client->addTask('sum', json_encode(array(400, 500)));

//運(yùn)行隊(duì)列中的任務(wù)，do系列不需要runTask()
$client->runTasks();

worker.php代碼如下：

<?php
//創(chuàng)建一個(gè)worker
$worker = new GearmanWorker();
//添加一個(gè)job服務(wù)
$worker->addServer('127.0.0.1', 4730);
//注冊(cè)一個(gè)回調(diào)函數(shù)，用于業(yè)務(wù)處理
$worker->addFunction('sum', function($job) {
  //workload()獲取客戶端發(fā)送來的序列化數(shù)據(jù)
  $data = json_decode($job->workload(), true);
  sleep(1);
  $sum = 0;
  for($ix = $data[0]; $ix < $data[1]; ++$ix) {
    $sum += $ix;
  }
  return $sum;
});

//死循環(huán)
//等待job提交的任務(wù)
while($worker->work());

我們開啟5個(gè)worker工作進(jìn)程，當(dāng)運(yùn)行客戶端請(qǐng)求時(shí)，5個(gè)計(jì)算任務(wù)幾乎是同時(shí)返回結(jié)果。

結(jié)果如下：