当前位置:首页 > PHP教程 > php高级应用 > 列表

php使用gearman进行任务分发操作实例详解

发布:smiling 来源: PHP粉丝网  添加日期:2022-02-14 12:50:56 浏览: 评论:0 

本文实例讲述了php使用gearman进行任务分发操作,分享给大家供大家参考,具体如下:

一、安装gearman

下载gearman源码包

https://launchpad.net/gearmand/+download

如: gearmand-1.1.12.tar.gz

下载php的gearman扩展包

http://pecl.php.net/package/gearman

如: gearman-1.1.2.tgz

安装gearman

> yum install boost-devel gperf libevent-devel libuuid-devel

> tar xf gearmand-1.1.12.tar.gz

> cd gearmand-1.1.12

> ./configure

> make && make install

安装gearman的php扩展(建议php版本不要过高,因为php7的gearman扩展目前还没有出来)

> yum install autoconf

> tar xf gearman-1.1.2.tgz

> cd gearman-1.1.2

> /data/php56/bin/phpize

> ./configure --with-php-config=/data/php56/bin/php-config

> make && make install

修改php.ini

> vi /data/php56/lib/php.ini

添加如下两项

extension_dir=/data/php56/lib/php/extensions/no-debug-zts-20131226/

extension=gearman.so

查看扩展

> /data/php56/bin/php -m

二、简单的使用gearman

gearman中请求的处理过程一般涉及三种角色:client->job->worker

其中client是请求的发起者

job是请求的调度者,用于把客户的请求分发到不同的worker上进行工作

worker是请求的处理者

比如这里我们要处理client向job发送一个请求,来计算两个数之和,job负责调度worker来具体实现计算两数之和。

首先我们编写client.php

  1. <?php 
  2. //创建一个客户端 
  3. $client = new GearmanClient(); 
  4. //添加一个job服务 
  5. $client->addServer('127.0.0.1', 4730); 
  6. //doNormal是同步的,等待worker处理完成返回结果 
  7. //建议不要使用do()了 
  8. $ret = $client->doNormal('sum', serialize(array(10, 10))); 
  9.  
  10. if($ret) { 
  11.   echo '计算结果:'$ret"\n"

再编写worker.php

  1. <?php 
  2. //创建一个worker 
  3. $worker = new GearmanWorker(); 
  4. //添加一个job服务 
  5. $worker->addServer('127.0.0.1', 4730); 
  6. //注册一个回调函数,用于业务处理 
  7. $worker->addFunction('sum'function($job) { 
  8.   //workload()获取客户端发送来的序列化数据 
  9.   $data = unserialize($job->workload()); 
  10.  
  11.   return $data[0] + $data[1]; 
  12. }); 
  13.  
  14. //死循环 
  15. while(true) { 
  16.   //等待job提交的任务 
  17.   $ret = $worker->work(); 
  18.   if ($worker->returnCode() != GEARMAN_SUCCESS) { 
  19.     break
  20.   } 

我们先启动gearmand服务

> mkdir -p /usr/local/var/log

> gearmand -d

运行worker文件

> /data/php56/bin/php /data/worker.php

再运行client文件

> /data/php56/bin/php /data/client.php

结果如下:

php使用gearman进行任务分发操作实例详解

三、gearman异步的处理任务

这里我们client向job发送一个发送邮件的请求,不等待请求完成,继续向下执行。

client.php代码如下:

  1. <?php 
  2. //创建一个客户端 
  3. $client = new GearmanClient(); 
  4. //添加一个job服务 
  5. $client->addServer('127.0.0.1', 4730); 
  6. //doBackground异步,返回提交任务的句柄 
  7. $ret = $client->doBackground('sendEmail', json_encode(array
  8.   'email' => 'test@qq.com'
  9.   'title' => '测试异步'
  10.   'body' => '异步执行好牛B的样子'
  11. ))); 
  12.  
  13. //继续执行下面的代码 
  14. echo "我的内心毫无波动,甚至还想笑\n"
  15.  
  16. do { 
  17.   sleep(1); 
  18.  
  19.   //获取任务句柄的状态 
  20.   //jobStatus返回的是一个数组 
  21.   //第一个,表示工作是否已经知道 
  22.   //第二个,工作是否在运行 
  23.   //第三和第四,分别对应完成百分比的分子与分母 
  24.   $status = $client->jobStatus($ret); 
  25.     
  26.   echo "完成情况:{$status[2]}/{$status[3]}\n"
  27.  
  28.   if(!$status[1]) { 
  29.     break
  30.   } 
  31. while(true); 

worker.php代码如下:

  1. <?php 
  2. //创建一个worker 
  3. $worker = new GearmanWorker(); 
  4. //添加一个job服务 
  5. $worker->addServer('127.0.0.1', 4730); 
  6. //注册一个回调函数,用于业务处理 
  7. $worker->addFunction('sendEmail'function($job) { 
  8.   //workload()获取客户端发送来的序列化数据 
  9.   $data = json_decode($job->workload(), true); 
  10.   //模拟发送邮件所用时间 
  11.   sleep(6); 
  12.   echo "发送{$data['email']}邮件成功\n"
  13. }); 
  14.  
  15. //死循环 
  16. //等待job提交的任务 
  17. while($worker->work()); 

结果如下:

php使用gearman进行任务分发操作实例详解

四、gearman并行的执行多个任务

我们如何并行的计算两个数的累加和? 通过addTask添加多个任务到队列,然后进行并行计算。

client.php代码如下:

  1. <?php 
  2. //创建一个客户端 
  3. $client = new GearmanClient(); 
  4. //添加一个job服务 
  5. $client->addServer('127.0.0.1', 4730); 
  6. //设置任务完成时的回调函数 
  7. $client->setCompleteCallback(function($task) { 
  8.   //获取由worker返回的数据 
  9.   echo $task->data(), "\n"
  10. }); 
  11.  
  12. //计算1到500的累加和 
  13. //添加五个任务到队列 
  14. $client->addTask('sum', json_encode(array(1, 100))); 
  15. $client->addTask('sum', json_encode(array(100, 200))); 
  16. $client->addTask('sum', json_encode(array(200, 300))); 
  17. $client->addTask('sum', json_encode(array(300, 400))); 
  18. $client->addTask('sum', json_encode(array(400, 500))); 
  19.  
  20. //运行队列中的任务,do系列不需要runTask() 
  21. $client->runTasks(); 

worker.php代码如下:

  1. <?php 
  2. //创建一个worker 
  3. $worker = new GearmanWorker(); 
  4. //添加一个job服务 
  5. $worker->addServer('127.0.0.1', 4730); 
  6. //注册一个回调函数,用于业务处理 
  7. $worker->addFunction('sum'function($job) { 
  8.   //workload()获取客户端发送来的序列化数据 
  9.   $data = json_decode($job->workload(), true); 
  10.   sleep(1); 
  11.   $sum = 0; 
  12.   for($ix = $data[0]; $ix < $data[1]; ++$ix) { 
  13.     $sum += $ix
  14.   } 
  15.   return $sum
  16. }); 
  17.  
  18. //死循环 
  19. //等待job提交的任务 
  20. while($worker->work()); 

我们开启5个worker工作进程,当运行客户端请求时,5个计算任务几乎是同时返回结果。

结果如下:

php使用gearman进行任务分发操作实例详解

Tags: gearman php任务分发

分享到: