如何通过Gearman实现PHP长尾任务分发操作的最佳实践?

2026-04-01 08:521阅读0评论SEO问题
  • 内容介绍
  • 文章标签
  • 相关推荐

本文共计1468个文字,预计阅读时间需要6分钟。

如何通过Gearman实现PHP长尾任务分发操作的最佳实践?

本文实例介绍了PHP使用Gearman进行任务分发的操作。以下是一些基本步骤:

一、安装Gearman

1.下载Gearman源码包:https://launchpad.net/gearmand

2.下载示例:gearmand-1.1.12.tar.gz

二、编译安装Gearman

1.解压源码包:tar -zxvf gearmand-1.1.12.tar.gz

2.进入解压后的目录:cd gearmand-1.1.12

3.编译安装:./configure && make && sudo make install

三、启动Gearman服务

1.启动Gearman守护进程:gearmand

四、编写PHP脚本

1.引入Gearman客户端库:include 'GearmanClient.php'

2.创建Gearman客户端实例:$client=new GearmanClient();

3.连接到Gearman守护进程:$client->addServer('localhost', 4730);

4.提交任务:$client->doBackground('taskName', '任务数据');

五、编写Gearman工作进程

1.引入Gearman工作进程库:include 'GearmanWorker.php'

2.创建Gearman工作进程实例:$worker=new GearmanWorker();

3.添加工作函数:$worker->addFunction('taskName', 'taskFunction');

4.启动工作进程:$worker->work();

六、任务函数

1.实现任务函数:function taskFunction($job) {

// 处理任务 // ... return '处理结果';}

以上是PHP使用Gearman进行任务分发的简单介绍,供大家参考。

本文实例讲述了php使用gearman进行任务分发操作。分享给大家供大家参考,具体如下:

一、安装gearman

下载gearman源码包

launchpad.net/gearmand/+download

如: gearmand-1.1.12.tar.gz

下载php的gearman扩展包

pecl.php.net/package/gearman

如: gearman-1.1.2.tgz

安装gearman

> yum install boost-devel gperf libevent-devel libuuid-devel > tar xf gearmand-1.1.12.tar.gz > cd gearmand-1.1.12 > ./configure > make && make install

安装gearman的php扩展(建议php版本不要过高,因为php7的gearman扩展目前还没有出来)

> yum install autoconf > tar xf gearman-1.1.2.tgz > cd gearman-1.1.2 > /data/php56/bin/phpize > ./configure --with-php-config=/data/php56/bin/php-config > make && make install

修改php.ini

> vi /data/php56/lib/php.ini

添加如下两项

extension_dir=/data/php56/lib/php/extensions/no-debug-zts-20131226/ extension=gearman.so

查看扩展

> /data/php56/bin/php -m

二、简单的使用gearman

gearman中请求的处理过程一般涉及三种角色:client->job->worker
其中client是请求的发起者
job是请求的调度者,用于把客户的请求分发到不同的worker上进行工作
worker是请求的处理者

比如这里我们要处理client向job发送一个请求,来计算两个数之和,job负责调度worker来具体实现计算两数之和。

首先我们编写client.php

<?php //创建一个客户端 $client = new GearmanClient(); //添加一个job服务 $client->addServer('127.0.0.1', 4730); //doNormal是同步的,等待worker处理完成返回结果 //建议不要使用do()了 $ret = $client->doNormal('sum', serialize(array(10, 10))); if($ret) { echo '计算结果:', $ret, "\n"; }

再编写worker.php

<?php //创建一个worker $worker = new GearmanWorker(); //添加一个job服务 $worker->addServer('127.0.0.1', 4730); //注册一个回调函数,用于业务处理 $worker->addFunction('sum', function($job) { //workload()获取客户端发送来的序列化数据 $data = unserialize($job->workload()); return $data[0] + $data[1]; }); //死循环 while(true) { //等待job提交的任务 $ret = $worker->work(); if ($worker->returnCode() != GEARMAN_SUCCESS) { break; } }

我们先启动gearmand服务

> mkdir -p /usr/local/var/log > gearmand -d

运行worker文件

> /data/php56/bin/php /data/worker.php

再运行client文件

> /data/php56/bin/php /data/client.php

结果如下:

三、gearman异步的处理任务

这里我们client向job发送一个发送邮件的请求,不等待请求完成,继续向下执行。

client.php代码如下:

<?php //创建一个客户端 $client = new GearmanClient(); //添加一个job服务 $client->addServer('127.0.0.1', 4730); //doBackground异步,返回提交任务的句柄 $ret = $client->doBackground('sendEmail', json_encode(array( 'email' => 'test@qq.com', 'title' => '测试异步', 'body' => '异步执行好牛B的样子', ))); //继续执行下面的代码 echo "我的内心毫无波动,甚至还想笑\n"; do { sleep(1); //获取任务句柄的状态 //jobStatus返回的是一个数组 //第一个,表示工作是否已经知道 //第二个,工作是否在运行 //第三和第四,分别对应完成百分比的分子与分母 $status = $client->jobStatus($ret); echo "完成情况:{$status[2]}/{$status[3]}\n"; if(!$status[1]) { break; } } while(true);

worker.php代码如下:

<?php //创建一个worker $worker = new GearmanWorker(); //添加一个job服务 $worker->addServer('127.0.0.1', 4730); //注册一个回调函数,用于业务处理 $worker->addFunction('sendEmail', function($job) { //workload()获取客户端发送来的序列化数据 $data = json_decode($job->workload(), true); //模拟发送邮件所用时间 sleep(6); echo "发送{$data['email']}邮件成功\n"; }); //死循环 //等待job提交的任务 while($worker->work());  

结果如下:

四、gearman并行的执行多个任务

我们如何并行的计算两个数的累加和? 通过addTask添加多个任务到队列,然后进行并行计算。

client.php代码如下:

<?php //创建一个客户端 $client = new GearmanClient(); //添加一个job服务 $client->addServer('127.0.0.1', 4730); //设置任务完成时的回调函数 $client->setCompleteCallback(function($task) { //获取由worker返回的数据 echo $task->data(), "\n"; }); //计算1到500的累加和 //添加五个任务到队列 $client->addTask('sum', json_encode(array(1, 100))); $client->addTask('sum', json_encode(array(100, 200))); $client->addTask('sum', json_encode(array(200, 300))); $client->addTask('sum', json_encode(array(300, 400))); $client->addTask('sum', json_encode(array(400, 500))); //运行队列中的任务,do系列不需要runTask() $client->runTasks();

worker.php代码如下:

如何通过Gearman实现PHP长尾任务分发操作的最佳实践?

<?php //创建一个worker $worker = new GearmanWorker(); //添加一个job服务 $worker->addServer('127.0.0.1', 4730); //注册一个回调函数,用于业务处理 $worker->addFunction('sum', function($job) { //workload()获取客户端发送来的序列化数据 $data = json_decode($job->workload(), true); sleep(1); $sum = 0; for($ix = $data[0]; $ix < $data[1]; ++$ix) { $sum += $ix; } return $sum; }); //死循环 //等待job提交的任务 while($worker->work());

我们开启5个worker工作进程,当运行客户端请求时,5个计算任务几乎是同时返回结果。

结果如下:

更多关于PHP相关内容感兴趣的读者可查看本站专题:《PHP进程与线程操作技巧总结》、《PHP网络编程技巧总结》、《PHP基本语法入门教程》、《PHP数组(Array)操作技巧大全》、《php字符串(string)用法总结》、《php+mysql数据库操作入门教程》及《php常见数据库操作技巧汇总》

希望本文所述对大家PHP程序设计有所帮助。

本文共计1468个文字,预计阅读时间需要6分钟。

如何通过Gearman实现PHP长尾任务分发操作的最佳实践?

本文实例介绍了PHP使用Gearman进行任务分发的操作。以下是一些基本步骤:

一、安装Gearman

1.下载Gearman源码包:https://launchpad.net/gearmand

2.下载示例:gearmand-1.1.12.tar.gz

二、编译安装Gearman

1.解压源码包:tar -zxvf gearmand-1.1.12.tar.gz

2.进入解压后的目录:cd gearmand-1.1.12

3.编译安装:./configure && make && sudo make install

三、启动Gearman服务

1.启动Gearman守护进程:gearmand

四、编写PHP脚本

1.引入Gearman客户端库:include 'GearmanClient.php'

2.创建Gearman客户端实例:$client=new GearmanClient();

3.连接到Gearman守护进程:$client->addServer('localhost', 4730);

4.提交任务:$client->doBackground('taskName', '任务数据');

五、编写Gearman工作进程

1.引入Gearman工作进程库:include 'GearmanWorker.php'

2.创建Gearman工作进程实例:$worker=new GearmanWorker();

3.添加工作函数:$worker->addFunction('taskName', 'taskFunction');

4.启动工作进程:$worker->work();

六、任务函数

1.实现任务函数:function taskFunction($job) {

// 处理任务 // ... return '处理结果';}

以上是PHP使用Gearman进行任务分发的简单介绍,供大家参考。

本文实例讲述了php使用gearman进行任务分发操作。分享给大家供大家参考,具体如下:

一、安装gearman

下载gearman源码包

launchpad.net/gearmand/+download

如: gearmand-1.1.12.tar.gz

下载php的gearman扩展包

pecl.php.net/package/gearman

如: gearman-1.1.2.tgz

安装gearman

> yum install boost-devel gperf libevent-devel libuuid-devel > tar xf gearmand-1.1.12.tar.gz > cd gearmand-1.1.12 > ./configure > make && make install

安装gearman的php扩展(建议php版本不要过高,因为php7的gearman扩展目前还没有出来)

> yum install autoconf > tar xf gearman-1.1.2.tgz > cd gearman-1.1.2 > /data/php56/bin/phpize > ./configure --with-php-config=/data/php56/bin/php-config > make && make install

修改php.ini

> vi /data/php56/lib/php.ini

添加如下两项

extension_dir=/data/php56/lib/php/extensions/no-debug-zts-20131226/ extension=gearman.so

查看扩展

> /data/php56/bin/php -m

二、简单的使用gearman

gearman中请求的处理过程一般涉及三种角色:client->job->worker
其中client是请求的发起者
job是请求的调度者,用于把客户的请求分发到不同的worker上进行工作
worker是请求的处理者

比如这里我们要处理client向job发送一个请求,来计算两个数之和,job负责调度worker来具体实现计算两数之和。

首先我们编写client.php

<?php //创建一个客户端 $client = new GearmanClient(); //添加一个job服务 $client->addServer('127.0.0.1', 4730); //doNormal是同步的,等待worker处理完成返回结果 //建议不要使用do()了 $ret = $client->doNormal('sum', serialize(array(10, 10))); if($ret) { echo '计算结果:', $ret, "\n"; }

再编写worker.php

<?php //创建一个worker $worker = new GearmanWorker(); //添加一个job服务 $worker->addServer('127.0.0.1', 4730); //注册一个回调函数,用于业务处理 $worker->addFunction('sum', function($job) { //workload()获取客户端发送来的序列化数据 $data = unserialize($job->workload()); return $data[0] + $data[1]; }); //死循环 while(true) { //等待job提交的任务 $ret = $worker->work(); if ($worker->returnCode() != GEARMAN_SUCCESS) { break; } }

我们先启动gearmand服务

> mkdir -p /usr/local/var/log > gearmand -d

运行worker文件

> /data/php56/bin/php /data/worker.php

再运行client文件

> /data/php56/bin/php /data/client.php

结果如下:

三、gearman异步的处理任务

这里我们client向job发送一个发送邮件的请求,不等待请求完成,继续向下执行。

client.php代码如下:

<?php //创建一个客户端 $client = new GearmanClient(); //添加一个job服务 $client->addServer('127.0.0.1', 4730); //doBackground异步,返回提交任务的句柄 $ret = $client->doBackground('sendEmail', json_encode(array( 'email' => 'test@qq.com', 'title' => '测试异步', 'body' => '异步执行好牛B的样子', ))); //继续执行下面的代码 echo "我的内心毫无波动,甚至还想笑\n"; do { sleep(1); //获取任务句柄的状态 //jobStatus返回的是一个数组 //第一个,表示工作是否已经知道 //第二个,工作是否在运行 //第三和第四,分别对应完成百分比的分子与分母 $status = $client->jobStatus($ret); echo "完成情况:{$status[2]}/{$status[3]}\n"; if(!$status[1]) { break; } } while(true);

worker.php代码如下:

<?php //创建一个worker $worker = new GearmanWorker(); //添加一个job服务 $worker->addServer('127.0.0.1', 4730); //注册一个回调函数,用于业务处理 $worker->addFunction('sendEmail', function($job) { //workload()获取客户端发送来的序列化数据 $data = json_decode($job->workload(), true); //模拟发送邮件所用时间 sleep(6); echo "发送{$data['email']}邮件成功\n"; }); //死循环 //等待job提交的任务 while($worker->work());  

结果如下:

四、gearman并行的执行多个任务

我们如何并行的计算两个数的累加和? 通过addTask添加多个任务到队列,然后进行并行计算。

client.php代码如下:

<?php //创建一个客户端 $client = new GearmanClient(); //添加一个job服务 $client->addServer('127.0.0.1', 4730); //设置任务完成时的回调函数 $client->setCompleteCallback(function($task) { //获取由worker返回的数据 echo $task->data(), "\n"; }); //计算1到500的累加和 //添加五个任务到队列 $client->addTask('sum', json_encode(array(1, 100))); $client->addTask('sum', json_encode(array(100, 200))); $client->addTask('sum', json_encode(array(200, 300))); $client->addTask('sum', json_encode(array(300, 400))); $client->addTask('sum', json_encode(array(400, 500))); //运行队列中的任务,do系列不需要runTask() $client->runTasks();

worker.php代码如下:

如何通过Gearman实现PHP长尾任务分发操作的最佳实践?

<?php //创建一个worker $worker = new GearmanWorker(); //添加一个job服务 $worker->addServer('127.0.0.1', 4730); //注册一个回调函数,用于业务处理 $worker->addFunction('sum', function($job) { //workload()获取客户端发送来的序列化数据 $data = json_decode($job->workload(), true); sleep(1); $sum = 0; for($ix = $data[0]; $ix < $data[1]; ++$ix) { $sum += $ix; } return $sum; }); //死循环 //等待job提交的任务 while($worker->work());

我们开启5个worker工作进程,当运行客户端请求时,5个计算任务几乎是同时返回结果。

结果如下:

更多关于PHP相关内容感兴趣的读者可查看本站专题:《PHP进程与线程操作技巧总结》、《PHP网络编程技巧总结》、《PHP基本语法入门教程》、《PHP数组(Array)操作技巧大全》、《php字符串(string)用法总结》、《php+mysql数据库操作入门教程》及《php常见数据库操作技巧汇总》

希望本文所述对大家PHP程序设计有所帮助。