Redis+php-resque实现消息队列

服务器硬件配置

Dell PowerEdge R310英特尔单路机架式服务器

Intel Xeon Processor X3430 2.4GHz, 8MB Cache
8GB内存(2 x 4GB), 1333MHz, 双列RDIMMs用1于处理器配置
2TB近线3.5英寸7.2K RPM 6Gbps SAS硬盘 - 非热插拔
SAS 6/iR 控制卡
8倍速SATA超薄DVD-ROM光驱
非冗余电源,
350W

软件环境

CentOS 6.2 minimal
Nginx 1.2.7
PHP 5.3.17
MySQL 5.5.28-log
Redis 2.6.16

一、Redis安装

1. 获取源码

shell>#
cd /usr/local/src
shell># wget http://download.redis.io/releases/redis-2.6.16.tar.gz
shell># tar -zxvf redis-2.6.16.tar.gz
shell># cd redis-2.6.16

2. 编译、安装

shell>#
make

3. 配置Redis

编辑redis.conf文件

shell>#
vi /usr/local/src/redis-2.6.16/redis.conf

daemonize
= yes

4. 启动Redis

shell>#
src/redis-server
/usr/local/src/redis-2.6.16/redis.conf

5. 测试连接

shell>#
src/redis-cli

redis>
set foo bar

redis>
get foo

“bar”

redis>
exit;

二、phpredis 安装

1. 获取源码

shell>#
cd /usr/local/src

shell># wget https://github.com/nicolasff/phpredis/archive/2.2.3.tar.gz -O
nicolasff-phpredis-2.2.3.tar.gz

shell># tar -zxvf nicolasff-phpredis-2.2.3.tar.gz

shell># cd phpredis-2.2.3

2. 编译、安装

shell>#
/usr/local/php/bin/phpize

shell>#
./configure –-with-php-config=/usr/local/php/bin/php-config

shell># make &&
make install

3. 配置php.ini

shell>#
vi
/usr/local/php/etc/php.ini

extension=redis.so

4. 重启nginx & php-fpm

三、php-resque安装

*准备工作

需要pcntl支持

安装git

shell>#
yum -y install git

安装Composer

shell>#
cd
/usr/local/bin

shell># curl
–sS https://getcomposer.org/installer
| php

shell># mv composer.phpar
/usr/local/bin/composer

修改 php.ini

disable_functions = … …

将proc_open和proc_get_status以及exec删除

保存后，重启LNMP

1. 获取源码

shell>#
cd /home/wwwroot/default

shell># git
clone git://github.com/chrisboulton/php-resque.git

2. 安装

shell>#
cd php-resque

shell># composer install

四、Demo

1. 一个Job

Job|任务：一个Job就是一个需要在后台完成的任务，比如邮件发送，就可以抽象为一个Job。在Resque中一个Job就是一个Class。

shell># cd php-resque

shell># vim
demo/job.php

<?php

class PHP_Job

{

public function perform()

{

fwrite(STDOUT, 'Start job! -> ');

sleep(10);

fwrite(STDOUT, 'Job ended!' .
PHP_EOL);

}

这个Job的具体任务：输出’Start job! ->’，然后等待10秒钟后，再次输出’Job ended!’。

在Resque的设计中，一个Job必须存在一个perform方法，Worker则会自动运行这个方法。

2. 将Job插入队列

Queue|队列：就是标题中的消息队列。在Resque中，队列由Redis来负责实现。Resque还提供了一个简单的队列管理器，可以实现将Job插入/取出队列等功能。

shell>#
vim
demo/queue.php

<?php

if(empty($argv[1]) or empty($argv[2]))
{

die('Specify the name of a queue or job
to add. e.g, php queue.php default
PHP_Job');

//在cli命令行中运行queue.php 后面必须加上两个参数，第一个参数为queue的名称第二个参数为job的名称，必须同之前编写的Job类的类名。

}

require __DIR__ .
'/init.php';

date_default_timezone_set('GMT');

Resque::setBackend('127.0.0.1:6379');

$args = array(

'time' => time(),

'array' => array(

'test' => 'test',

);

$jobId =
Resque::enqueue($argv[1], $argv[2], $args, true);

echo "Queued job
".$jobId."\n\n";

在cli方式中运行：

shell>#
php
demo/queue.php default PHP_Job

结果可以在屏幕上看到输出：

Queued
job 4ee7cefcb7df03ff5475fd450e2a5bea

即Job添加入队列成功。

3. 查看Job运行情况

php-resque同样提供了查看Job运行状态的例子，直接运行：

shell>#
php demo/check_status.php
4ee7cefcb7df03ff5475fd450e2a5bea

可以看到输出：

Tracking status of
10de5352387ba7212bc0d4e8975a3523. Press [break] to stop.

Status of 4ee7cefcb7df03ff5475fd450e2a5bea is: 1

我们刚才创建的Job运行状态为1。在Resque中，一个Job有以下4中状态：

Resque_Job_Status::STATUS_WAITING
= 1; (等待)
Resque_Job_Status::STATUS_RUNNING
= 2; (正在执行)
Resque_Job_Status::STATUS_FAILED
= 3; (失败)
Resque_Job_Status::STATUS_COMPLETE
= 4; (结束)

由于没有运行Worker，所以刚才创建的Job还是等待状态。

4. 运行Worker

shell>#
vim demo/resque.php

<?php

date_default_timezone_set('GMT');

require 'job.php';

require '../bin/resque';

可以看到一个Worker至少需要两部分：

1.可以直接包含Job类文件，也可以使用php的自动加载机制，指定好Job Class所在路径并能实现自动加载。

2.包含Resque中默认的Worker: bin/resque

在cli方式下运行：

shell>#
QUEUE=default
php demo/resque.php

前面的QUEUE部分是设置的环境变量，我们指定当前的Worker只负责处理default队列。也可以使用

shell>#
QUEUE=* php
demo/resque.php

来处理所有的队列。

运行后，可以看到输出：

[notice] Starting worker
s3:19060:default

[notice] Starting work on
(Job{default} | ID: 4ee7cefcb7df03ff5475fd450e2a5bea | PHP_Job |
[{"time":1378073476,"array":{"test":"test"}}])

Start job! -> Job ended! //Job的运行结果

[notice] (Job{default} | ID:
4ee7cefcb7df03ff5475fd450e2a5bea | PHP_Job |
[{"time":1378073476,"array":{"test":"test"}}])
has finished

使用ps指令检查一下：

shell># ps aux | grep
resque

可以看到有一个php的守护进程已经在运行了

root     19060
0.0 0.6 209680 11768 pts/0    S+
06:12   0:01 php demo/resque.php

任务运行完毕后，同时屏幕可以看到输出结果！

至此利用Redis + php-resque实现消息队列的演示全部完成。

5. 参考资料

http://avnpc.com/pages/run-background-task-by-php-resque

http://kamisama.me/2012/10/09/background-jobs-with-php-and-resque-part-1-introduction/