Gearman 是什么?

Gearman是一个用来把工作委派给其他机器、分布式的调用更适合做某项工作的机器、并发的做某项工作在多个调用间做负载均衡、或用来在调用其它语言的函数的系统。

Gearman 工作原理

  • Client(客户端):创建一个Job。

  • Server(服务):找到合适的Worker,把 Job 交给 Worker。

  • Worker(工人):执行Job。

Web 中常用的场景。

  • 裁剪图片,生成缩略图。

  • 文件分发(针对用户上传的文件,进行多台服务器分发)。

  • 视频转码(对上传的视频,进行转码存储)。

  • 系统报警(当系统出现问题的时候,第一时间通知相关人)。

这篇文章主要讲解 系统报警 场景

在开发系统的过程中,往往程序会出现这样,那样的问题。

我们要第一时间获取错误问题,通知短信,邮件通知给相关人员。

因为,短信、邮件的发送比较耗时,并发量大的情况下,会出现延时现象。

所以,使用 Gearman 实现短信,邮件的异步发送。

Gearman 安装的两种方式

  • 方式一:官网推荐安装方法

官网地址:http://gearman.org/getting-st...

yum install gearmand
  • 方式二:自定义安装

    • 安装libevent:

      wget get https://github.com/libevent/libevent/releases/download/release-2.0.22-stable/libevent-2.0.22-stable.tar.gz
      
      tar zxvf libevent-2.0.22-stable.tar.gz
      
      ./configure --prefix=/usr
      
      make && make install
      • 安装Gearman server and library:

        wget get https://launchpad.net/gearmand/1.2/1.1.12/+download/gearmand-1.1.12.tar.gz
        
        tar zxvf gearmand-1.1.12.tar.gz
        
        cd gearmand-1.1.12
        
        ./configure
        
        如果报错:configure: error: could not find boost
        
        yum install -y boost boost-devel
        
        如果报错:configure: error: could not find gperf
        
        yum install gperf
        
        如果报错:configure: error: Unable to find libuuid
        
        yum install libuuid-devel
        
        make && make install
        
        安装成功后,执行 gearmand -V 查询版本号。
        
        gearmand -d 开启服务。
        
        温馨提示:
        仅供参考,遇到不可预测的问题,请进行Google。
      • 安装Gearman PHP extension:

        wget get http://pecl.php.net/get/gearman-1.1.2.tgz
        
        tar zxvf gearman-1.1.2.tgz
        
        cd gearman-1.1.2
        
        /usr/local/php/bin/phpize
        
        ./configure --with-php-config=/usr/local/php/bin/php-config --with-gearman
        
        如果报错:configure: error: Please install libgearman
        
        yum install -y libgearman-devel.x86_64

案例(系统报警)

  • 开启服务

gearmand -d
  • 执行Worker

php worker.php
  • client.php

<?php
//设置错误处理器
set_error_handler('errorHandler'); //在脚本结束时运行的函数
register_shutdown_function('fatalErrorHandler'); //这里发生一个警告错误,被errorHandler 捕获
$a = $b; //发生致命错误,脚本停止运行触发 fatalErrorHandler
$c = new Test(); /**
* 错误处理
* @param int $err_no 错误代码
* @param string $err_msg 错误信息
* @param string $err_file 错误文件
* @param int $err_line 错误行号
* @param int $is_fatal_error 是否为致命错误
* @return string
*/
function errorHandler($err_no = 0, $err_msg = '', $err_file = '', $err_line = 0, $is_fatal_error = 0)
{
$strEmailInfo = ($is_fatal_error == 1) ? "【致命错误】\n" : "【警告错误】\n"; $strEmailInfo .= "时间:".date('Y-m-d H:i:s')."\n";
$strEmailInfo .= "错误代码:{$err_no}\n";
$strEmailInfo .= "错误信息:{$err_msg}\n";
$strEmailInfo .= "错误文件:{$err_file}\n";
$strEmailInfo .= "错误行号:{$err_line}\n"; $strSmsInfo = "[致命错误]错误代码:{$err_no},错误信息:{$err_msg},错误文件:{$err_file}"; $client= new GearmanClient();
$client->addServer("127.0.0.1", 4730);
$client->doNormal("send_mail", $strEmailInfo);
if ($is_fatal_error == 1) {
$client->doNormal("send_sms", $strSmsInfo);
}
} /**
* 捕捉致命错误
* @return string
*/
function fatalErrorHandler() {
$e = error_get_last();
switch ($e['type']) {
case 1:
errorHandler($e['type'], $e['message'], $e['file'], $e['line'], 1);
break;
}
}
  • worker.php

<?php
$worker = new GearmanWorker();
$worker->addServer("127.0.0.1", 4730);
$worker->addFunction("send_mail", "doSendMail");
$worker->addFunction("send_sms", "doSendSms");
while ($worker->work()); /**
* 执行发送邮件的Job
* @param $job
* @return string
*/
function doSendMail($job)
{
$strEmailInfo = $job->workload(); /**
* 在这个方法里完善发送邮件的操作
* ......
* Demo是把信息写入到文件中
*/ return file_put_contents("gearman.txt", $strEmailInfo."\n", FILE_APPEND);
} /**
* 执行发送短信的Job
* @param $job
* @return string
*/
function doSendSms($job)
{
$strSmsInfo = $job->workload(); /**
* 在这个方法里完善发送短信的操作
* ......
* Demo是把信息写入到文件中
*/ return file_put_contents("gearman.txt", $strSmsInfo."\n", FILE_APPEND);
}
  • gearman.txt


【警告错误】
时间:2016-09-22 23:15:10
错误代码:8
错误信息:Undefined variable: b
错误文件:/home/www/mi/gearman/client.php
错误行号:9 【致命错误】
时间:2016-09-22 23:15:10
错误代码:1
错误信息:Class 'Test' not found
错误文件:/home/www/mi/gearman/client.php
错误行号:12 [致命错误]错误代码:1,错误信息:Class 'Test' not found,错误文件:/home/www/mi/gearman/client.php

温馨提示

  • 也可以用 Redis Queue 来实现上面的需求。

  • 也可以用 Swoole 来实现上面的需求。

  • 也可以了解下 Gearman 与 Swoole 的区别。

利用 Gearman 实现系统错误报警功能的更多相关文章

  1. 利用Gearman实现并发查询(Multi-Query)

    这个样例是想从数据库查询出几个结果集,一般的做法是,一个接一个的发送查询,然后汇总结果进行输出. 以下我们利用Gearman的gearman_client_run_tasks实现并发的查询,gearm ...

  2. [转]PHP利用Gearman来处理并行多进程问题

    From : http://www.yuansir-web.com/2013/11/25/php%E5%88%A9%E7%94%A8gearman%E6%9D%A5%E5%A4%84%E7%90%86 ...

  3. 利用gearman同步mysql数据到redis

    一.Gearman 1.Gearman是一个分发任务的程序框架. 2.体系:a.client:发送一个jobb.server:找到合适的worker,把job交给该workerc.worker:处理j ...

  4. 在yii中使用gearman

    最近项目需要将利用gearman进行任务调度,目前所用框架为yii,在部署好gearman后,试图在yii中调用gearman,一直报错: 提示reverse函数没有定义,明明已经定义了啊!可能是当时 ...

  5. gearman安装及初次使用

    官网:  http://gearman.org/ 一篇文章: 利用Gearman实现异步任务处理 一.问题分析 问题:在性能测试过程中,发现用户管理平台在进行图片上传时,性能不佳. 分析:经过代码分析 ...

  6. 利用QT、QWebview、ffmpeg实现的屏幕录制方案

    .katex { display: block; text-align: center; white-space: nowrap; } .katex-display > .katex > ...

  7. 跨多种环境部署 Gearman -改善应用程序性能和降低服务器负载

    您可能想要将工作扩散到一个大型机器群体中,或者想要在不同语言和环境之间共享功能,那么开放源码的 Gearman 服务可以让您轻松地将工作分布到网络中的其他机器.本文将介绍 Gearman 的一些典型应 ...

  8. Python基础篇【第3篇】: Python异常处理、反射、动态导入、利用反射的web框架

    异常处理 什么是异常? 异常即是一个事件,该事件会在程序执行过程中发生,影响了程序的正常执行. 一般情况下,在Python无法正常处理程序时就会发生一个异常.异常是Python对象,表示一个错误.当P ...

  9. 通过Gearman实现MySQL到Redis的数据同步

    对于变化频率非常快的数据来说,如果还选择传统的静态缓存方式(Memocached.File System等)展示数据,可能在缓存的存取上会有很大的开销,并不能很好的满足需要,而Redis这样基于内存的 ...

随机推荐

  1. P2241 统计方形(数据加强版)

    题目背景 1997年普及组第一题 题目描述 有一个n*m方格的棋盘,求其方格包含多少正方形.长方形 输入输出格式 输入格式: n,m因为原来数据太弱,现规定m小于等于5000,n小于等于5000(原来 ...

  2. JDBC: 批量处理提高SQL处理速度

    引用:忘了 当需要成批插入或者更新记录时.可以采用Java的批量更新机制,这一机制允许多条语句一次性提交给数据库批量处理.通常情况下比单独提交处理更有效率 JDBC的批量处理语句包括下面两个方法: a ...

  3. (转载) ORA-12537:TNS连接已关闭

    今天在远程客户端配置EBS数据库连接的时候发生“ORA-12537:TNS连接已关闭”的错误.进入服务器运行如下命令:$tnsping VIS 这里VIS如果定义服务名,可以写成 $ tnsping ...

  4. win2008系统日志不断出现【审核失败】

    win2008系统日志不断出现[审核失败] [现象] 今天查看windows日志,在  -安全-  发现不断有消息刷出,显示  -审核失败-  事件ID为4624 的记录  每分钟大概刷新8条消息(如 ...

  5. 国外AI界牛人主页 及资源链接

    感觉 好博客要收集,还是贴在自己空间里难忘!!! 原文链接:http://blog.csdn.net/hitwengqi/article/details/7907366 http://people.c ...

  6. Gartner2017年数据科学领域最酷供应商出炉,实至名归

    文 | 帆软数据应用研究院 水手哥 更多大数据资讯和企业案例可关注 :知乎专栏<帆软数据应用研究院> 近日,Gartner公布了2017年度数据科学和机器学习领域的最酷供应商,清一色的美国 ...

  7. 神奇的splay树

    神奇的splay树 总结 splay树是一种BST,其通过不断的splay操作维持树的平衡:其基本思想是将频率高的点(实际是每次查找的点)通过splay操作旋转到树根 核心操作: update(x): ...

  8. scrapy爬虫--10分钟入门

    # -*- coding: utf-8 -*- # @Time : 2019/4/18 9:10 # @Author : wujf # @Email : 1028540310@qq.com # @Fi ...

  9. python PIL图像处理-图片上添加文字

    首先需要安装库pillow cmd安装命令:pip install pillow 安装完后,编写脚本如下: from PIL import Image, ImageDraw, ImageFont de ...

  10. Hadoop 使用小命令(2)

    一.查看一堆文件共有多少行 查看file1/file2目录下所有文件总共多少行 hadoop fs -text file1/file2/* | wc -l 二.正则表达式 hadoop fs -tex ...