Laravel使用消息队列需要注意的一些问题


Posted in PHP onDecember 13, 2017

前言

消息队列对于大型的Web项目来说是必不可少的一个模块,通过消息队列可以解决大并发和多种语言通信接口等问题。对于大并发的问题,可以将耗时的任务或者不能同时大量并行的任务封装起来传输到消息队列中,由处理程序不断从消息队列中提取消息并进行处理,这样通过消息队列的缓冲可以使得在大并发情况下不再阻塞,如果性能不够用还可以添加多个处理任务从消息队列中获取消息进行处理。比如数据库的操作,当对数据库的读、写操作过多时就会存在锁表等问题,读的问题可以通过缓存等方案解决,写的问题就需要消息队列来解决。而且,在大型的Web项目开发中,很多情况下不可能通过一种语言实现,需要发挥不同语言的优势,比如PHP,虽然在理论意义上它可以做Web开发中的所有事情,但是有些问题用它解决效率将会非常低,比如实时socket连接和分布式事务处理等。

使用 Laravel 的消息队列处理异步任务,Redis 作为队列数据库,Supervisor 监控脚本异常中断并自动重启,这是 Laravel 处理队列任务的标准流程,但是实际中可能还会出现各种各样的问题,为了保证系统可靠性,还要注意几个问题。

一、执行失败重试次数设置

一定要设置任务执行失败重试次数,避免无限失败重试,超过重试次数 Laravel 会默认写到失败任务表中,也可以自己写执行失败后续处理逻辑。

php artisan queue:work redis --tries=3

需要先执行以下命令创建数据表:

php artisan queue:failed-table
php artisan migrate

二、程序异常的处理

有时候程序执行过程会发生异常,比如依赖其他接口,请求 HTTP 接口超时等等,如果不捕捉异常,那么当前这个队列就会中断不能继续运行下去,比如给 10000 个用户推送内容,需要依赖接口推送,如果中间的请求挂了就会影响到后面的推送。

这里的异常是指程序执行过程中发生的异常,不是指常驻进程挂掉,程序异常不一定导致常驻进程中断,况且进程中断有 Supervisor 监控并重启。

如捕获异常代码片段:

try {
 $r = $client->request('POST', '', [
  'query' => [
   'client_name'  => 'filemail',
   'client_version' => '1.0',
   'client_sequence' => 0,
   'uid'    => 692934013,//119481237
   'r'    => 1508312484,
  ],
  'body' => \GuzzleHttp\json_encode($body),
 ]);
 $result = $r->getBody()->getContents();
 $result = json_decode($result, true);
 if ($result['result'] == 0) {
  info("sendMail fail:" . json_encode($result));
  $this->pushLog($task['id'], $task['mail_id'], implode(',', $userIds), json_encode($result), 0);
 } else {
  Log::warning("sendMail fail:" . json_encode($result));
  $this->pushLog($task['id'], $task['mail_id'], implode(',', $userIds), json_encode($result), $result['result']);
 }
} catch (RequestException $e) {
 Log::warning('RequestException' . $e->getMessage());
} catch (Exception $e) {
 Log::emergency('Exception' . $e->getMessage());
}

三、修改代码记得重启 Supervisor

最后一点,修改了处理队列的程序,记得要重启 Supervisor,否则脚本不会生效。

Laravel 往 Redis 写队列的数据结构

队列用 list 类型存储,如图:

Laravel使用消息队列需要注意的一些问题 

value 内容如下:

{
 "job": "Illuminate\\Queue\\CallQueuedHandler@call",
 "data": {
 "commandName": "App\\Jobs\\SendFile",
 "command": "O:17:\"App\\Jobs\\SendFile\":5:{s:23:\"\u0000App\\Jobs\\SendFile\u0000task\";a:8:{s:5:\"title\";s:4:\"1111\";s:4:\"note\";s:2:\"11\";s:6:\"reward\";s:0:\"\";s:7:\"mail_id\";s:5:\"66681\";s:4:\"nums\";i:20;s:8:\"uid_file\";s:33:\"uidfile\/file-66681-1513058185.txt\";s:5:\"gcids\";s:40:\"1B9DD95645AAE8119F7DA9B9FF738D52BC8A1BD5\";s:2:\"id\";i:29;}s:6:\"\u0000*\u0000job\";N;s:10:\"connection\";N;s:5:\"queue\";s:8:\"sendfile\";s:5:\"delay\";N;}"
 },
 "id": "l0mjsUthbxm4TgIJNUH13km9N8DIpErK",
 "attempts": 1
}

包含失败重试次数,队列标识,处理队列的类,以及队列的数据等等。

参考链接

Laravel 官方文档 Queue 队列:

https://laravel.com/docs/5.5/queues

总结

以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,如果有疑问大家可以留言交流,谢谢大家对三水点靠木的支持。

PHP 相关文章推荐
php 获取全局变量的代码
Apr 21 PHP
php开启安全模式后禁用的函数集合
Jun 26 PHP
php中邮箱地址正则表达式实现与详解
Apr 24 PHP
PHP中使用mktime获取时间戳的一个黑色幽默分析
May 31 PHP
关于php 接口问题(php接口主要也就是运用curl,curl函数)
Jul 01 PHP
基于CakePHP实现的简单博客系统实例
Jun 28 PHP
PHP生成随机密码方法汇总
Aug 27 PHP
Yii净化器CHtmlPurifier用法示例(过滤不良代码)
Jul 15 PHP
PHP串行化与反串行化实例分析
Dec 27 PHP
yii2.0整合阿里云oss的示例代码
Sep 19 PHP
PHP中quotemeta()函数的用法讲解
Apr 04 PHP
Swoole源码中如何查询Websocket的连接问题详解
Aug 30 PHP
实例分析PHP中PHPMailer发邮件
Dec 13 #PHP
使用XHProf查找PHP性能瓶颈的实例
Dec 13 #PHP
PHP让数组中有相同值的组成新的数组实例
Dec 31 #PHP
详谈PHP中public,private,protected,abstract等关键字的用法
Dec 31 #PHP
php中通用的excel导出方法实例
Dec 30 #PHP
利用Laravel生成Gravatar头像地址的优雅方法
Dec 30 #PHP
PHP如何实现订单的延时处理详解
Dec 30 #PHP
You might like
PHP实现上传图片到 zimg 服务器
2016/10/19 PHP
tp5 实现列表数据根据状态排序
2019/10/18 PHP
js arguments.callee的应用代码
2009/05/07 Javascript
js中方法重载如何实现?以及函数的参数问题
2013/08/01 Javascript
JavaScript 命名空间 使用介绍
2013/08/29 Javascript
JS模拟实现Select效果代码
2015/09/24 Javascript
javascript实现tab切换的两个实例
2015/11/05 Javascript
每天一篇javascript学习小结(属性定义方法)
2015/11/19 Javascript
JavaScript实现复制文章自动添加版权
2016/08/02 Javascript
微信小程序--onShareAppMessage分享参数用处(页面分享)
2017/04/18 Javascript
js下载文件并修改文件名
2017/05/08 Javascript
js实现canvas保存图片为png格式并下载到本地的方法
2017/08/31 Javascript
echarts学习笔记之箱线图的分析与绘制详解
2017/11/22 Javascript
JS箭头函数和常规函数之间的区别实例分析【 5 个区别】
2020/05/27 Javascript
重命名批处理python脚本
2013/04/05 Python
python使用pymysql实现操作mysql
2016/09/13 Python
python下setuptools的安装详解及No module named setuptools的解决方法
2017/07/06 Python
Python3.x对JSON的一些操作示例
2017/09/01 Python
浅谈python中copy和deepcopy中的区别
2017/10/23 Python
python按综合、销量排序抓取100页的淘宝商品列表信息
2018/02/24 Python
python日期时间转为字符串或者格式化输出的实例
2018/05/29 Python
python 将字符串完成特定的向右移动方法
2019/06/11 Python
python调用私有属性的方法总结
2020/07/24 Python
如何将anaconda安装配置的mmdetection环境离线拷贝到另一台电脑
2020/10/15 Python
python 发送邮件的示例代码(Python2/3都可以直接使用)
2020/12/03 Python
全球领先美式家具品牌:Ashley爱室丽家居
2017/08/07 全球购物
编写一子程序,将一链表倒序,即使链表表尾变表头,表头变表尾
2016/02/10 面试题
岗位职责风险点
2014/03/12 职场文书
施工安全汇报材料
2014/08/17 职场文书
酒店端午节活动方案
2014/08/26 职场文书
财务工作犯错检讨书
2014/10/07 职场文书
党性分析自查总结
2014/10/14 职场文书
交警正风肃纪剖析材料
2014/10/29 职场文书
工厂清洁工岗位职责
2015/02/14 职场文书
2015年小学重阳节活动总结
2015/07/29 职场文书
Oracle配置dblink访问PostgreSQL的操作方法
2022/03/21 PostgreSQL