Laravel使用消息队列需要注意的一些问题


Posted in PHP onDecember 13, 2017

前言

消息队列对于大型的Web项目来说是必不可少的一个模块,通过消息队列可以解决大并发和多种语言通信接口等问题。对于大并发的问题,可以将耗时的任务或者不能同时大量并行的任务封装起来传输到消息队列中,由处理程序不断从消息队列中提取消息并进行处理,这样通过消息队列的缓冲可以使得在大并发情况下不再阻塞,如果性能不够用还可以添加多个处理任务从消息队列中获取消息进行处理。比如数据库的操作,当对数据库的读、写操作过多时就会存在锁表等问题,读的问题可以通过缓存等方案解决,写的问题就需要消息队列来解决。而且,在大型的Web项目开发中,很多情况下不可能通过一种语言实现,需要发挥不同语言的优势,比如PHP,虽然在理论意义上它可以做Web开发中的所有事情,但是有些问题用它解决效率将会非常低,比如实时socket连接和分布式事务处理等。

使用 Laravel 的消息队列处理异步任务,Redis 作为队列数据库,Supervisor 监控脚本异常中断并自动重启,这是 Laravel 处理队列任务的标准流程,但是实际中可能还会出现各种各样的问题,为了保证系统可靠性,还要注意几个问题。

一、执行失败重试次数设置

一定要设置任务执行失败重试次数,避免无限失败重试,超过重试次数 Laravel 会默认写到失败任务表中,也可以自己写执行失败后续处理逻辑。

php artisan queue:work redis --tries=3

需要先执行以下命令创建数据表:

php artisan queue:failed-table
php artisan migrate

二、程序异常的处理

有时候程序执行过程会发生异常,比如依赖其他接口,请求 HTTP 接口超时等等,如果不捕捉异常,那么当前这个队列就会中断不能继续运行下去,比如给 10000 个用户推送内容,需要依赖接口推送,如果中间的请求挂了就会影响到后面的推送。

这里的异常是指程序执行过程中发生的异常,不是指常驻进程挂掉,程序异常不一定导致常驻进程中断,况且进程中断有 Supervisor 监控并重启。

如捕获异常代码片段:

try {
 $r = $client->request('POST', '', [
  'query' => [
   'client_name'  => 'filemail',
   'client_version' => '1.0',
   'client_sequence' => 0,
   'uid'    => 692934013,//119481237
   'r'    => 1508312484,
  ],
  'body' => \GuzzleHttp\json_encode($body),
 ]);
 $result = $r->getBody()->getContents();
 $result = json_decode($result, true);
 if ($result['result'] == 0) {
  info("sendMail fail:" . json_encode($result));
  $this->pushLog($task['id'], $task['mail_id'], implode(',', $userIds), json_encode($result), 0);
 } else {
  Log::warning("sendMail fail:" . json_encode($result));
  $this->pushLog($task['id'], $task['mail_id'], implode(',', $userIds), json_encode($result), $result['result']);
 }
} catch (RequestException $e) {
 Log::warning('RequestException' . $e->getMessage());
} catch (Exception $e) {
 Log::emergency('Exception' . $e->getMessage());
}

三、修改代码记得重启 Supervisor

最后一点,修改了处理队列的程序,记得要重启 Supervisor,否则脚本不会生效。

Laravel 往 Redis 写队列的数据结构

队列用 list 类型存储,如图:

Laravel使用消息队列需要注意的一些问题 

value 内容如下:

{
 "job": "Illuminate\\Queue\\CallQueuedHandler@call",
 "data": {
 "commandName": "App\\Jobs\\SendFile",
 "command": "O:17:\"App\\Jobs\\SendFile\":5:{s:23:\"\u0000App\\Jobs\\SendFile\u0000task\";a:8:{s:5:\"title\";s:4:\"1111\";s:4:\"note\";s:2:\"11\";s:6:\"reward\";s:0:\"\";s:7:\"mail_id\";s:5:\"66681\";s:4:\"nums\";i:20;s:8:\"uid_file\";s:33:\"uidfile\/file-66681-1513058185.txt\";s:5:\"gcids\";s:40:\"1B9DD95645AAE8119F7DA9B9FF738D52BC8A1BD5\";s:2:\"id\";i:29;}s:6:\"\u0000*\u0000job\";N;s:10:\"connection\";N;s:5:\"queue\";s:8:\"sendfile\";s:5:\"delay\";N;}"
 },
 "id": "l0mjsUthbxm4TgIJNUH13km9N8DIpErK",
 "attempts": 1
}

包含失败重试次数,队列标识,处理队列的类,以及队列的数据等等。

参考链接

Laravel 官方文档 Queue 队列:

https://laravel.com/docs/5.5/queues

总结

以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,如果有疑问大家可以留言交流,谢谢大家对三水点靠木的支持。

PHP 相关文章推荐
PHP将整个网站生成HTML纯静态网页的方法总结
Feb 05 PHP
PHP中new static()与new self()的区别异同分析
Aug 22 PHP
PHP中让curl支持sock5的代码实例
Jan 21 PHP
PHP中文乱码解决方案
Mar 05 PHP
php多重接口的实现方法
Jun 20 PHP
PHP中配置IIS7实现基本身份验证的方法
Sep 24 PHP
Yii框架组件和事件行为管理详解
May 20 PHP
详解PHP防止盗链防止迅雷下载的方法
Apr 26 PHP
SCP远程VPS快速搬家和WDCP升级php5.3安装memcached和eaccelerator教程
Jul 27 PHP
Thinkphp5行为使用方法汇总
Dec 21 PHP
PHPUnit测试私有属性和方法功能示例
Jun 12 PHP
PHP生成短网址的思路以及实现方法的详解
Mar 25 PHP
实例分析PHP中PHPMailer发邮件
Dec 13 #PHP
使用XHProf查找PHP性能瓶颈的实例
Dec 13 #PHP
PHP让数组中有相同值的组成新的数组实例
Dec 31 #PHP
详谈PHP中public,private,protected,abstract等关键字的用法
Dec 31 #PHP
php中通用的excel导出方法实例
Dec 30 #PHP
利用Laravel生成Gravatar头像地址的优雅方法
Dec 30 #PHP
PHP如何实现订单的延时处理详解
Dec 30 #PHP
You might like
2019年中国咖啡业现状与发展趋势
2021/03/04 咖啡文化
PHP的fsockopen、pfsockopen函数被主机商禁用的解决办法
2014/07/08 PHP
js跨域和ajax 跨域问题的实现思路
2009/09/05 Javascript
ExtJs3.0中Store添加 baseParams 的Bug
2010/03/10 Javascript
3款实用的在线JS代码工具(国外)
2012/03/15 Javascript
通过length属性判断jquery对象是否存在
2013/10/18 Javascript
jquery实现无限分级横向导航菜单的方法
2015/03/12 Javascript
jQuery删除一个元素后淡出效果展示删除过程的方法
2015/03/18 Javascript
javascript带回调函数的异步脚本载入方法实例分析
2015/07/02 Javascript
jQuery下拉友情链接美化效果代码分享
2015/08/26 Javascript
javascript实现日期时间动态显示示例代码
2015/09/08 Javascript
讲解JavaScript的Backbone.js框架的MVC结构设计理念
2016/02/14 Javascript
基于Bootstrap的Java开发问题汇总(Spring MVC)
2017/01/15 Javascript
Bootstrap模态窗口源码解析
2017/02/08 Javascript
jQuery实现简单漂亮的Nav导航菜单效果
2017/03/29 jQuery
详解vuex持久化插件解决浏览器刷新数据消失问题
2019/04/15 Javascript
解决一个微信号同时支持多个环境网页授权问题
2019/08/07 Javascript
JS如何判断对象是否包含某个属性
2020/08/29 Javascript
python添加模块搜索路径方法
2017/09/11 Python
Python排序搜索基本算法之插入排序实例分析
2017/12/11 Python
windows下python 3.6.4安装配置图文教程
2018/08/21 Python
Python实现图像的垂直投影示例
2020/01/17 Python
Jupyter 无法下载文件夹如何实现曲线救国
2020/04/22 Python
Python是怎样处理json模块的
2020/07/16 Python
Python pathlib模块使用方法及实例解析
2020/10/05 Python
python实现定时发送邮件
2020/12/23 Python
boostrap modal 闪现问题的解决方法
2020/09/01 HTML / CSS
三星美国官网:Samsung美国
2017/02/06 全球购物
巴基斯坦电子产品购物网站:Home Shopping
2017/09/14 全球购物
政府采购方案
2014/06/12 职场文书
2014镇副书记群众路线专题民主生活会思想汇报
2014/09/23 职场文书
2014年协会工作总结
2014/11/22 职场文书
2015年话务员工作总结
2015/04/29 职场文书
2015医院个人工作总结范文
2015/05/21 职场文书
军训心得体会范文(2016最新篇)
2016/01/11 职场文书
用Python远程登陆服务器的步骤
2021/04/16 Python