laravel异步监控定时调度器实例详解


Posted in PHP onJune 21, 2019

定时调度器是什么

laravel默认提供了一个命令定时任务的功能,在其他的php框架下面,没有这个定时任务,我们要跑一些异步脚本怎么操作呢,只能依赖我们系统提供的crontab来做,这就导致我们每次发版本新增定时任务都要去服务器更改crontab代码,获取更新这个配置。

执行命令是php artisan schedule:run 来执行,那放在哪里执行呢,没错这个调起还是需要依赖我们crontab来执行,但是只需要配置一次,后续所有定时任务都在我们业务代码进行控制

场景

我们有一个导入数据的定时任务

//每分钟导入库数据
$schedule->command(self::SIGNATURE)->withoutOverlapping()->everyMinute()->runInBackground();

这里导入长时间最好使用runInBackground(),表示异步执行,其实就是在shell脚本的末尾加上 & 符号,在linux上完全依赖系统的方式完成。

这里使用了withoutOverlapping() 表示在同一时刻只能有一个任务执行,主要逻辑使用的是排它锁实现,依赖于我们cache的driver,我这里使用的是redis,后面作为锁的过期直接redis提供的key过期来做。

出现问题

这个任务在正常情况下都是非常完美的,因为同一时刻只有一个再跑,跑完就可以,但是一个场景出现
有一天我们的qa同学刚部署环境后,我们服务端就在默默的导入库了,因为使用withoutOverlapping($expire_at=1440)这个时候在redis就有一个锁产生了,这个默认带参数是锁的过期时间,默认是一天,然后因为我们docker环境需要更改参数然后进行后端server服务的重启,我们重启也是比较暴力,就是直接发送kill的信号,导致所有在里面跑的进程瞬间kill,而这时候我们的redis的锁缺还存在,而且是1440分钟左右,那当我们server再启动后,发现锁一直存在,没办法进行后续的操作了,只能等着。

解决

那我把锁的时间减少行不行,原来1天,我改成30分钟,没问题,开始第一版方案我们也是这样做,官方也是可以这样做的。

后来我们一想,能否做到一个监控程序呢,进程退出后立马监控到过期呢,这样就不用固定一个时间,这当然是所有软件开发者理想状态:要你开你就开,我挂了锁也就去掉了,不论正常与否。

解决方案

laravel异步监控定时调度器实例详解

说明:

  • 这里命令启动时候,获取进程的pid,然后fork子进程,可以将这个pid传递给子进程。
  • 子进程每隔10s进行一个探活,获取父进程的id与传入的pid是否一致,这里普及一个知识点,如果父进程异常退出,这个子进程未退出就会被init进程(pid=1)接管,那么这就是一个孤儿进程。
  • 同时子进程每次探活的时候就会更改redis的锁的过期时间,如果探活时间间隔是10s,那么我们的过期时间设置就是14s,多冗余一点时间。

代码实现

代码实现总是那么苍白无力哈,这里就写一个laravel的扩展来做,好处就是不影响我们主体的任何代码就完成了,我们的laravel可以随意升级。

github地址:github.com/zzh78727258…

composer地址:packagist.org/packages/ze…

总结

整体实现没有使用判断进程是否存在的ps grep等命令,因为我们docker环境不一定支持这些命令,只是用简单的pid与parent_id做对比。

laravel的在命令开始于结束都进行钩子方式,我们在Listener下面进行监听即可

public function subscribe($events)
 {
  $events->listen(
   [
    CommandStarting::class, // 命令开始的时候
   ],
   __CLASS__ . '@handle'
  );
 }

整体代码是基于laravel扩展化的,不会影响laravel的升级操作。

好了,以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,谢谢大家对三水点靠木的支持。

PHP 相关文章推荐
如何对PHP程序中的常见漏洞进行攻击
Oct 09 PHP
php 自写函数代码 获取关键字 去超链接
Feb 08 PHP
PHP面向对象概念
Nov 06 PHP
php 创建以UNIX时间戳命名的文件夹(示例代码)
Mar 08 PHP
jQuery+PHP+ajax实现微博加载更多内容列表功能
Jun 27 PHP
PHP自动重命名文件实现方法
Nov 04 PHP
ThinkPHP中url隐藏入口文件后接收alipay传值的方法
Dec 09 PHP
使用图灵api创建微信聊天机器人
Jul 23 PHP
php实现的读取CSV文件函数示例
Feb 07 PHP
phpMyAdmin通过密码漏洞留后门文件
Nov 20 PHP
laravel-admin的多级联动方法
Sep 30 PHP
ThinkPHP类似AOP思想的参数验证的实现方法
Dec 18 PHP
apache集成php7.3.5的详细步骤
Jun 20 #PHP
PHP基础之输出缓冲区基本概念、原理分析
Jun 19 #PHP
PHP进阶学习之Geo的地图定位算法详解
Jun 19 #PHP
PHP进阶学习之依赖注入与Ioc容器详解
Jun 19 #PHP
yii2 在控制器中验证请求参数的使用方法
Jun 19 #PHP
php自定义排序uasort函数示例【二维数组按指定键值排序】
Jun 19 #PHP
windows 2008r2+php5.6.28环境搭建详细过程
Jun 18 #PHP
You might like
世界上第一台立体声收音机
2021/03/01 无线电
mac环境中使用brew安装php5.5.15
2014/08/18 PHP
php微信开发之带参数二维码的使用
2016/08/03 PHP
php版微信js-sdk支付接口类用法示例
2016/10/12 PHP
PHP函数按引用传递参数及函数可选参数用法示例
2018/06/04 PHP
JavaScript 页面编码与浏览器类型判断代码
2010/06/03 Javascript
jQuery简单实现图片预加载
2015/04/20 Javascript
浅析jQuery 遍历函数,javascript中的each遍历
2016/05/25 Javascript
使用D3.js创建物流地图的示例代码
2018/01/27 Javascript
解决Layui 表单提交数据为空的问题
2018/08/15 Javascript
Bootstrap-table自定义可编辑每页显示记录数
2018/09/07 Javascript
js实现tab栏切换效果
2020/08/02 Javascript
[49:54]Ti4 循环赛第三日 LGD vs Titan
2014/07/12 DOTA
Python中集合类型(set)学习小结
2015/01/28 Python
Python RuntimeError: thread.__init__() not called解决方法
2015/04/28 Python
Python实现的HTTP并发测试完整示例
2020/04/23 Python
Python IDLE 错误:IDLE''s subprocess didn''t make connection 的解决方案
2017/02/13 Python
python 中的list和array的不同之处及转换问题
2018/03/13 Python
Python之文字转图片方法
2018/05/10 Python
django 解决manage.py migrate无效的问题
2018/05/27 Python
使用PM2+nginx部署python项目的方法示例
2018/11/07 Python
python实现年会抽奖程序
2019/01/22 Python
PyQt 实现使窗口中的元素跟随窗口大小的变化而变化
2019/06/18 Python
用pyqt5 给按钮设置图标和css样式的方法
2019/06/24 Python
伦敦平价潮流珠宝首饰品牌:Astrid & Miyu
2016/10/10 全球购物
纪伊国屋新加坡网上书店:Kinokuniya新加坡
2017/12/29 全球购物
大整数数相乘的问题
2012/07/22 面试题
卫校毕业生自我鉴定
2013/10/31 职场文书
大学生的应聘自我评价
2013/12/13 职场文书
省三好学生申请材料
2014/01/22 职场文书
《兰亭集序》教学反思
2014/02/11 职场文书
股东协议书
2014/04/14 职场文书
试用期转正员工自我评价
2014/09/18 职场文书
数据库连接池
2021/04/06 MySQL
浅谈PHP7中的一些小技巧
2021/05/29 PHP
Mysql数据库表中为什么有索引却没有提高查询速度
2022/02/24 MySQL