laravel异步监控定时调度器实例详解


Posted in PHP onJune 21, 2019

定时调度器是什么

laravel默认提供了一个命令定时任务的功能,在其他的php框架下面,没有这个定时任务,我们要跑一些异步脚本怎么操作呢,只能依赖我们系统提供的crontab来做,这就导致我们每次发版本新增定时任务都要去服务器更改crontab代码,获取更新这个配置。

执行命令是php artisan schedule:run 来执行,那放在哪里执行呢,没错这个调起还是需要依赖我们crontab来执行,但是只需要配置一次,后续所有定时任务都在我们业务代码进行控制

场景

我们有一个导入数据的定时任务

//每分钟导入库数据
$schedule->command(self::SIGNATURE)->withoutOverlapping()->everyMinute()->runInBackground();

这里导入长时间最好使用runInBackground(),表示异步执行,其实就是在shell脚本的末尾加上 & 符号,在linux上完全依赖系统的方式完成。

这里使用了withoutOverlapping() 表示在同一时刻只能有一个任务执行,主要逻辑使用的是排它锁实现,依赖于我们cache的driver,我这里使用的是redis,后面作为锁的过期直接redis提供的key过期来做。

出现问题

这个任务在正常情况下都是非常完美的,因为同一时刻只有一个再跑,跑完就可以,但是一个场景出现
有一天我们的qa同学刚部署环境后,我们服务端就在默默的导入库了,因为使用withoutOverlapping($expire_at=1440)这个时候在redis就有一个锁产生了,这个默认带参数是锁的过期时间,默认是一天,然后因为我们docker环境需要更改参数然后进行后端server服务的重启,我们重启也是比较暴力,就是直接发送kill的信号,导致所有在里面跑的进程瞬间kill,而这时候我们的redis的锁缺还存在,而且是1440分钟左右,那当我们server再启动后,发现锁一直存在,没办法进行后续的操作了,只能等着。

解决

那我把锁的时间减少行不行,原来1天,我改成30分钟,没问题,开始第一版方案我们也是这样做,官方也是可以这样做的。

后来我们一想,能否做到一个监控程序呢,进程退出后立马监控到过期呢,这样就不用固定一个时间,这当然是所有软件开发者理想状态:要你开你就开,我挂了锁也就去掉了,不论正常与否。

解决方案

laravel异步监控定时调度器实例详解

说明:

  • 这里命令启动时候,获取进程的pid,然后fork子进程,可以将这个pid传递给子进程。
  • 子进程每隔10s进行一个探活,获取父进程的id与传入的pid是否一致,这里普及一个知识点,如果父进程异常退出,这个子进程未退出就会被init进程(pid=1)接管,那么这就是一个孤儿进程。
  • 同时子进程每次探活的时候就会更改redis的锁的过期时间,如果探活时间间隔是10s,那么我们的过期时间设置就是14s,多冗余一点时间。

代码实现

代码实现总是那么苍白无力哈,这里就写一个laravel的扩展来做,好处就是不影响我们主体的任何代码就完成了,我们的laravel可以随意升级。

github地址:github.com/zzh78727258…

composer地址:packagist.org/packages/ze…

总结

整体实现没有使用判断进程是否存在的ps grep等命令,因为我们docker环境不一定支持这些命令,只是用简单的pid与parent_id做对比。

laravel的在命令开始于结束都进行钩子方式,我们在Listener下面进行监听即可

public function subscribe($events)
 {
  $events->listen(
   [
    CommandStarting::class, // 命令开始的时候
   ],
   __CLASS__ . '@handle'
  );
 }

整体代码是基于laravel扩展化的,不会影响laravel的升级操作。

好了,以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,谢谢大家对三水点靠木的支持。

PHP 相关文章推荐
PHP5.0正式发布 不完全兼容PHP4 新增多项功能
Oct 09 PHP
php获取ip的三个属性区别介绍(HTTP_X_FORWARDED_FOR,HTTP_VIA,REMOTE_ADDR)
Sep 23 PHP
php mssql扩展SQL查询中文字段名解决方法
Oct 15 PHP
php中如何使对象可以像数组一样进行foreach循环
Aug 09 PHP
php获取网页标题和内容函数(不包含html标签)
Feb 03 PHP
ThinkPHP3.2.2的插件控制器功能
Mar 05 PHP
typecho插件编写教程(五):核心代码
May 28 PHP
CodeIgniter中使用Smarty3基本配置
Jun 29 PHP
CodeIgniter配置之config.php用法实例分析
Jan 19 PHP
PHP 5.6.11中CURL模块问题的解决方法
Aug 08 PHP
PHP实现的最大正向匹配算法示例
Dec 19 PHP
在laravel中使用with实现动态添加where条件
Oct 10 PHP
apache集成php7.3.5的详细步骤
Jun 20 #PHP
PHP基础之输出缓冲区基本概念、原理分析
Jun 19 #PHP
PHP进阶学习之Geo的地图定位算法详解
Jun 19 #PHP
PHP进阶学习之依赖注入与Ioc容器详解
Jun 19 #PHP
yii2 在控制器中验证请求参数的使用方法
Jun 19 #PHP
php自定义排序uasort函数示例【二维数组按指定键值排序】
Jun 19 #PHP
windows 2008r2+php5.6.28环境搭建详细过程
Jun 18 #PHP
You might like
js限制checkbox勾选的个数以及php获取多个checkbbox的方法深入解析
2013/07/18 PHP
Zend Framework教程之Zend_Config_Ini用法分析
2016/03/23 PHP
PHP addslashes()函数讲解
2019/02/03 PHP
Js 获取当前日期时间及其它操作实现代码
2021/03/04 Javascript
jquery图片延迟加载 前端开发技能必备系列
2012/06/18 Javascript
jquery实现背景墙聚光灯效果示例分享
2014/03/02 Javascript
Javascript中设置默认参数值示例
2014/09/11 Javascript
JavaScript日期时间与时间戳的转换函数分享
2015/01/31 Javascript
Linux下编译安装php libevent扩展实例
2015/02/14 Javascript
两行代码轻松搞定JavaScript日期验证
2016/08/03 Javascript
js实现hashtable的赋值、取值、遍历操作实例详解
2016/12/25 Javascript
Vue keep-alive实践总结(推荐)
2017/08/31 Javascript
JavaScript实现的超简单计算器功能示例
2017/12/23 Javascript
Vue axios设置访问基础路径方法
2018/09/19 Javascript
Vue的生命周期操作示例
2019/09/17 Javascript
JavaScript动画实例之粒子文本的实现方法详解
2020/07/28 Javascript
VUE-ElementUI 自定义Loading图操作
2020/11/11 Javascript
python使用PyFetion来发送短信的例子
2014/04/22 Python
python基础教程之循环介绍
2014/08/29 Python
Pycharm远程调试openstack的方法
2017/11/21 Python
Python实现爬虫抓取与读写、追加到excel文件操作示例
2018/06/27 Python
Python django搭建layui提交表单,表格,图标的实例
2019/11/18 Python
Python进程池Pool应用实例分析
2019/11/27 Python
django框架auth模块用法实例详解
2019/12/10 Python
python tkinter GUI绘制,以及点击更新显示图片代码
2020/03/14 Python
Python爬虫如何应对Cloudflare邮箱加密
2020/06/24 Python
css3实现一款模仿iphone样式的注册表单
2013/03/20 HTML / CSS
CSS3 中filter(滤镜)属性使用详解
2020/04/07 HTML / CSS
党员违纪检讨书
2014/02/18 职场文书
财务担保书范文
2014/04/02 职场文书
开服装店计划书
2014/08/15 职场文书
KTV员工管理制度
2015/08/06 职场文书
《追风筝的人》:人心中的成见是座大山,但请不忘初心
2019/11/15 职场文书
Python OpenCV快速入门教程
2021/04/17 Python
Python图像处理之图像拼接
2021/04/28 Python
golang用type-switch判断interface的实际存储类型
2022/04/14 Golang