python自动结束mysql慢查询会话的实例代码


Posted in Python onOctober 27, 2019

生产环境的有些sql查询写得太复杂,或是表很大,对应索引未建立或建立不合理,或是查询未充分使用索引等,就有可能出现慢查询,一些慢查询需要修改程序,可能没那么快能解决,这时如果有个脚本能自动检测符合条件的慢查询会话并结束,那么是很方便的,当然运维人员也可顺便弄个检测慢查询并告警的脚本。

涉及知识点

  • mysql慢查询会话查询
  • schedule定时任务调度
  • pymysql执行sql

代码分解

mysql慢查询

#会话查询,只能查询所有会话,不能按条件过滤,不过比较好记
show PROCESSLIST;
#从information_schema中查询会话,可以按条件过滤
SELECT
 *
FROM
 information_schema.`PROCESSLIST`;
#查询符合条件的慢会话,id是会话ID,info是正在执行的sql,time是会话持续时间,杀会话时注意要做好过滤
SELECT
 id,
 info,
 time
FROM
 information_schema.`PROCESSLIST`
WHERE
 info LIKE '%select * from table%'
AND time > 10;
#直接使用sql批量杀会话,拼接kill xxx;后,拷贝了在控制台执行
SELECT
 concat('KILL ', id, ';')
FROM
 information_schema.`PROCESSLIST`
WHERE
 info LIKE '%select * from table%'
AND time > 10;

脚本主入口

if __name__ == '__main__':
 #每5秒执行检查任务
 schedule.every(5).seconds.do(kill_slow)
 #此处固定写法,意思是每秒钟schedule看下是否有pending的任务,有就执行
 while True:
  schedule.run_pending()
  time.sleep(1)
schedule的其它示例
import schedule
import time
def job(message='stuff'):
 print("I'm working on:", message)
#每10分钟
schedule.every(10).minutes.do(job)
#每小时
schedule.every().hour.do(job, message='things')
#每天10点30分
schedule.every().day.at("10:30").do(job)
while True:
 schedule.run_pending()
 time.sleep(1)

pymysql使用

# 连接数据库,设置结果集用dict返回,autocommit自动提交事务
db = pymysql.connect(host='localhost', db='dbname',
      user='root', passwd='admin',
      port=3306, charset='utf8',
      cursorclass=pymysql.cursors.DictCursor, autocommit=True)
cursor = db.cursor()

查询符合条件的慢会话并结束

def kill_slow():
  cursor.execute(
    """
    SELECT
      id,
      info,
      time
    FROM
      information_schema.`PROCESSLIST`
    WHERE
      info LIKE '%select * from table%'
    AND time > 10;
    """)
  slow_sessions = cursor.fetchall()
  for slow_session in slow_sessions:
    print("slow session detected, kill it:\n id:%s\nsql:%s" % (
      slow_session[0], slow_session[1]))
    cursor.execute("kill %s", slow_session[0])

完整代码

import time
import pymysql
import schedule
# 连接数据库,设置结果集用dict返回,autocommit自动提交事务
db = pymysql.connect(host='localhost', db='dbname',
           user='root', passwd='admin',
           port=3306, charset='utf8',
           cursorclass=pymysql.cursors.DictCursor, autocommit=True)
cursor = db.cursor()
def kill_slow():
  cursor.execute(
    """
    SELECT
      id,
      info,
      time
    FROM
      information_schema.`PROCESSLIST`
    WHERE
      info LIKE '%select * from table%'
    AND time > 10;
    """)
  slow_sessions = cursor.fetchall()
  for slow_session in slow_sessions:
    print("slow session detected, kill it:\n id:%s\nsql:%s" % (
      slow_session[0], slow_session[1]))
    cursor.execute("kill %s", slow_session[0])
if __name__ == '__main__':
  # 每5秒执行检查任务
  schedule.every(5).seconds.do(kill_slow)
  # 此处固定写法,意思是每秒钟schedule看下是否有pending的任务,有就执行
  while True:
    schedule.run_pending()
    time.sleep(1)

总结

以上所述是小编给大家介绍的python自动结束mysql慢查询会话的实例代码,希望对大家有所帮助!

Python 相关文章推荐
对于Python装饰器使用的一些建议
Jun 03 Python
Python书单 不将就
Jul 11 Python
python针对不定分隔符切割提取字符串的方法
Oct 26 Python
处理Selenium3+python3定位鼠标悬停才显示的元素
Jul 31 Python
python中for循环变量作用域及用法详解
Nov 05 Python
pytorch之inception_v3的实现案例
Jan 06 Python
python通过安装itchat包实现微信自动回复收到的春节祝福
Jan 19 Python
详解KMP算法以及python如何实现
Sep 18 Python
matplotlib绘制鼠标的十字光标的实现(自定义方式,官方实例)
Jan 10 Python
python实现语音常用度量方法的代码详解
May 25 Python
Python移位密码、仿射变换解密实例代码
Jun 27 Python
使用pandas生成/读取csv文件的方法实例
Jul 09 Python
python实现输入任意一个大写字母生成金字塔的示例
Oct 27 #Python
python 爬虫百度地图的信息界面的实现方法
Oct 27 #Python
python用类实现文章敏感词的过滤方法示例
Oct 27 #Python
通过字符串导入 Python 模块的方法详解
Oct 27 #Python
python实现树的深度优先遍历与广度优先遍历详解
Oct 26 #Python
python图的深度优先和广度优先算法实例分析
Oct 26 #Python
python单例模式原理与创建方法实例分析
Oct 26 #Python
You might like
整理的一些实用WordPress后台MySQL操作命令
2013/01/07 PHP
Zend Framework缓存Cache用法简单实例
2016/03/19 PHP
php简单复制文件的方法
2016/05/09 PHP
thinkphp3.2实现在线留言提交验证码功能
2017/07/19 PHP
PHP实现的抓取小说网站内容功能示例
2019/06/27 PHP
浅谈laravel 5.6 安装 windows上使用composer的安装过程
2019/10/18 PHP
jQuery参数列表集合
2011/04/06 Javascript
利用jquery动画特效和css打造的侧边弹出垂直导航
2014/04/04 Javascript
node.js中的console.dir方法使用说明
2014/12/10 Javascript
jquery中的工具使用方法$.isFunction, $.isArray(), $.isWindow()
2015/08/09 Javascript
原生JavaScript实现Ajax的方法
2016/04/07 Javascript
jQuery实现的网格线绘制方法
2016/06/20 Javascript
Node.js + Redis Sorted Set实现任务队列
2016/09/19 Javascript
vue.js+boostrap项目实践(案例详解)
2016/09/21 Javascript
使用jquery判断一个元素是否含有一个指定的类(class)实例
2017/02/12 Javascript
在knockoutjs 上自己实现的flux(实例讲解)
2017/12/18 Javascript
vue中的自定义分页插件组件的示例
2018/08/18 Javascript
VUE脚手架的下载和配置步骤详解
2019/04/01 Javascript
使用Promise封装小程序wx.request的实现方法
2019/11/13 Javascript
Python的lambda匿名函数的简单介绍
2013/04/25 Python
python爬虫入门教程--正则表达式完全指南(五)
2017/05/25 Python
python 中的list和array的不同之处及转换问题
2018/03/13 Python
python获取Pandas列名的几种方法
2019/08/07 Python
Pycharm最新激活码2019(推荐)
2019/12/31 Python
Python环境管理virtualenv&virtualenvwrapper的配置详解
2020/07/01 Python
英国家庭和商业健身器材购物网站:Fitness Options
2018/07/05 全球购物
中专三年学习的个人自我评价
2013/12/12 职场文书
学校安全检查制度
2014/01/27 职场文书
法制宣传月活动总结
2014/04/29 职场文书
授权收款委托书范本
2014/10/10 职场文书
2014大学生学生会工作总结
2014/12/19 职场文书
求职信范文怎么写
2015/03/19 职场文书
战马观后感
2015/06/08 职场文书
2016年秋季运动会广播稿
2015/12/21 职场文书
导游词之上海杜莎夫人蜡像馆
2019/11/22 职场文书
jdbc使用PreparedStatement批量插入数据的方法
2021/04/27 MySQL