在 Python 中接管键盘中断信号的实现方法


Posted in Python onFebruary 04, 2020

在 Python 中接管键盘中断信号的实现方法

假设有这样一个需求,你需要从 Redis 中持续不断读取数据,并把这些数据写入到 MongoDB 中。你可能会这样写代码:

import json 
import redis 
import pymongo 
client = redis.Redis() 
handler = pymongo.MongoClient().example.col 
while True: 
  data_raw = client.blpop('data', timeout=300) 
  if not data_raw: 
    continue 
  data = json.loads(data_raw[1].decode()) 
  handler.insert_one(data)

但这样写有一个问题,就是每来一条数据都要连接一次 MongoDB,大量时间浪费在了网络 I/O上。

于是大家会把代码改成下面这样:

import json 
import redis 
import pymongo 
client = redis.Redis() 
handler = pymongo.MongoClient().example.col 
to_be_insert = [] 
while True: 
  data_raw = client.blpop('data', timeout=300) 
  if not data_raw: 
    continue 
  data = json.loads(data_raw[1].decode()) 
  to_be_insert.append(data) 
  if len(to_be_insert) >= 1000: 
    handler.insert_many(to_be_insert) 
    to_be_insert = []

每凑够1000条数据,批量写入到 MongoDB 中。

现在又面临另外一个问题。假设因为某种原因,我需要更新这个程序,于是我按下了键盘上的Ctrl + C强制关闭了这个程序。而此时to_be_insert列表里面有999条数据将会永久丢失——它们已经被从 Redis 中删除了,但又没有来得及写入 MongoDB 中。

我想实现,当我按下 Ctrl + C 时,程序不再从 Redis 中读取数据,但会先把to_be_insert中的数据(无论有几条)都插入 MongoDB 中。最后再关闭程序。

要实现这个需求,就必须在我们按下Ctrl + C时,程序还能继续运行一段代码。可问题是按下Ctrl + C时,程序就直接结束了,如何还能再运行一段代码?

实际上,当我们按下键盘上的Ctrl + C时,Python 收到一个名为SIGINT的信号。具体规则可以阅读官方文档。收到信号以后,Python 会调用一个信号回调函数。只不过默认的回调函数就是让程序抛出一个 KeyboardInterrupt异常导致程序关闭。现在,我们可以设法让 Python 使用我们自定义的一段函数来作为信号回调函数。

要使用信号,我们需用导入 Python 的signal库。然后自定义一个信号回调函数,当 Python 收到某个信号时,调用这个函数。

所以我们修改一下上面的代码:

import signal 
import json 
import redis 
import pymongo 
 
 
client = redis.Redis() 
handler = pymongo.MongoClient().example.col 
stop = False 
 
 
def keyboard_handler(signum, frame): 
  global stop 
  stop = True 
 
 
signal.signal(signal.SIGINT, keyboard_handler) 
 
to_be_insert = [] 
while not stop: 
  data_raw = client.blpop('data', timeout=300) 
  if not data_raw: 
    continue 
  data = json.loads(data_raw[1].decode()) 
  to_be_insert.append(data) 
  if len(to_be_insert) >= 1000: 
    handler.insert_many(to_be_insert) 
    to_be_insert = [] 
 
if to_be_insert: 
  handler.insert_many(to_be_insert)

我们定义了一个全局变量stop,默认为 False,所以默认情况下,while not stop所在的循环体会持续运行。

我们定义了一个函数keyboard_handler,它的作用是修改全局变量stop为 True。需要注意的是,在函数里面修改全局变量,必须先使用global 变量名声明这个变量为全局变量。否则无法修改。

修改以后,while not stop循环停止,于是程序进入:

if to_be_insert: 
  handler.insert_many(to_be_insert)

只要列表里面有数据,就会批量插入 MongoDB 中。然后程序结束。

整段代码的关键就在signal.signal(signal.SIGINT, keyboard_handler)这里把信号SIGINT与函数keyboard_handler关联上了,于是,在上面这段代码运行的任何时候,只要按下键盘的Ctrl + C,程序就会进入keyboard_handler函数里面,优先执行这个函数里面的代码。执行完成以后,回到之前中断的地方,继续执行之前没有完成的代码。而由于在函数里面我已经修改了stop的值,所以原来的循环不能继续执行,于是进入最后的收尾工作。

需要注意的是,如果你的整个代码全都是使用 Python 写的,那么 signal可以在你程序的任何阶段触发,只要你按下 Ctrl + C,立刻就会进入设置好的信号回调函数中。

但如果你的代码中,有一部分代码是使用 C 语言写的,那么当你按下Ctrl + C以后,可能需要等这段C 语言的代码运行完成以后,才会进入你设置的信号回调函数中。

总结

以上所述是小编给大家介绍的在 Python 中接管键盘中断信号的处理方法,希望对大家有所帮助!

Python 相关文章推荐
用python分割TXT文件成4K的TXT文件
May 23 Python
python的类方法和静态方法
Dec 13 Python
python实现图片变亮或者变暗的方法
Jun 01 Python
python3.4用函数操作mysql5.7数据库
Jun 23 Python
python3利用venv配置虚拟环境及过程中的小问题小结
Aug 01 Python
对pandas通过索引提取dataframe的行方法详解
Feb 01 Python
python实现支付宝转账接口
May 07 Python
谈一谈数组拼接tf.concat()和np.concatenate()的区别
Feb 07 Python
Python数据正态性检验实现过程
Apr 18 Python
Django中使用Json返回数据的实现方法
Jun 03 Python
Python使用xpath实现图片爬取
Sep 16 Python
Python 居然可以在 Excel 中画画你知道吗
Feb 15 Python
在TensorFlow中屏蔽warning的方式
Feb 04 #Python
Python和Anaconda和Pycharm安装教程图文详解
Feb 04 #Python
Python3.7黑帽编程之病毒篇(基础篇)
Feb 04 #Python
python with (as)语句实例详解
Feb 04 #Python
Python实现实时数据采集新型冠状病毒数据实例
Feb 04 #Python
在tensorflow中实现屏蔽输出的log信息
Feb 04 #Python
Python变量作用域LEGB用法解析
Feb 04 #Python
You might like
全国FM电台频率大全 - 23 四川省
2020/03/11 无线电
PHP获取路径和目录的方法总结【必看篇】
2017/03/04 PHP
thinkphp下MySQL数据库读写分离代码剖析
2017/04/18 PHP
PHP微信支付结果通知与回调策略分析
2019/01/10 PHP
laravel 获取某个查询的查询SQL语句方法
2019/10/12 PHP
使用laravel的Eloquent模型如何获取数据库的指定列
2019/10/17 PHP
laravel接管Dingo-api和默认的错误处理方式
2019/10/25 PHP
关于jquery动态增减控件的一些想法和小插件
2010/08/01 Javascript
node.js实现BigPipe详解
2014/12/05 Javascript
jQuery中DOM操作实例分析
2015/01/23 Javascript
AngularJS中使用three.js的实例详解
2017/07/21 Javascript
详解Vuex中mapState的具体用法
2017/09/28 Javascript
微信小程序url传参写变量的方法
2018/08/09 Javascript
推荐一个基于Node.js的表单验证库
2019/02/15 Javascript
Vue程序调试的方法
2019/06/17 Javascript
Vue.js下拉菜单组件使用方法详解
2019/10/19 Javascript
详解在IDEA中将Echarts引入web两种方式(使用js文件和maven的依赖导入)
2020/07/11 Javascript
Python生成验证码实例
2014/08/21 Python
Python的Flask框架中实现分页功能的教程
2015/04/20 Python
python和flask中返回JSON数据的方法
2018/03/26 Python
完美解决安装完tensorflow后pip无法使用的问题
2018/06/11 Python
Python实现简单的文本相似度分析操作详解
2018/06/16 Python
python复制列表时[:]和[::]之间有什么区别
2018/10/16 Python
python连接mysql数据库并读取数据的实现
2020/09/25 Python
存储过程和sql语句的优缺点
2014/07/02 面试题
单身联谊活动方案
2014/01/29 职场文书
元旦晚会感言
2014/03/12 职场文书
公司节能减排倡议书
2014/05/14 职场文书
音乐教师求职信
2014/06/28 职场文书
2014年政工师工作总结
2014/12/18 职场文书
师德先进个人材料
2014/12/20 职场文书
会计求职信怎么写
2015/03/20 职场文书
2015年母亲节活动策划方案
2015/05/04 职场文书
环保建议书范文
2015/09/14 职场文书
小学生安全教育心得体会
2016/01/15 职场文书
幼儿园中班教学反思
2016/03/03 职场文书