用Python实现服务器中只重载被修改的进程的方法


Posted in Python onApril 30, 2015

现在,我们已经把一个Web App的框架完全搭建好了,从后端的API到前端的MVVM,流程已经跑通了。

在继续工作前,注意到每次修改Python代码,都必须在命令行先Ctrl-C停止服务器,再重启,改动才能生效。

在开发阶段,每天都要修改、保存几十次代码,每次保存都手动来这么一下非常麻烦,严重地降低了我们的开发效率。有没有办法让服务器检测到代码修改后自动重新加载呢?

Django的开发环境在Debug模式下就可以做到自动重新加载,如果我们编写的服务器也能实现这个功能,就能大大提升开发效率。

可惜的是,Django没把这个功能独立出来,不用Django就享受不到,怎么办?

其实Python本身提供了重新载入模块的功能,但不是所有模块都能被重新载入。另一种思路是检测www目录下的代码改动,一旦有改动,就自动重启服务器。

按照这个思路,我们可以编写一个辅助程序pymonitor.py,让它启动wsgiapp.py,并时刻监控www目录下的代码改动,有改动时,先把当前wsgiapp.py进程杀掉,再重启,就完成了服务器进程的自动重启。

要监控目录文件的变化,我们也无需自己手动定时扫描,Python的第三方库watchdog可以利用操作系统的API来监控目录文件的变化,并发送通知。我们先用easy_install安装:

$ easy_install watchdog

利用watchdog接收文件变化的通知,如果是.py文件,就自动重启wsgiapp.py进程。

利用Python自带的subprocess实现进程的启动和终止,并把输入输出重定向到当前进程的输入输出中:

#!/usr/bin/env python
import os, sys, time, subprocess

from watchdog.observers import Observer
from watchdog.events import FileSystemEventHandler

def log(s):
  print '[Monitor] %s' % s

class MyFileSystemEventHander(FileSystemEventHandler):
  def __init__(self, fn):
    super(MyFileSystemEventHander, self).__init__()
    self.restart = fn

  def on_any_event(self, event):
    if event.src_path.endswith('.py'):
      log('Python source file changed: %s' % event.src_path)
      self.restart()

command = ['echo', 'ok']
process = None

def kill_process():
  global process
  if process:
    log('Kill process [%s]...' % process.pid)
    process.kill()
    process.wait()
    log('Process ended with code %s.' % process.returncode)
    process = None

def start_process():
  global process, command
  log('Start process %s...' % ' '.join(command))
  process = subprocess.Popen(command, stdin=sys.stdin, stdout=sys.stdout, stderr=sys.stderr)

def restart_process():
  kill_process()
  start_process()

def start_watch(path, callback):
  observer = Observer()
  observer.schedule(MyFileSystemEventHander(restart_process), path, recursive=True)
  observer.start()
  log('Watching directory %s...' % path)
  start_process()
  try:
    while True:
      time.sleep(0.5)
  except KeyboardInterrupt:
    observer.stop()
  observer.join()

if __name__ == '__main__':
  argv = sys.argv[1:]
  if not argv:
    print('Usage: ./pymonitor your-script.py')
    exit(0)
  if argv[0]!='python':
    argv.insert(0, 'python')
  command = argv
  path = os.path.abspath('.')
  start_watch(path, None)

一共50行左右的代码,就实现了Debug模式的自动重新加载。用下面的命令启动服务器:

$ python pymonitor.py wsgiapp.py

或者给pymonitor.py加上可执行权限,启动服务器:

$ ./pymonitor.py wsgiapp.py

在编辑器中打开一个py文件,修改后保存,看看命令行输出,是不是自动重启了服务器:

$ ./pymonitor.py wsgiapp.py 
[Monitor] Watching directory /Users/michael/Github/awesome-python-webapp/www...
[Monitor] Start process python wsgiapp.py...
...
INFO:root:application (/Users/michael/Github/awesome-python-webapp/www) will start at 0.0.0.0:9000...
[Monitor] Python source file changed: /Users/michael/Github/awesome-python-webapp/www/apis.py
[Monitor] Kill process [2747]...
[Monitor] Process ended with code -9.
[Monitor] Start process python wsgiapp.py...
...
INFO:root:application (/Users/michael/Github/awesome-python-webapp/www) will start at 0.0.0.0:9000...
Try
Python 相关文章推荐
Python中不同进制互相转换(二进制、八进制、十进制和十六进制)
Apr 05 Python
Python中的hypot()方法使用简介
May 18 Python
python字符串的常用操作方法小结
May 21 Python
详解python的ORM中Pony用法
Feb 09 Python
Python读写/追加excel文件Demo分享
May 03 Python
pytorch cnn 识别手写的字实现自建图片数据
May 20 Python
Python类中的魔法方法之 __slots__原理解析
Aug 26 Python
python操作openpyxl导出Excel 设置单元格格式及合并处理代码实例
Aug 27 Python
python实现微信小程序用户登录、模板推送
Aug 28 Python
将python包发布到PyPI和制作whl文件方式
Dec 25 Python
Python查找不限层级Json数据中某个key或者value的路径方式
Feb 27 Python
浅析Python中字符串的intern机制
Oct 03 Python
python同时给两个收件人发送邮件的方法
Apr 30 #Python
python通过邮件服务器端口发送邮件的方法
Apr 30 #Python
在Python的web框架中中编写日志列表的教程
Apr 30 #Python
python登录pop3邮件服务器接收邮件的方法
Apr 30 #Python
python通过smpt发送邮件的方法
Apr 30 #Python
在Python的web框架中编写创建日志的程序的教程
Apr 30 #Python
用Python实现web端用户登录和注册功能的教程
Apr 30 #Python
You might like
山进SANGEAN ATS-909X电路分析
2021/03/02 无线电
Yii Framework框架获取分类下面的所有子类方法
2014/06/20 PHP
PHP读取配置文件类实例(可读取ini,yaml,xml等)
2015/07/28 PHP
CI框架表单验证实例详解
2016/11/21 PHP
PDO::exec讲解
2019/01/28 PHP
PHP架构及原理知识点详解
2019/12/22 PHP
JavaScript库 开发规则
2009/01/31 Javascript
JavaScript 语法集锦 脚本之家基础推荐
2009/11/15 Javascript
新鲜出炉的js tips提示效果
2011/04/03 Javascript
JavaScript和CSS交互的方法汇总
2014/12/02 Javascript
JavaScript ES6中CLASS的使用详解
2016/11/22 Javascript
JS实现中国公民身份证号码有效性验证
2017/02/20 Javascript
jsTree事件和交互以及插件plugins详解
2017/08/29 Javascript
Vue数据监听方法watch的使用
2018/03/28 Javascript
React从react-router路由上做登陆验证控制的方法
2018/05/10 Javascript
vue 右键菜单插件 简单、可扩展、样式自定义的右键菜单
2018/11/29 Javascript
jQuery实现左右两个列表框的内容相互移动功能示例
2019/01/27 jQuery
如何在vue中使用jointjs过程解析
2020/05/29 Javascript
通过数据库对Django进行删除字段和删除模型的操作
2015/07/21 Python
Python_LDA实现方法详解
2017/10/25 Python
Python subprocess模块功能与常见用法实例详解
2018/06/28 Python
python基于递归解决背包问题详解
2019/07/03 Python
Django中FilePathField字段的用法
2020/05/21 Python
基于Tensorflow一维卷积用法详解
2020/05/22 Python
Pycharm 2020.1 版配置优化的详细教程
2020/08/07 Python
html5 canvas fillRect坐标和大小的问题解决方法
2014/03/26 HTML / CSS
Roxy荷兰官方网站:冲浪、滑雪板、服装和配件
2019/10/22 全球购物
编写一子程序,将一链表倒序,即使链表表尾变表头,表头变表尾
2016/02/10 面试题
建筑公司文秘岗位职责
2013/11/29 职场文书
手机银行营销方案
2014/03/14 职场文书
《梅花魂》教学反思
2014/04/30 职场文书
广告学专业毕业生自荐信
2014/05/28 职场文书
司法局火灾防控方案
2014/06/05 职场文书
拾金不昧表扬稿
2015/01/16 职场文书
和谐拯救危机观后感
2015/06/15 职场文书
使用feign服务调用添加Header参数
2021/06/23 Java/Android