Python基于Webhook实现github自动化部署


Posted in Python onNovember 28, 2020

一. 分析需求

1. 需求说明

在项目开发过程中,我们有时会频繁的更新代码, 流程大概为:

(1) 本地git push提交代码至git托管平台

(2) 登陆到部署有网站源码的线上服务器

(3) cd到项目根目录, 执行git pull 指令拉取最新代码

Python基于Webhook实现github自动化部署

整个流程纯手动更新,每次耗时在1分钟左右, 这样一天下来,浪费了很多时间在这些琐碎的事情上.

现在的需求是,在每次本地提交代码后,线上服务器自动拉取最新代码,完成部署更新.即所谓的自动化部署.

2. 方案

现在一些主流代码托管平台如github、 gitlab、git@osc 等均已提供webhook功能,在用户push了代码后,会自动回调一个您设定的http地址。 用户可以自己根据不同的需求,来编写自己的脚本程序(比如发邮件,自动部署等);目前,webhook支持多种触发方式,如Push、 Tag Push、 Issue、评论、合并请求 等。

附webhook的简介:

Webhook就是用户通过自定义回调函数(callback)的方式来改变Web应用的一种行为,这些回调函数可以由不是该Web应用官方的第三方用户或者开发人员来维护,修改。通过Webhook,你可以自定义一些行为通知到指定的URL去。Webhook的“自定义回调函数”通常是由一些事件触发的,比如推送代码到代码库或者博客下新增一个评论,源站点会为Webhook进行HTTP请求的URI配置。用户通过配置,就可以使一个网站上的事件调用在另一个网站上表现出来,这些事件调用可以是任何事件,但通常应用的是系统集成和消息通知。

方案流程:

Python基于Webhook实现github自动化部署

所以自动部署主要实现方式就是:

- 修改代码 push

- github(其他仓库平台)发送请求给你的网站服务器

- 网站服务器收到更新请求,执行自动部署脚本

- 自动部署脚本执行代码拉取,打包,修改文件等动作完成网站的更新部署

二、具体实现

Github仓库设置

在GitHub上需要更新的代码仓库添加webhooks, 在指定仓库→settings→webhooks

Python基于Webhook实现github自动化部署

编写GitHub推送回调

python开启web服务(hook.py)

import hmac
import os
from flask import Flask, request, jsonify

app = Flask(__name__)
# github中webhooks的secret
github_secret = 'xxxxxxxx'

def encryption(data):
  key = github_secret.encode('utf-8')
  obj = hmac.new(key, msg=data, digestmod='sha1')
  return obj.hexdigest()

@app.route('/hook', methods=['POST'])
def post_data():
  """
  github加密是将post提交的data和WebHooks的secret通过hmac的sha1加密,放到HTTP headers的
  X-Hub-Signature参数中
  """
  post_data = request.data
  token = encryption(post_data)
  # 认证签名是否有效
  signature = request.headers.get('X-Hub-Signature', '').split('=')[-1]
  if signature != token:
    return "token认证无效", 401
  # 运行shell脚本,更新代码
  os.system('sh deploy.sh')
  return jsonify({"status": 200})

if __name__ == '__main__':
  app.run(port=8989)

编写shell脚本(deploy.sh)

cd "$(dirname "$0")"
echo '--------Git pull------------'
git pull
echo '-----Already up-to-date------'
echo '----- restart supervision-----'
supervisorctl restart blog
echo '----- reload nginx-----'
nginx -s reload

注意: 此次部署的hook.py 和deploy.sh都是在仓库的同一目录下

开启服务

supervisor部署webhook

[program:webhook]
directory=/data/wwwroot/docs
command=/home/dukenan/.envs/flask_py3/bin/python3 hook.py
autostart=true
autorestart=false
startsecs=1
;使用root账户
user=root
stderr_logfile=/etc/supervisor/logs/webhooks/stderr.log 
stdout_logfile=/etc/supervisor/logs/webhooks/stdout.log 
redirect_stderr=true
loginfo=info

部署NGINX的参考

server {
  listen 80; 
  server_name 服务器IP; # 配置域名
  client_max_body_size 300M;
  location / { 
    proxy_pass http://127.0.0.1:8989; #转发本地8989端口
    proxy_set_header X-Real-IP $remote_addr;
    proxy_set_header Host $host;
    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
  }  
}

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

Python 相关文章推荐
使用Python微信库itchat获得好友和群组已撤回的消息
Jun 24 Python
Python subprocess库的使用详解
Oct 26 Python
pyqt5实现俄罗斯方块游戏
Jan 11 Python
使用python读取.text文件特定行的数据方法
Jan 28 Python
Python3中exp()函数用法分析
Feb 19 Python
对django layer弹窗组件的使用详解
Aug 31 Python
Python使用Opencv实现图像特征检测与匹配的方法
Oct 30 Python
Python读取YAML文件过程详解
Dec 30 Python
Python urlopen()和urlretrieve()用法解析
Jan 07 Python
详解python 破解网站反爬虫的两种简单方法
Feb 09 Python
10个python爬虫入门基础代码实例 + 1个简单的python爬虫完整实例
Dec 16 Python
python状态机transitions库详解
Jun 02 Python
Django-simple-captcha验证码包使用方法详解
Nov 28 #Python
如何通过Python实现RabbitMQ延迟队列
Nov 28 #Python
python 用Matplotlib作图中有多个Y轴
Nov 28 #Python
基于python实现监听Rabbitmq系统日志代码示例
Nov 28 #Python
Python Http请求json解析库用法解析
Nov 28 #Python
基于Django集成CAS实现流程详解
Nov 28 #Python
Django haystack实现全文搜索代码示例
Nov 28 #Python
You might like
教你如何把一篇文章按要求分段
2006/10/09 PHP
解析php防止form重复提交的方法
2013/07/01 PHP
php实现遍历目录并删除指定文件中指定内容
2015/01/21 PHP
PHP定时执行任务实现方法详解(Timer)
2015/07/30 PHP
学习PHP的数组总结【经验】
2016/05/05 PHP
插件:检测javascript的内存泄漏
2007/03/04 Javascript
一些主流JS框架中DOMReady事件的实现小结
2011/02/12 Javascript
JQuery UI的拖拽功能实现方法小结
2012/03/14 Javascript
Knockoutjs的环境搭建教程
2012/11/26 Javascript
JS对话框_JS模态对话框showModalDialog用法总结
2014/01/11 Javascript
利用JavaScript的AngularJS库制作电子名片的方法
2015/06/18 Javascript
jsTree事件和交互以及插件plugins详解
2017/08/29 Javascript
Vue源码探究之状态初始化
2018/11/14 Javascript
vue中$nextTick的用法讲解
2019/01/17 Javascript
VUE引入第三方js包及调用方法讲解
2019/03/01 Javascript
Vue CLI3中使用compass normalize的方法
2019/05/30 Javascript
10种JavaScript最常见的错误(小结)
2019/06/21 Javascript
uni-app实现获取验证码倒计时功能
2020/11/01 Javascript
python中异常捕获方法详解
2017/03/03 Python
pytorch下大型数据集(大型图片)的导入方式
2020/01/08 Python
Python中实现输入超时及如何通过变量获取变量名
2020/01/18 Python
Tensorflow tf.nn.depthwise_conv2d如何实现深度卷积的
2020/04/20 Python
Pandas替换及部分替换(replace)实现流程详解
2020/10/12 Python
详解HTML5中表单验证的8种方法介绍
2016/12/19 HTML / CSS
Under Armour安德玛法国官网:美国高端运动科技品牌
2018/06/29 全球购物
Elemental Herbology官网:英国美容品牌
2019/04/27 全球购物
写一个函数返回1+2+3+…+n的值(假定结果不会超过长整型变量的范围)
2014/09/05 面试题
JAVA招聘远程笔试题
2015/07/23 面试题
升职自荐书范文
2013/11/28 职场文书
挂牌仪式主持词
2014/03/20 职场文书
教师三严三实对照检查材料
2014/09/25 职场文书
2014年乡镇工会工作总结
2014/12/02 职场文书
2015年房地产销售工作总结
2015/04/20 职场文书
2015年中学体育教师工作总结
2015/10/23 职场文书
关于Python OS模块常用文件/目录函数详解
2021/07/01 Python
Qt数据库应用之实现图片转pdf
2022/06/01 Java/Android