python同步windows和linux文件


Posted in Python onAugust 29, 2019

写python脚本的初衷,每次在windows编辑完文件后,想同步到linux上去,只能够登录服务器,然后再利用网络copy,重复性很大,就想着能不能写一个小脚本帮我同步。

逻辑:比对本地和服务器文件的md5,如果md5不一致,则备份服务器上的文件,将本地的给上传上去。

代码分为windows端和服务器端,有些东西,都让python一个做了,写着有点累,就想着,能否服务端提供一个端口,windows去调用这个接口,来完成一部分工作。

python代码如下:

需要额外安装的包为是paramiko,安装方法:pip install paramiko即可,代码如下,利用paramiko的SSHClient来调用服务器自己编写的API(嘿嘿,姑且叫做API)吧,Transport来实现sftp文件的上传,

#!/usr/bin/env python

import os
import hashlib
import paramiko
import time
import sys

def getmd5(filename):
 filehash = hashlib.md5()
 f = open(filename,'rb')
 while True:
  b=f.read(8096)
  if not b:
   break
  filehash.update(b)
 f.close()
 return filehash.hexdigest()

def send_files(sftp,ssh,filename,abspathfile,server_dir):
 try:
  print ("删除文件",end=" ")
  print (filename)
  
  ssh.exec_command('bash /root/put_api.sh %s move' % filename)
  
  print ("删除文件成功")
  print ("开始上传文件")
  server_file=server_dir + filename

  sftp.put(abspathfile,server_file)
  print ("文件上传成功")

 except:
   print ("文件上传失败")
 
def search_file(dir,path,ssh,server_dir):
 #定义排除以md结尾的字符串
 suffix='md'
 #定义循环

 print ("开启sftp")
 t = paramiko.Transport(('myhostname',22))
 t.connect(username='root',password='mypassword')
 sftp = paramiko.SFTPClient.from_transport(t)
 
 for filename in os.listdir(path):

  print (time.strftime("%Y-%m-%d %H:%M:%S", time.localtime()))
  print ("开始处理 %s" %(filename))
  
  #如果以md结尾,就continue
  if filename.endswith(suffix):
   print ("不处理以md结尾")
   continue
  
  #定义绝对路径
  abspathfile=dir + '\\' + filename

  #获取文件的md5
  localfilemd5=getmd5(abspathfile)+'\n'

  byte_localfilemd5=localfilemd5.encode(encoding="gb2312")
  print ("%s md5值 %s" %(filename,byte_localfilemd5))
  
  serverfilemd5=get_server_md5(ssh,filename)

  print ("%s 服务器md5值 %s" %(filename,serverfilemd5))
  
  if byte_localfilemd5 == serverfilemd5 :
   print ("md5值一致,不需要上传")
  else:
   print ("md5值不一致,上传文件")

#  send_files(sftp,ssh,filename,abspathfile,server_dir)
   try:
#    send_files(ssh,filename,abspathfile,server_dir)
    send_files(sftp,ssh,filename,abspathfile,server_dir)
   except:
    print ("上传失败...")

 print ("关闭sftp")
 t.close()



def get_server_md5(ssh,filename):
 stdin,stdout,stderr = ssh.exec_command('bash /root/put_api.sh %s' % filename)
 result = stdout.read()
 
 return result

def main():
 starttime=time.time()
 
 print ("脚本开始同步")
 print (time.strftime("%Y-%m-%d %H:%M:%S", time.localtime()))
 try:
  ssh = paramiko.SSHClient()
  ssh.set_missing_host_key_policy(paramiko.AutoAddPolicy())
  ssh.connect(hostname='myhostname',port='22',username='root',password='mypassword')
 except:
  print ("服务器连接失败,异常退出")
  sys.exit(-1)
  
 #定义路径
 local_dir = 'E:\\TEMP\\note_html'
 server_dir= '/root/nginx_02/'

 #利用函数排除文件
 search_file(local_dir,local_dir,ssh,server_dir)

# print (get_server_md5(ssh,'d0180727_install_rabbitmt_png_06.png'))
 
 ssh.close()
 endtime=time.time()
 print (time.strftime("%Y-%m-%d %H:%M:%S", time.localtime()))
 print ("服务器断开连接,本次文件更新成功")
 print ("本次更新时间为:%.2f s" %(endtime - starttime))
 print ("更精确的时间:",end=" ")
 usedtime = endtime - starttime
 print (usedtime,end=" ")
 print ("s")
 
 
if __name__ == "__main__" :
 main()

Linux 自己编写的API:

#!/bin/bash 

#判断参数的个数是否大于等于1
if [ $# -ge 1 ];then
 
 #定义文件夹
 root_dir="/root/nginx_02/"
 backdir="/root/.backup/"
 abs_filename=$root_dir$1

 #判断是否有这个文件
 if [ -f $abs_filename ];then

  #利用md5sum工具获取文件的md5值
  getfilemd5=`md5sum $abs_filename | awk '{print $1}'`
  echo "$getfilemd5"

  #判断第二个参数是否是move
  if [ 'move' == $2 ];then
   #判断是否存在备份目录,没有则存在,有则挪至备份目录
   if [ -d $backdir ];then
    nowtime=`date +"%F_%H:%M:%S"`
    
    mv $abs_filename $backdir$1_$nowtime
    
    if [ 0 -eq $? ];then
     echo "move successful"
    else
     echo "move failed"
    fi
    
   else
    mkdir -p $backdir
   fi
  fi  

 else
  #报错,没有这个文件
  echo "$1 No such file or directory"
 fi

else
 #报错,参数错误
 echo "Parameter error"
fi

最终实现的功能如下:

python同步windows和linux文件

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python 正则表达式(转义问题)
Dec 15 Python
Python中常用操作字符串的函数与方法总结
Feb 04 Python
Python编程中归并排序算法的实现步骤详解
May 04 Python
Python 私有函数的实例详解
Sep 11 Python
Python实现基于C/S架构的聊天室功能详解
Jul 07 Python
Django中的ajax请求
Oct 19 Python
python3安装speech语音模块的方法
Dec 24 Python
Python发展简史 Python来历
May 14 Python
Python类中的魔法方法之 __slots__原理解析
Aug 26 Python
Python使用re模块验证危险字符
May 21 Python
PyTorch中clone()、detach()及相关扩展详解
Dec 09 Python
selenium.webdriver中add_argument方法常用参数表
Apr 08 Python
python中几种自动微分库解析
Aug 29 #Python
详解python中index()、find()方法
Aug 29 #Python
python同步两个文件夹下的内容
Aug 29 #Python
Python中 CSV格式清洗与转换的实例代码
Aug 29 #Python
详解如何在cmd命令窗口中搭建简单的python开发环境
Aug 29 #Python
python rsync服务器之间文件夹同步脚本
Aug 29 #Python
python-tornado的接口用swagger进行包装的实例
Aug 29 #Python
You might like
php生成excel列名超过26列大于Z时的解决方法
2014/12/29 PHP
PHP中empty和isset对于参数结构的判断及empty()和isset()的区别
2015/11/15 PHP
php有效防止同一用户多次登录
2015/11/19 PHP
微信支付扫码支付php版
2016/07/22 PHP
PHP闭包定义与使用简单示例
2018/04/13 PHP
PHP实现生成数据字典功能示例
2018/05/24 PHP
Gambit vs CL BO3 第一场 2.13
2021/03/10 DOTA
innerText和innerHTML 一些问题分析
2009/05/18 Javascript
onkeydown事件解决按回车键直接提交数据的需求
2013/04/11 Javascript
jquery ajax 简单范例(界面+后台)
2013/11/19 Javascript
JavaScript使用slice函数获取数组部分元素的方法
2015/04/06 Javascript
如何使用jQuery技术开发ios风格的页面导航菜单
2015/07/29 Javascript
javascript实现图片上传前台页面
2015/08/18 Javascript
jQuery实现鼠标滑过点击事件音效试听
2015/08/31 Javascript
javascript实现base64 md5 sha1 密码加密
2015/09/09 Javascript
javascript中checkbox使用方法简单实例演示
2015/11/17 Javascript
Bootstrap模态对话框的简单使用
2016/04/29 Javascript
移动端js图片查看器
2016/11/17 Javascript
tab栏切换原理
2017/03/22 Javascript
nodejs调取微信收货地址的方法
2017/12/20 NodeJs
Vue-Cli项目优化操作的实现
2019/10/27 Javascript
Python实现matplotlib显示中文的方法详解
2018/02/06 Python
python代码过长的换行方法
2018/07/19 Python
Python通过fnmatch模块实现文件名匹配
2020/09/30 Python
SportsDirect.com马来西亚:英国第一体育零售商
2018/11/21 全球购物
吉力贝官方网站:Jelly Belly
2019/03/11 全球购物
市场营销专业个人求职信范文
2013/12/14 职场文书
护士辞职信范文
2014/01/19 职场文书
《两个铁球同时着地》教学反思
2014/02/13 职场文书
四议两公开实施方案
2014/03/28 职场文书
大学毕业寄语大全
2014/04/10 职场文书
入党综合考察材料
2014/06/02 职场文书
小学英语教学反思范文
2016/02/15 职场文书
告诉你一个秘密:富人致富的五大优点
2019/07/11 职场文书
python 逐步回归算法
2021/04/06 Python
spring cloud eureka 服务启动失败的原因分析及解决方法
2022/03/17 Java/Android