如何用paramiko模块写发版机

本文小编为大家详细介绍"如何用paramiko模块写发版机"，内容详细，步骤清晰，细节处理妥当，希望这篇"如何用paramiko模块写发版机"文章能帮助大家解决疑惑，下面跟着小编的思路慢慢深入，一起来学习新知识吧。

说明：为了安全，本文敏感信息如ip、用户名密码等做了转换处理。

一、场景：每次发版时，都需要发版人一个一个文件的往生产机上拷贝，这样不仅费时，而且容易出错，降低工程师的工作积极性。

二、解决方法：需用python脚本写一个发版机，自动发版。

三、脚本实现的功能：自动合并develop_svn(开发svn)代码到online_svn（生产svn）下，自动备份远程服务器代码，手工通过ecplice编译online_svn代码，然后自动把编译后的class文件根据filelist里面的路径拷贝到生产机，并自动重启服务器上的tomcat服务。

四、具体步骤：

1、开发提供类似如下svn文件列表：

filelist.txt里面的内容：

/trunk/src/ha/lalala/controller/BoardController.java

/trunk/src/ha/lalala/pda/PdaWaybillController.java

/trunk/WebRoot/jsp/productReview/list.jsp

2、建立develop_svn和online_svn目录；

3、编写faban.py脚本

点击(此处)折叠或打开

1. #-*-coding:utf-8-*-
   

2. import Crypto #paramiko模块依赖Crypto模块
   

3. import paramiko #paramiko模块是wnidows 远程linux机器用的模块
   

4. import os
   

5. import sys
   

6. import shutil #shutil模块下有copy文件夹的方法
   

7. import time #这里使用其休眠函数sleep
   

8. import subprocess
   

9. import glob
   

10. 
    

11. 
    

12. 
    

13. #Update SVN
    

14. def UpdateSVN(path):
    

15. p = subprocess.Popen(['svn','update',path],shell=True,stdout=subprocess.PIPE)
    

16. print p.stdout.readlines()
    

17. 
    

18. 
    

19. 
    

20. #定义函数用来合并svn
    

21. def MergeSVN(develop_svn,online_svn):
    

22. with open('filelist.txt') as f:
    

23. for index,line in enumerate(f,1): #1表示索引值从1开始
    

24. line = line.replace('/trunk','') #替换路径
    

25. line = line.replace('\n','') #把换行替换掉，\n是换行符的意思
    

26. develop_svn_path=develop_svn + line #拼接路径
    

27. online_svn_path = online_svn + line #拼接路径
    

28. print "%d copying: %s ---> %s" % (index,develop_svn_path,online_svn_path)
    

29. if not os.path.exists(os.path.dirname(online_svn_path)) : #如果目录不存在，就建立一个目录，注意exists方法返回的是布尔值，所以用Not进行否定
    

30. os.mkdir(os.path.dirname(online_svn_path)) #建立目录
    

31. shutil.copy(develop_svn_path,online_svn_path) #将develop_svn_path里面的代码拷贝到online_svn_path目录下
    

32. print('\n') #输出一个换行
    

33. print("合并SVN目录已完成,请手工通过ecplice编译代码".decode('utf-8').encode('gb2312'))
    

34. print('\n') #输出一个换行
    

35. 
    

36. 
    

37. 
    

38. 
    

39. #定义函数用来远程备份代码--给北京的机器备份
    

40. def BackupCode(hostname,port,username,password):
    

41. ssh = paramiko.SSHClient() #创建一个从客户端连接服务器端的对象,也就是类的实例化
    

42. ssh.load_system_host_keys() #加载主机秘钥
    

43. ssh.set_missing_host_key_policy(paramiko.AutoAddPolicy()) #接受不在本地Known_host文件下的主机。否则ssh需要手工输入一次yes
    

44. ssh.connect(hostname,port,username,password) #ssh连接
    

45. 
    

46. stdin,stdout,stderr = ssh.exec_command(get_pty=False,command='dir=$(date +%Y%m%d%H%M%S) && \
    

47. rsync -zrtopg --exclude geadPortrait/ \
    

48. --exclude=idcard/ --exclude=temp/ --exclude=upload \
    

49. --exclude=files --exclude=temporary_zip/ \
    

50. /opt/apache-tomcat-8.0.27/webapps/ROOT /backup/tms/$dir') #执行远程机器的rsync命令进行备份，rsync命令没加-v参数，所以正常信息不会输出，只有报错才输出内容
    

51. result = stdout.read() #内容输出
    

52. error = stderr.read() #错误输出
    

53. print result
    

54. print error
    

55. #判断是否有错误输出，没有就说备份成功，否则说备份失败
    

56. if result.strip()=="" and error.strip()=="":
    

57. print "%s 完美，备份成功,备份位置在远程机器的/backup目录下".decode('utf-8').encode('gb2312') % hostname
    

58. print('\n')
    

59. else:
    

60. print "%s 不好了，备份失败了".decode('utf-8').encode('gb2312') % hostname
    

61. print('\n')
    

62. ssh.close() #记得关闭paramiko的ssh连接
    

63. 
    

64. 
    

65. 
    

66. 
    

67. 
    

68. 
    

69. #定义函数用来远程备份代码--给香港腾讯的机器备份
    

70. def BackupCode_HK_QQ(hostname,port,username,password):
    

71. ssh = paramiko.SSHClient() #创建一个从客户端连接服务器端的对象,也就是类的实例化
    

72. ssh.load_system_host_keys() #加载主机秘钥
    

73. ssh.set_missing_host_key_policy(paramiko.AutoAddPolicy()) #接受不在本地Known_host文件下的主机。否则ssh需要手工输入一次yes
    

74. ssh.connect(hostname,port,username,password) #ssh连接
    

75. stdin,stdout,stderr = ssh.exec_command(get_pty=False,command='dir=$(date +%Y%m%d%H%M%S) && \
    

76. rsync -zrtopg --exclude geadPortrait/ \
    

77. --exclude=idcard/ --exclude=temp/ --exclude=upload \
    

78. --exclude=files --exclude=temporary_zip/ \
    

79. /opt/tomcat-9090-tms/webapps/ROOT /backup/tms/$dir') #执行远程机器的rsync命令进行备份，rsync命令没加-v参数，所以正常信息不会输出，只有报错才输出内容
    

80. result = stdout.read() #内容输出
    

81. error = stderr.read() #错误输出
    

82. print result
    

83. print error
    

84. #判断是否有错误输出，没有就说备份成功，否则说备份失败
    

85. if result.strip()=="" and error.strip()=="":
    

86. print "%s 完美，备份成功,备份位置在远程机器的/backup目录下".decode('utf-8').encode('gb2312') % hostname
    

87. print('\n')
    

88. else:
    

89. print "%s 不好了，备份失败了".decode('utf-8').encode('gb2312') % hostname
    

90. print('\n')
    

91. ssh.close() #记得关闭paramiko的ssh连接
    

92. 
    

93. 
    

94. 
    

95. 
    

96. #定义函数用来远程执行发版动作
    

97. def Publish(hostname,port,username,password,local_base_path,remote_base_path):
    

98. count = 0
    

99. trans = paramiko.Transport(hostname,port) #建立paramiko的transport方式连接
    

100. trans.connect(username=username,password=password) #建立连接
     

101. sftp = paramiko.SFTPClient.from_transport(trans) #建立连接
     

102. with open('filelist.txt','r') as f:
     

103. for line in f:
     

104. #本地路径预处理
     

105. localpath_filename = line.replace('/trunk/src','WebRoot/WEB-INF/classes')
     

106. localpath_filename = localpath_filename.replace('/trunk/WebRoot','WebRoot')
     

107. localpath_filename = localpath_filename.replace('.java','.class')
     

108. localpath_filename = localpath_filename.replace('\n','') #把换行替换掉
     

109. #构造真正的父类本地路径
     

110. localpath_filename = local_base_path + localpath_filename
     

111. #构造真正的父类远程路径
     

112. remotepath_filename = remote_base_path + localpath_filename.replace('online_svn/WebRoot/','')
     

113. #拷贝父类到远程机器上
     

114. print "%s is publishing: %s ---> %s " % (hostname,localpath_filename,remotepath_filename)
     

115. try:
     

116. sftp.listdir(os.path.dirname(remotepath_filename)) #加个错误处理，如果目录不存在，就建立一个目录
     

117. except IOError:
     

118. sftp.mkdir(os.path.dirname(remotepath_filename))
     

119. sftp.put(localpath_filename,remotepath_filename)
     

120. count += 1
     

121. print "***********第%s个文件发版成功***************" % count
     

122. #用glob模块寻找子类
     

123. path_filename = os.path.split(localpath_filename) #split:返回一个二元组，包含文件的路径与文件名
     

124. filename_splitext = os.path.splitext(path_filename[1]) #去掉文件扩展名
     

125. localpath_subclassfilenames = glob.glob('%s/%s$*' % (path_filename[0],filename_splitext[0]))
     

126. #把子类拷贝到远程机器的目录下
     

127. for localpath_subclassfilename in localpath_subclassfilenames:
     

128. localpath_subclassfilename = localpath_subclassfilename.replace('\\',r'/')
     

129. remotepath_subclassfilename = remote_base_path + localpath_subclassfilename.replace('online_svn/WebRoot/','')
     

130. print "%s is publishing: %s ---> %s " % (hostname,localpath_subclassfilename,remotepath_subclassfilename)
     

131. sftp.put(localpath_subclassfilename,remotepath_subclassfilename)
     

132. count += 1
     

133. print "***********第%s个文件拷贝成功，注意该文件是子类哦^_^ *****************************************" % count
     

134. print " %s机器发版完成！！！".decode('utf-8').encode('gb2312') % hostname
     

135. print('\n')
     

136. trans.close() #记得关闭paramiko的transport连接
     

137. 
     

138. 
     

139. 
     

140. #定义函数用来重启服务
     

141. def RestartService(hostname,port,username,password):
     

142. ssh = paramiko.SSHClient() #创建一个从客户端连接服务器端的对象,也就是类的实例化
     

143. ssh.load_system_host_keys() #加载主机秘钥
     

144. ssh.set_missing_host_key_policy(paramiko.AutoAddPolicy()) #接受不在本地Known_host文件下的主机。否则ssh需要手工输入一次yes
     

145. ssh.connect(hostname,port,username,password) #ssh连接
     

146. stdin,stdout,stderr = ssh.exec_command(get_pty=False,command='/usr/local/shell/restartservice.sh')
     

147. result = stdout.read() #内容输出
     

148. error = stderr.read() #错误输出
     

149. print "%s 在重启服务...".decode('utf-8').encode('gb2312') % hostname
     

150. print result
     

151. print error
     

152. print('\n')
     

153. ssh.close() #记得关闭paramiko的ssh连接
     

154. 
     

155. 
     

156. 
     

157. #主程序
     

158. if __name__ == '__main__':
     

159. #Update SVN
     

160. while True:
     

161. temp = str(raw_input('1) 请问你要Update SVN吗?[yes/no]：'.decode('utf-8').encode('gb2312')))
     

162. tips = temp.strip().lower()
     

163. if tips == 'yes':
     

164. print "Now begin Update SVN..."
     

165. UpdateSVN('develop_svn')
     

166. break
     

167. elif tips == 'no':
     

168. break
     

169. 
     

170. #合并svn
     

171. while True:
     

172. temp = str(raw_input('2) 请问你要把开发svn合并到生产svn里面吗?[yes/no]：'.decode('utf-8').encode('gb2312')))
     

173. tips = temp.strip().lower()
     

174. if tips == 'yes':
     

175. print "Now begin Merge SVN..."
     

176. MergeSVN('develop_svn','online_svn')
     

177. break
     

178. elif tips == 'no':
     

179. break
     

180. 
     

181. #备份远程机器上的代码
     

182. while True:
     

183. temp = str(raw_input('3）请问你要在发版前，备份一下远程服务器上的代码吗?[yes/no]：'.decode('utf-8').encode('gb2312')))
     

184. tips = temp.strip().lower()
     

185. if tips == 'yes':
     

186. print "Now begin backup code..."
     

187. BackupCode(hostname = '10.2.88.2',port = '22',username = 'tms',password = 'xxx')
     

188. BackupCode(hostname = '10.2.88.3',port = '22',username = 'tms',password = 'xxx')
     

189. BackupCode(hostname = '10.2.88.13',port = '22',username = 'tms',password = 'xxx')
     

190. BackupCode(hostname = '10.2.88.14',port = '22',username = 'tms',password = 'xxx')
     

191. BackupCode_HK_QQ(hostname = '10.144.89.252',port = '22',username = 'tms',password = 'xxx')
     

192. break
     

193. elif tips == 'no':
     

194. break
     

195. #提示是否eclipse编译代码
     

196. while True:
     

197. temp = str(raw_input('4) 提示：请问你手工通过eclse编译tms代码了吗[yes/no]:'))
     

198. tips = temp.strip().lower()
     

199. if tips == 'yes':
     

200. break
     

201. elif tips == 'no':
     

202. break
     

203. 
     

204. #预发版
     

205. while True:
     

206. temp = str(raw_input('5）请问你需要先单独在预发版机器10.2.88.3上测试一下子发版吗?[yes/no]：'.decode('utf-8').encode('gb2312')))
     

207. tips = temp.strip().lower()
     

208. if tips == 'yes':
     

209. print "Now begin publish code..."
     

210. Publish(hostname='10.2.88.3',port='22',username='tms',password='tmsOo798',local_base_path='online_svn/',remote_base_path='/opt/apache-tomcat-8.0.27/webapps/ROOT/')
     

211. print "Now begin restart service..."
     

212. RestartService(hostname = '10.2.88.3',port = '22',username = 'tms',password = 'tmsOo798')
     

213. break
     

214. elif tips == 'no':
     

215. break
     

216. 
     

217. #生产全发版
     

218. while True:
     

219. temp = str(raw_input('6）请问你要开始在所有正式服务器上进行发版吗,包括10.2.88.13/14/2/3,10.144.89.252?[yes/no]：'.decode('utf-8').encode('gb2312')))
     

220. tips = temp.strip().lower()
     

221. if tips == 'yes':
     

222. print "Now begin publish code..."
     

223. Publish(hostname='10.2.88.13',port='22',username='tms',password='xxx',local_base_path='online_svn/',remote_base_path='/opt/apache-tomcat-8.0.27/webapps/ROOT/')
     

224. Publish(hostname='10.2.88.14',port='22',username='tms',password='xxx',local_base_path='online_svn/',remote_base_path='/opt/apache-tomcat-8.0.27/webapps/ROOT/')
     

225. Publish(hostname='10.2.88.2',port='22',username='tms',password='xxx',local_base_path='online_svn/',remote_base_path='/opt/apache-tomcat-8.0.27/webapps/ROOT/')
     

226. Publish(hostname='10.2.88.3',port='22',username='tms',password='xxx',local_base_path='online_svn/',remote_base_path='/opt/apache-tomcat-8.0.27/webapps/ROOT/')
     

227. Publish(hostname='10.144.89.252',port='22',username='tms',password='xxx',local_base_path='online_svn/',remote_base_path='/opt/tomcat-9090-tms/webapps/ROOT/')
     

228. 
     

229. break
     

230. elif tips == 'no':
     

231. break
     

     
     

     
     

232. #重启服务
     

233. while True:
     

234. temp = str(raw_input('7）请问你要开始在所有正式服务器上重启服务吗,包括10.2.88.13/14/2/3,10.144.89.252?[yes/no]：'.decode('utf-8').encode('gb2312')))
     

235. tips = temp.strip().lower()
     

236. if tips == 'yes':
     

237. print "Now begin restart service..."
     

238. RestartService(hostname = '10.2.88.13',port = '22',username = 'tms',password = 'xxx')
     

239. print "please wait 60s..."
     

240. time.sleep(60)
     

241. RestartService(hostname = '10.2.88.14',port = '22',username = 'tms',password = 'xxx')
     

242. print "please wait 60s..."
     

243. time.sleep(60)
     

244. RestartService(hostname = '10.2.88.2',port = '22',username = 'tms',password = 'xxx')
     

245. print "please wait 60s..."
     

246. time.sleep(60)
     

247. RestartService(hostname = '10.2.88.3',port = '22',username = 'tms',password = 'xxx')
     

248. print "please wait 60s..."
     

249. time.sleep(60)
     

250. RestartService(hostname = '10.144.89.252',port = '22',username = 'tms',password = 'xxx')
     

251. break
     

252. elif tips == 'no':
     

253. break
     

     
     

254. #提示是否手工提交online_svn代码
     

255. while True:
     

256. temp = str(raw_input('8) 提示：请问你手工提交online_svn代码了吗?[yes/no]:'))
     

257. tips = temp.strip().lower()
     

258. if tips == 'yes':
     

259. break
     

260. elif tips == 'no':
     

261. break
     

     
     

262. #退出本程时要说的话
     

263. print "\n"
     

264. print "*" * 50
     

265. print "亲，您的完版完成，记得测试业务是否正常哦！！！"
     

266. print "*" * 50
     

267. sys.exit()
     

     
     

268. #加入下面这句话，才能用windows双击运行python脚本，否则双击脚本会一闪而过
     

269. raw_input()

读到这里，这篇"如何用paramiko模块写发版机"文章已经介绍完毕，想要掌握这篇文章的知识点还需要大家自己动手实践使用过才能领会，如果想了解更多相关内容的文章，欢迎关注行业资讯频道。