每日备份JENKINS_HOME至SVN

时间  2019-11-06
标签 每日 备份 jenkins home svn 栏目 自动化构建 繁體版
原文   原文链接

##每日备份JENKINS_HOME至版本控制系统SVNhtml

Jenkins是一个可扩展的开源的持续集成工具，也是当下最流行的持续集成工具。linux

###Jenkins主要功能###git

  • 易于安装(Easy installation)
  • 易于配置(Easy configuration)
  • 变动集支持(Change set support)
  • 永久连接(Permanent links)
  • RSS/Email/IM集成(RSS/E-mail/IM Integration)
  • 过后标签(After-the-fact tagging)
  • JUnit/TestNG测试报告(JUnit/TestNG test reporting)
  • 分布式构建(Distributed builds)
  • 文件指纹打印(File fingerprinting)
  • 插件支持(Plugin Support)

其中插件支持使得Jenkins可定制、可扩展。github

###JENKINS_HOME目录结构### Jenkins的相关文件都存放在文件系统中，而JENKINS_HOME主要用来存放这些文件的，如系统配置文件、插件、每一个job的配置文件等。windows

JENKINS_HOME目录结构以下：服务器

<pre> +- config.xml (jenkins root configuration) +- *.xml (other site-wide configuration files) +- userContent (files in this directory will be served under your http://server/userContent/) +- fingerprints (stores fingerprint records) +- plugins (stores plugins) +- jobs +- [JOBNAME] (sub directory for each job) +- config.xml (job configuration file) +- latest (symbolic link to the last successful build) +- builds +- [BUILD_ID] (for each build) +- build.xml (build result summary) +- log (log file) +- changelog.xml (change log) +- workspace (working directory for the version control system) </pre>maven

不管是Jenkins的升级、迁移仍是备份、恢复都须要对JENKINS_HOME的操做，而备份Jenkins只需备份JENKINS_HOME便可。分布式

在JENKINS_HOME中，有些目录是无需备份的，如：workspace。ide

由于workspace是版本控制系统的工做目录，这个目录下的相关文件都来自版本控制系统，均可以从版本控制系统获取。svn

###Jenkins备份插件### Jenkins是可扩展的，有上千个插件可供选择，在备份这方面有两个插件可供选择：thinBackup plugin和backup plugin。

thinBackup plugin能够自动备份全局的和job的指定配置文件（不包括archive和workspace）。

backup plugin能够备份JENKINS_HOME，能够选择是否备份workspace、builds history、maven atifacts archives、fingerprints等。

thinBackup plugin和backup plugin不一样：

  1. bakup plugin只能手动触发备份，thinBackup plugin能够按期自动备份。
  2. bakup plugin能够备份JENKINS_HOME，能够选择哪些内容是否须要备份（如workspace、builds history等）， thinBackup plugin只备份最重要的信息（全局的和job的指定配置文件）。

上面两个备份插件整体来讲知足通常的需求了。

一般持续集成服务器资源专用，Jenkins安装在专门的服务器上（如：虚拟机）。 可是若是虚拟机挂了，短期内难以恢复，天然也没法从备份恢复了（上面两个插件都是本机备份）。

因此为了应对这种状况的发生，应该把JENKINS_HOME备份到其余地方。

###将JENKINS_HOME备份到版本控制系统### 笔者选择将JENKINS_HOME备份到版本控制系统：

  1. 版本控制系统选择的是SVN
  2. 每晚自动备份JENKINS_HOME至SVN
  3. 此外，经过SVN和能够对比两个revision之间的差别，查看变动，便于追溯

备份前的初始化步骤以下：

  1. 在SVN版本库上新建一个目录如JENKINS_HOME_BAK
  2. 将JENKINS_HOME_BAK检出(checkout)到Jenkins服务器上的某个位置，如E:/JENKINS_HOME_BAK

具体的备份步骤以下：

  1. 拷贝JENKINS_HOME到JENKINS_HOME_BAK
  2. 将JENKINS_HOME_BAK中未归入版本控制的文件或目录归入到版本控制（svn add操做）
  3. 遍历JENKINS_HOME_BAK，若是其中的文件或目录不在JENKINS_HOME中，对其执行svn delete操做
  4. 最后提交到SVN版本库（svn ci操做）

上述步骤，若是第2步是手动，理论上是难以实现的，因此若是是手动备份，能够不执行第5步操做 而这些流程化的步骤，若是手动操做，异常繁琐、重复，懒人一般懒的作重复性的事，因此应该将其自动化。

关于自动化备份脚本，主要是实现上面的4个步骤：

  1. 对于第1步，使用Ant脚本实现

    • Ant脚本不只仅用于构建，还能够用于构建以外
    • Ant的语法很灵活，有不少task可供选择
    • 拷贝操做使用了Ant copy task，可使用fileset的excludes来排除无需拷贝的文件或目录（如workspace），很方便
    • Ant copy task能够增量copy

  2. 对于第2步、第3步和第4步，使用Python+svn client comands实现

    • 选择Python是由于最近在不断学习Python
    • 选择svn client commands而不是pysvn是由于没有在windows上安装好pysvn，因而用svn client commands代替

此外，自动化备份，能够在Jenkins上建立一个job专门用来定时备份JENKINS_HOME

具体的实现脚本见：

  • oscgit:<a href="http://git.oschina.net/donhui/JENKINS_HOME_BAKCUP" target="_blank">donhui/JENKINS_HOME_BAKCUP</a>
  • github:<a href="https://github.com/donhui/JENKINS_HOME_BACKUP" target="_blank">donhui/JENKINS_HOME_BAKCUP</a>

补充说明，上述所使用到的工具及环境：

* Jenkins 1.592
* Python 2.7.8
* svn client commands（Windows下安装TortoiseSVN时须要手动选择安装）
* Ant 1.8.1
* 在windows环境和linux环境都验证测试过
* 在svn client 1.6和1.7以上环境都验证测试过

###参考###

相关文章
相关标签/搜索
每日一句
    每一个你不满意的现在，都有一个你没有努力的曾经。
本站公众号
   欢迎关注本站公众号,获取更多信息
联系我们 最近搜索 最新文章 沪ICP备13005482号-10 MyBatis教程 SQL 教程 MySQL教程 Java 教程 Thymeleaf 教程 Hibernate教程 Spring教程 Redis教程