k8s与CICD--drone简介和部署

---

前言

整个基于k8s的pass平台，关键的一部分就是CICD。CICD又是devops的关键部分。以前主流的工具是Jenkins。今天主要介绍的是drone。drone用go语言实现的，drone是前google员工2013年开源的一个CI/CD工具，如今已经拉了投资商业化了。企业版是付费的，咱们用的是免费版本。drone更新比较快，以前稳定版本是0.7，今天部署的时候已经更新到0.8了。不过相关的文档不完善，不少都是coming soon。

优点：

drone引入pipline的概念，整个build过程由多个stage组成，每个stage都是docker。

• 各stage间能够经过共享宿主机的磁盘目录, 实现build阶段的数据共享和缓存基础数据, 实现加速下次build的目标
• 各stage也能够共享宿主机的docker环境，实现共享宿主机的docker image, 不用每次build都从新拉取base image，减小build时间
• 能够并发运行。多个build能够并发运行，单机并发数量由服务器cpu数决定。 由开发者负责打包image和流程控制。Docker-in-docker,这一点很是重要，一切都在掌握之中。相比jenkins的好处是，全部的image都是开发者提供，不须要运维参与在CI服务器上部署各类语言编译须要的环境。
  是DevOps的最佳实践！

部署

编写docker-compose文件

drone的部署及其简单，采用docker-compose的方式，相似于gogs。
具体docker-compose.yml以下：

version: '2'

services:
  drone-server:
    image: drone/drone:0.8

    ports:
      - 80:8000
      - 9000
    volumes:
      - /var/lib/drone:/var/lib/drone/
    restart: always
    environment:
      - DRONE_OPEN=true
      - DRONE_HOST=127.0.0.1
      - DRONE_GOGS=true
      - DRONE_GOGS_URL=http://gogs.xxx.com
      - DRONE_GOGS_PRIVATE_MODE=true 
      - DRONE_SECRET=f5b8122b5e1cf51da10d3be6e25bf6ec

  drone-agent:
    image: drone/agent:0.8

    restart: always
    depends_on:
      - drone-server
    volumes:
      - /var/run/docker.sock:/var/run/docker.sock
    environment:
      - DRONE_SERVER=drone-server:9000
      - DRONE_SECRET=f5b8122b5e1cf51da10d3be6e25bf6ec
      - DOCKER_API_VERSION=1.24

此处须要注意的是在agent处的 DOCKER_API_VERSION=1.24。在执行pipline的时候，直接报错

client is newer than server (client API version: 1.26, server API version: 1.24)

这实际上是docker1.12版本的一个issue。解决方案就是在agent里增长环境变量DOCKER_API_VERSION=1.24。

执行docker-compose

基本上就一句命令

docker-compose up -d

不熟悉docker-compose命令的能够具体查看。
至于docker-compose的安装，我这里使用pip安装的。

yum install python-pip -y

pip install docker-compose -y

登陆配置gogs项目

此处输入的用户名和密码是gogs的。drone拿着用户名和密码能够获取gogs的项目和创建webhook。

登陆成功之后选择你想要进行cicd的项目便可。能够设置各类gogs钩子的触发条件，好比push或是merge，tag等。下面是我实际测试的一个项目截图。

.drone.yml

固然必须如今项目根目录下添加.drone.yml文件。增长本身实际的构建逻辑。
因为我这边是一个go项目做为测试。具体的内容以下：

pipeline:
  build:
    image: golang:latest
    commands:
      - go get 
      - go build

而后基本上工做就完成了。

看到上面的贴图其实有报错信息的，具体的错误

fatal: could not read Username for 'http://gogs.xxx.com': No such device or address
exit status 128

其实在实际应用场景中，几乎全部单位的gogs都是私有仓库，因此才会出现这个问题。这个坑我也是查了不少信息都没有解决，最后是这个issue以及看了drone-git的源码之后找到了解决方案。实际上在drone0.4以前，是不支持gogs私有仓库的。而在以后的版本已经解决了这个问题，须要在docker-compose文件中增长 以下配置项：

# Set to true if Gogs is running in private mode.
DRONE_GOGS_PRIVATE_MODE=true

---

配置drone数据库为mysql

以前的docker-compose文件默认启用的是内部的sqlite数据库，在生产环境中，咱们须要持久化到生产数据库。drone支持mysql和pgsql两个数据库。这里我用的是mysql。

新的配置文件以下：

version: '2'

services:
  drone-server:
    image: drone/drone:0.8

    ports:
      - 80:8000
      - 9000
    volumes:
      - /var/lib/drone:/var/lib/drone/
    restart: always
    environment:
      - DRONE_OPEN=true
      - DRONE_HOST=127.0.0.1
      - DRONE_GOGS=true
      - DRONE_GOGS_URL=http://gogs.xx.com
      - DRONE_GOGS_PRIVATE_MODE=true
      - DRONE_SECRET=f5b8122b5e1cf51da10d3be6e25bf6ec
      - DRONE_DATABASE_DRIVER=mysql
      - DRONE_DATABASE_DATASOURCE=root:123456@tcp(xx.205.xx.126:3306)/drone?parseTime=true

  drone-agent:
    image: drone/agent:0.8

    restart: always
    depends_on:
      - drone-server
    volumes:
      - /var/run/docker.sock:/var/run/docker.sock
    environment:
      - DRONE_SERVER=drone-server:9000
      - DRONE_SECRET=f5b8122b5e1cf51da10d3be6e25bf6ec
      - DOCKER_API_VERSION=1.24

仔细查看drone关于mysql的文档，须要咱们手动建立drone数据库。

和k8s的结合

1. 其实主要的目的仍是在咱们k8s的平台上使用起来，drone提供了丰富的插件。其中有k8s和helm相关的。结合harbor和helm，实现k8s的CICD，大体的流程：合并代码触发pipline，build和生成镜像推到harbor，而后利用helm插件部署到k8s中。
2. 固然若是你的项目不是docker部署的，其实也彻底可使用drone的。好比golang项目，就能够构建完成之后，将构建成功的可执行文件拷贝到目的主机。
3. 因为一切都是基于docker，因此彻底能够定制本身不一样的镜像用来实现不一样的场景。尤为是提供了service这个功能。能够提供一些mysql等service，能够在测试阶段发挥做用。因为我最近一直在作golang的项目，有一个场景大概全部的gopher都有这个问题，那就是go的包管理工具太多了，dep，godep，glide等，最好的实现就是提供一些单独安装了某种工具的go基础镜像，在具体的项目选择不一样的镜像便可。