• Drone 持续集成实践


    Drone 官方示例 - Example Go project
    用 Docker 部署 Go 服务器
    Golang 官方示例 - outyet
    一个生产环境的例子
    用 rsync 复制文件的方式进行部署的例子

    实际的 DevOps 项目中,在 pipeline 流水线中包含下载代码、测试、构建、发布、部署、通知等步骤。基本流程如下,当然不同的语言或不同的需求下流程会有所差异:

    clone -> test -> build -> publish -> deploy -> notify

    包含开发的完整流程为:

    1. 开发项目代码,包括 .drone.yml 文件和 Dockerfile 文件
    2. 上传代码至 Gogs,通过 Gogs 的 webhook 触发 Drone 的 Pipeline
    3. Drone 开始 Pipeline 的执行
      1. clone 代码至容器
      2. 测试
      3. 编译代码,构建可执行文件(Java、Golang 等编译型语言需要,PHP 之类的脚本语言则不需要)
      4. 将项目和运行环境打包成镜像,发布到 Registry(当然也可以使用 rsync 将编译后的文件(Golang 等)或源码(PHP 等)部署到服务器,此时需要在目标服务器提前安装运行环境)
      5. 部署至生产环境
      6. 发送邮件等通知信息

    Drone 的文档挺差劲,不过 Drone 用起来还是挺简单的,比 Jenkins 简单到无法描述。

    打通 Gogs 和 Drone

    创建 Git 项目

    登录 Gogs 后,从 Web 页面创建项目。我的 Gogs 项目地址是 https://gogs.kikakika.com

    创建完成后,可以在 Web 页面添加文件,但是比较麻烦。这里把仓库添加到本地:

    git clone https://gogs.kikakika.com/lihongfeng/first.git

    然后,在仓库中创建 .drone.ymlhello.gohello_test.go 三个文件。

    编写 .drone.yml 文件

    这里直接使用 Go 的官方镜像

    workspace:
      base: /go
      path: src/gogs.kikakika.com/lihongfeng/first
    
    pipeline:
      build:
        image: golang:1.10.2
        commands:
          - go test
          - go build 

    其中,workspace 定义了可以在构建步骤之间共享的 volume 和工作目录。建议设置 workspace 以使用所需的 GOPATH。其中:

    • base 定义了一个可用于所有 pipeline 步骤的共享的 volume。这可确保源代码、依赖项和编译的二进制文件在步骤之间持久保存和共享。
    • path 定义了用于构建的工作目录。代码会克隆到这个位置,并且构建过程中每个步骤都会使用这个工作目录作为默认的工作目录。path 必须是相对路径,并且可以与 base 相结合。

    编写 Golang 代码

    main.go

    package main
    
    import (
        "fmt"
    )
    
    func main() {
        fmt.Printf("hello world");
    }
    
    func hello() string {
        return "hello world";
    }

    main_test.go

    package main
    
    import "testing"
    
    func TestHello(t *testing.T) {
        if hello() != "hello world" {
            t.Error("Testing error")
        }
    }

    提交代码

    $ git add ./
    $ git commit -m "try drone with golang demo"
    [master f8a6927] try drone with golang demo
     3 files changed, 33 insertions(+)
     create mode 100644 .drone.yml
     create mode 100644 main.go
     create mode 100644 main_test.go
    $ git push
    Counting objects: 5, done.
    Delta compression using up to 4 threads.
    Compressing objects: 100% (5/5), done.
    Writing objects: 100% (5/5), 696 bytes | 696.00 KiB/s, done.
    Total 5 (delta 0), reused 0 (delta 0)
    To https://gogs.kikakika.com/lihongfeng/first.git
       b8c5bdd..f8a6927  master -> master

    查看 Drone 的 web 端是否成功触发

    可以看到成功触发了 CI。具体页面截图如下。

    • 项目主页:
      这里写图片描述
    • clone 阶段:
      这里写图片描述
    + git init
    Initialized empty Git repository in /go/src/gogs.kikakika.com/lihongfeng/first/.git/
    + git remote add origin https://gogs.kikakika.com/lihongfeng/first.git
    + git fetch --no-tags origin +refs/heads/master:
    From https://gogs.kikakika.com/lihongfeng/first
     * branch            master     -> FETCH_HEAD
     * [new branch]      master     -> origin/master
    + git reset --hard -q fbcf4d02a0294c943269634edd517c977ea03cfb
    + git submodule update --init --recursive
    • build 阶段:
    + go test
    PASS
    ok      gogs.kikakika.com/lihongfeng/first  0.002s
    + go build

    实现 CI/CD

    上面的例子只是构建项目及运行测试,并没有构建镜像及将镜像发布到 Registry,更没有操作生产环境服务器更新镜像。

    构建镜像需要用到 Docker 插件.

    通过更新上面的 .drone.yml 文件实现这几个步骤:

    workspace:
      base: /go
      path: src/gogs.kikakika.com/lihongfeng/first
    
    pipeline:
      test:
        image: golang:1.10.2
        commands:
          - go test
      build:
        image: golang:1.10.2
        commands:
          - go build
      publish:
        image: plugins/docker
        repo: kikajack/first
        dockerfile: ./Dockerfile
        tags: latest
        # registry: https://harbor.kikakika.com # 如果使用自建的镜像仓库,例如 Harbor,这里可以通过 registry 指定
        secrets: [ docker_username, docker_password ] # 这里的用户名和密码在 web 界面指定
    
        # 如果需要自动部署容器到服务器,可以打开下面这部分代码
      # deploy:
      #   image: appleboy/drone-ssh # 用于连接服务器
      #   host:
      #     - your_host
      #   username: your_name
      #   password: your_pass
      #   port: 22
      #   command_timeout: 300 # ssh命令行执行超时时间,300#   script:
      #     - docker pull repo_url:latest
      #     - docker rm -f docker-demo || true # 这里这样是因为如果不存在docker-demo,rm会报错
      #     - docker run -d -p 8065:8065 --name docker-demo repo_url

    其中 secrets: [ docker_username, docker_password ] 中指定的用户名密码,需要在 Drone 的 Web 页面设置。这样可以避免在配置文件中出现密码,安全。

    Dockerfile 文件

    需要在项目根目录中创建 Dockerfile 文件,用于构建镜像。可以参考 通过 Docker 部署 Go 服务器,这里有完整的示例。这个文件支持两种方式构建镜像:容器外编译后复制二进制文件到容器,或复制源代码到容器后在容器中编译得到二进制文件。

    复制源代码到容器后在容器内编译:

    # 官方的 Golang 镜像基于 Debian,且 workspace(GOPATH)配置为 /go
    FROM golang:1.10.2
    
    # 将本地的 Go 文件复制到容器中的 workspace
    ADD . /go/src/gogs.kikakika.com/lihongfeng/first
    
    # 在容器内编译构建应用。可以在这里获取或管理依赖关系,可以手动或使用诸如“godep”之类的工具
    RUN go install gogs.kikakika.com/lihongfeng/first
    
    # 容器启动时,默认运行 first 应用
    ENTRYPOINT /go/bin/first
    
    # 监听 8080 端口
    EXPOSE 8080

    容器外编译后复制二进制文件到容器

    可以参考 这个例子

    • Dockerfile 文件:
    FROM plugins/base:multiarch
    
    LABEL maintainer="Bo-Yi Wu <appleboy.tw@gmail.com>" 
      org.label-schema.name="Drone Workshop" 
      org.label-schema.vendor="Bo-Yi Wu" 
      org.label-schema.schema-version="1.0"
    
    ADD release/linux/amd64/helloworld /bin/
    
    HEALTHCHECK --interval=30s --timeout=30s --start-period=5s --retries=3 CMD [ "/bin/helloworld", "-ping" ]
    
    ENTRYPOINT ["/bin/helloworld"]
    • .drone.yml 文件:
    workspace:
      base: /go
      path: src/github.com/go-training/drone-golang-example
    
    clone:
      git:
        image: plugins/git
        depth: 50
        tags: true
    
    pipeline:
      testing:
        image: golang:1.10.0
        commands:
          - go test -v .
          - go vet
    
      build_linux_amd64:
        image: golang:1.10.0
        group: build
        commands:
          - make build_linux_amd64
    
      build_linux_i386:
        image: golang:1.10.0
        group: build
        commands:
          - make build_linux_i386
    
      publish_linux_amd64:
        image: plugins/docker:17.05
        pull: true
        secrets: [ docker_username, docker_password ]
        group: release
        repo: appleboy/test
        auto_tag: true
        dockerfile: Dockerfile
        when:
          event: [ push, tag ]
          local: false
    
      publish_alpine:
        image: plugins/docker
        group: release
        pull: true
        dockerfile: Dockerfile.alpine
        secrets: [ docker_username, docker_password ]
        default_tags: true
        default_suffix: alpine
        repo: appleboy/test
        when:
          event: [ push, tag ]
          local: false

    验证镜像是否上传成功

    • 登录官方镜像仓库 https://hub.docker.com/r/kikajack/first,可以看到镜像上传成功了。
      这里写图片描述
    • 执行一下,会成功的输出“hello world”:
    [root@VM_139_74_centos ~]# docker run kikajack/first
    Unable to find image 'kikajack/first:latest' locally
    latest: Pulling from kikajack/first
    cc1a78bfd46b: Already exists 
    6861473222a6: Already exists 
    7e0b9c3b5ae0: Already exists 
    3ec98735f56f: Already exists 
    32ecd1fcfe1a: Already exists 
    9889d58a42e5: Already exists 
    337bad6698be: Already exists 
    831eeb459358: Pull complete 
    d4438c00f9db: Pull complete 
    Digest: sha256:9caf567d796deead445606f56892f843f8869aef92d27bb8ff20985cd8a82169
    Status: Downloaded newer image for kikajack/first:latest
    hello world[root@VM_139_74_centos ~]# 
  • 相关阅读:
    去掉百度地图左下角文字和图标。
    使用CMake,且在GCC编译时指定相对源代码路径选项BUG的问题
    一键杀死某些指定进程的脚本
    KMS使用CLion作为IDE来调试
    ubuntu 18.04下安装编译的KMS,依赖库
    ubuntu 18.04下编译最新版本的KMS
    configure.ac中AC_CHECK_LIB的问题
    C/C++下__FILE__参数过长的问题解决办法
    Linux 下 UltraEdit 版本 破解 30 天试用限制
    ubuntu下配置ProFtpd服务使用sqlite3作为后端用户认证
  • 原文地址:https://www.cnblogs.com/kika/p/10851590.html
Copyright © 2020-2023  润新知