使用gogs,drone,docker搭建自动部署测试环境

Gogs是一个使用go语言开发的自助git服务,支持所有平台

Docker是使用go开发的开源容器引擎

Drone是一个基于容器技术的持续集成平台。每个构建都在一个临时的Docker容器中执行,使开发人员能够完全控制其构建环境并保证隔离。drone易于安装和使用,其目标是替代jenkins

本文所实现的的功能为当你push代码到gogs时,自动更新您测试环境的二进制文件并重启,实现自动部署(以go开发api服务为例,测试环境为ubuntu)

整个流程为:

  1. push code
  2. drone搭建临时容器拉取最新代码编译,在临时容器内通过scp拷贝编译好的二进制文件至测试服务器,然后通过ssh控制测试环境应用服务重启(supervisorctl)

步骤(ubuntu)

默认已经安装好gogs和docker,以及使用supervisor部署应用服务(可选为其他部署方式)

  1. 安装docker

    具体安装步骤可见官网文档

  2. 安装gogs

    官网安装文档(需翻墙,也可自行搜索相关安装文档)

  3. 安装drone(v0.5)

    通过docker安装

    1. 下载drone镜像
      docker pull drone/drone:0.5
    2. 启动drone server
       docker run -d \
      -e DRONE_GOGS=true \
      -e DRONE_GOGS_URL=http://127.0.0.1:3000 \ //gogs服务器地址
      -e DRONE_SECRET=... \
      -e DRONE_OPEN=true \
      -v /var/lib/drone:/var/lib/drone \
      -p 80:8000 \
      --restart=always \
      --name=drone \
      drone/drone:0.5

      该命令启动的是一个以sqlite做为存储数据库,可选配mysql,postgres可根据自己情况进型配置,见文档

      drone启动成功,可以通过网页访问,使用gogs账号登录,找到项目开启管理。

    3. 启动drone agent
       docker run -d \
      -e DRONE_SERVER=ws://172.17.0.1/ws/broker \ //server 地址
      -e DRONE_SECRET=... \ //与server一致
      -v /var/run/docker.sock:/var/run/docker.sock \
      --restart=always \
      --name=drone-agent \
      drone/drone:0.5 agent
  4. 生成定制golang镜像(在.drone.yml配置置该镜像作为构建镜像)

    1. pull一个base镜像

      docker pull goang:latest 可选择版本
    2. 定制镜像
      1. 创建并启动golang容器

        docker run --ti golang:latest /bin/bash

      2. 生成ssh公钥,并设置ssh免密登录测试服务器

        容器内:

        • 执行ssh-keygen -t rsa
        • 会在$HOME/.ssh目录下生成id_rsa和id_rsa.pub
        • 将id_rsa.pub通过scp拷贝至测试服务器

          测试服务器:
        • 在home目录下建立.ssh文件夹
        • 并cat id_rsa.pub >> .ssh/authorized_keys
        • chmod 600 .ssh/authorized_keys

          ssh免密密登录已配置好

        下载自己项目需要的依赖包 go get ...(官方golang镜像的GOPATH为/go)

        准备好之后退出容器,并把在容器里面的修改保存为一个新的镜像

        如:docker commit [容器id] golang:dev

  5. 在项目根路径添加.drone.yml文件

    配置示例:

    workspace:
    base: /root/go
    path: src/projectname pipeline:
    build:
    image: golang:dev //指定构建镜像
    environment:
    - GOPATH=/go:/root/go
    - SSH_ARGS=-p 22 -o StrictHostKeyChecking=no(设置第一次登录时不需要输入yes)
    - SCP_ARGS=-P 22 -o StrictHostKeyChecking=no
    - BUILD_NAME=buildname
    - APP_NAME=appname
    - TEST_SERVER=root@172.17.0.1
    - RUN_PATH=/data/go/project(配置自己测试环境应用保存运行地址)
    commands:
    - go build -o $BUILD_NAME
    - eval $(ssh-agent -s)
    - ssh-add /root/.ssh/id_rsa
    - scp $SCP_ARGS "$BUILD_NAME" "$TEST_SERVER":"$RUN_PATH"/"$BUILD_NAME"_"$(date '+%Y%m%d')"_"$(git rev-parse HEAD| cut -c1-10)" //拷贝文件
    - ssh $SSH_ARGS "$TEST_SERVER" "ln -s -f $RUN_PATH/$BUILD_NAME\_$(date '+%Y%m%d')_$(git rev-parse HEAD| cut -c1-10) $RUN_PATH/$BUILD_NAME && supervisorctl restart $APP_NAME" //重启,利用软连接实现备份
    • workspace: 工作路径,根据如上配置,会把你的项目克隆到 /root/go/projectname, 且$PWD=/root/go/projectname
    • image: 指定构建镜像
    • environment: 构建临时容器的环境变量,相当于 docker run -e .....
    • commands: 在容器内shell上执行的命令

    上面配置文件中设置了两个GOPATH是因为在之前的测试中,如果我设置

    base/root

    GOPATH=/go

    会把之前镜像下载的依赖包给清空了,不知是哪里配错了还是什么原因,暂时只找到设置另个GOPATH的方法来解决

    编写好.drone.yml后加入仓库push代码便会自动构建部署了

记录使用gogs,drone搭建自动部署测试环境的更多相关文章

  1. 使用gogs,drone搭建自动部署

    使用gogs,drone搭建自动部署 使用gogs,drone,docker搭建自动部署测试环境 Gogs是一个使用go语言开发的自助git服务,支持所有平台Docker是使用go开发的开源容器引擎D ...

  2. jenkins自动部署测试环境

    构建脚本如下: echo "当前目录":$(pwd)echo "当前时间":$(date +%Y-%m-%d_%H:%M)find ./ -type f -na ...

  3. python 实现自动部署测试环境

    预设条件 产品运行在Linux CentOS6 X64上 python3,Djanggo,Cherrypy安装好手动安装过程 登录服务器 检查是否有以前的版本的产品在运行,有,停掉 如果有原来的代码包 ...

  4. 基于Gogs+Drone搭建的私有CI/CD平台

    请移步 基于Gogs+Drone搭建的私有CI/CD平台

  5. jenkins+git+maven搭建自动化部署项目环境

    简介    折腾了两个晚上,趁着今晚比较有空,把jenkins+git+maven搭建自动化部署项目环境搭建的过程记录一下,这里我把github作为git的远程仓库(https://github.co ...

  6. docker-compose 搭建 Redis Sentinel 测试环境

    docker-compose 搭建 Redis Sentinel 测试环境 本文介绍如何使用 docker-compose 快速搭建一个 Redis Sentinel 测试环境.其中 Redis 集群 ...

  7. Jenkins+Maven+SVN搭建自动部署、自动测试环境

    .打开http://10.3.15.78:8080/jenkins/,第一次进入里面没有数据,我们需要创建job,我们这有2个项目,需要创建2个job.http://10.3.34.163:9890/ ...

  8. 利用Git搭建自动部署的Laravel环境 - 钟晨宇的博客 - CSDN博客

    目标:服务器上搭建Laravel环境,本地使用IDE进行开发,使用Homestead做本地调试环境,代码提交后自动部署到服务器Root目录下. 下面是整个流程的示意图:  1. 准备工作,搭建LNMP ...

  9. Gogs+Drone搭建CI/CD平台

    Gogs 是由 Go 语言编写的 Git 服务器,由中国人主导开发的一款开源项目,搭建方便并且拥有完善的中文文档,配合 Drone 可以实现持续集成/持续部署.本文介绍如何通过 Docker 搭建 G ...

随机推荐

  1. R语言学习笔记:字符串处理

    想在R语言中生成一个图形文件的文件名,前缀是fitbit,后面跟上月份,再加上".jpg",先不百度,试了试其它语言的类似语法,没一个可行的: C#中:"fitbit&q ...

  2. 同步推是如何给未越狱的IOS设备安装任意IPA的?

    工作准备: 1. 准备一台MAC 2. 拥有一份299企业证书, 然后按照下面步骤操作: 1. 把xxxx.ipa改成xxx.zip, 解压缩得到Payload文件夹 2. 替换Payload里的em ...

  3. arc下内存泄漏的解决小技巧

    一定要注意,我们运行app时,一定要关心内存的使用,尽量不要超过20M,即使有很多图片要显示也绝对不能超过30M.所以运行自己开发的app时多关心内存的使用是个很好的习惯. 对于性能,内存的优化,这个 ...

  4. unity下载文件三(http异步下载)

    异步下载,顾名思义就是不影响你主线程使用客户端的时候,人家在后台搞你的明堂. 直接入主题,既然要下载,首先得请求,请求成功之后进行回调,这就是一个异步过程,异步回调的时间不可控. 1.首先请求下载. ...

  5. Cocos2d入门--1--初涉相关属性或代码

    Cocos2d vision:  cocos2d-x-3.8.1 万丈高楼,起于累土.对于一个游戏框架的学习,其实在于框架功能的使用积累,学会了如何在cocos2d游戏引擎的基础上使用它提供的各种功能 ...

  6. centos性能监控系列二:Collectl初解

    对于一个 Linux 系统管理员来说确保自己管理的系统处于一个良好的状态是其首要责任. Linux 系统管理员可以找到有很多工具来帮助自己监控和显示系统中的进程,例如 top 和 htop 今天介绍一 ...

  7. redis中set命令的源码分析

    首先在源码中的redis.c文件中有一个结构体:redisCommand redisCommandTable[],这个结构体中定义了每个命令对应的函数,源码中的set命令对应的函数是setComman ...

  8. 在MVC3中使用code first生成数据局库并操作数据库

    1.建立Users和UserInfos两个实体类 对应的是数据库中的表 public class User { //类名+Id(User+Id)组成的字符串在数据库表中会设置该字段是主键且是按1的增量 ...

  9. redis 优化

    系统优化echo "vm.overcommit_memory=1" > /etc/sysctl.conf 0, 表示内核将检查是否有足够的可用内存供应用进程使用:如果有足够的 ...

  10. NetBIOS

    NetBIOS是Network Basic Input/Output System的缩写,严格来说它不是一个网络协议,而是一套API,为局域网内应用程序通信提供会话层(OSI七层参考模型)的支持. N ...