转载请注明出处:https://www.cnblogs.com/shining5/p/8863063.html

部署GitLab-CI

简介

GitLab_CI(gitlab continuous integration)是Gitlab提供的持续集成服务。主要功能是每一次push到gitlab的时候,触发一次脚本执行,脚本内容包括编译、测试、部署等自定义内容。

持续集成在自动化工作流程中扮演着十分重要的角色,GitLab内置持续集成,持续部署,持续交付以支持编译,测试和部署应用程序

本文主要利用GitLab-CI实现自动部署

原理

自动部署涉及了若干个角色,主要介绍如下:

  • GitLab-CI

    GitLab自带的持续集成系统,你装的GitLab的那台服务器上就有,无需自行安装。GitLab-CI负责解析.gitlab-ci.yml

  • .gitlab-ci.yml

    GitLab-CI使用YAML文件来管理项目配置,在git项目的根目录下创建此文件,文件中包含一系列的阶段和执行规则。GitLab-CI在push后解析它,根据里面的内容调用runner来执行。YAML配置语法

  • GitLab-Runner

    这个是脚本执行的承载者, .gitlab-ci.yml的script部分就是由runner来负责的。GitLab-CI解析项目里的.gitlab-ci.yml文件之后,根据里面的规则,分配到各个Runner来运行相应的脚本script。

步骤

  • 安装GitLab-CI

    GitLab自带,无需单独安装

  • 安装GitLab-Runner
    在centOS系统安装gitlab-ci-multi-runner,在其它系统安装runner,请参考安装GitLab Runner

添加GitLab官方仓库
# For RHEL/CentOS/Fedora
curl -L https://packages.gitlab.com/install/repositories/runner/gitlab-ci-multi-runner/script.rpm.sh | sudo bash
安装最新版本的GitLab Runner
# For RHEL/CentOS/Fedora
sudo yum install gitlab-ci-multi-runner
  • 向GitLab-CI注册Runner,将Runner与git项目绑定起来

    • 先介绍下如何获取项目token,因为注册Runner时会用到,git项目–settings–CI/CD–General pipelines settings–Runner token,如图

  • 注册Runner
sudo gitlab-ci-multi-runner register
Please enter the gitlab-ci coordinator URL (e.g. https://gitlab.com/):
http://git.intra.weibo.com
Please enter the gitlab-ci token for this runner:
***(获取git项目token值)
Please enter the gitlab-ci description for this runner: Please enter the gitlab-ci tags for this runner (comma separated):
tag名字(很重要,在.gitlab-ci.yml文件里面指定tag,匹配使用哪个tag的runner)
Whether to run untagged builds [true/false]: Whether to lock the Runner to current project [true/false]: Registering runner... succeeded runner=m15ahKPr
Please enter the executor: docker-ssh, shell, ssh, virtualbox, kubernetes, docker, parallels, docker+machine, docker-ssh+machine:
shell(执行脚本的方式)
Runner registered successfully. Feel free to start it, but if it's running already the config should be automatically reloaded!

通过gitlab-ci-multi-runner status/gitlab-runner status查看runner运行状态,也可以在git项目中查看或编辑runner状态:Settiongs-CI/CD-Runner settings

  • 编写.gitlab-ci.yml
    git项目根目录下编写.gitlab-ci.yml

    stages:
    -deploy
    deploy:
    stage: deploy
    script:
    - deploy.sh
    only:
    - master
    tags:
    - runner26

    这里我们只有一个stage:deploy,only指定了只有在master分支push的时候才会被执行,tags是runner26,此tag对应刚才注册runner时候的tags

    最重要的script部分:deploy.sh 这里是一条shell命令,deploy.sh是runner服务器上编写的一个脚本,runner执行时执行此脚本

    .gitlab-ci.yml配置请参考官方文档

    添加徽章

步骤:Settings–>CI/CD–>General pipelines settings–>Pipeline status

[![pipeline status](http://git.intra.weibo.com/dorylus_qa/CITest/badges/master/pipeline.svg)](http://git.intra.weibo.com/dorylus_qa/CITest/commits/master)添加到README.md中

遇到问题及解决办法

  • 执行gitlab-ci时,有时会报user gitlab-runner does not exist或者/home/gitlab-runner:permission denied

    • 解决办法有两个:

      • user add gitlab-runner添加此用户,chown -R gitlab-runner:gitlab-runner /home/gitlab-runner
      • 修改gitlab-ci-multi-runner默认启动参数,默认–working-directory /home/gitlab-runner,–user gitlab-runner,我们可以修改成自己的用户名及工作目录并赋予权限。

        1. kill掉当前gitlab-ci-multi-runner服务
        2. gitlab-ci-multi-runn uninstall
        3. Gitlab-ci-multi-runner install —working-directory /data0/gitlab-runner --user tr1
        4. chown -R tr1:tr1 data0/gitlab-runner
        5. 重启服务/usr/bin/gitlab-ci-multi-runner run --working-directory /data0/gitlab-runner --config /etc/gitlab-runner/config.toml --service gitlab-run --syslog --user tr1
  • 项目执行ci时会自动将项目文件下载到runner所在的机器,那如何找到呢?

    • 路径为–working-directory指定的路径,如/home/gitlab-runner/builds下,但下面会有一串字符命名的文件夹,那哪个是我们要找的目录呢?

      • 字符串命名的文件夹与runner中的字符串对应 
  • gitlab-runner如何并发执行任务

    • 默认并发数为1,修改 /etc/gitlab-runner/config.toml中的concurrent的配置即可,然后重启服务
  • runner执行以docker方式,那如何设置数据映射呢?

    • 仍然是修改 /etc/gitlab-runner/config.toml中的配置,找到你注册的runner,修改volumes即可volumes = ["/data0/host:/data0/container:rw","/cache"] 其中/data0/host为宿主机地址,/data0/container容器地址,rw设置读写权限

参考资料

GitLab-CI部署及踩坑总结的更多相关文章

  1. Docker Gitlab CI 部署 Spring Boot 项目

    目前在学习这一块的内容,但是可能每个人环境都不同,导致找不到一篇博客能够完全操作下来没有错误的,所以自己也写一下,记录一下整个搭建的过程. Docker 的安装这里就不赘述了,基本上几行命令都可以了, ...

  2. kubernetes-dashboard(1.8.3)部署与踩坑

    Kubernetes Dashboard 是一个管理Kubernetes集群的全功能Web界面,旨在以UI的方式完全替代命令行工具(kubectl 等). 目录 部署 创建用户 集成Heapster ...

  3. Gitlab CI 集成 Kubernetes 集群部署 Spring Boot 项目

    在上一篇博客中,我们成功将 Gitlab CI 部署到了 Docker 中去,成功创建了 Gitlab CI Pipline 来执行 CI/CD 任务.那么这篇文章我们更进一步,将它集成到 K8s 集 ...

  4. Microsoft SQL Server on Linux 踩坑指南

    微软用 SQL Server 在 2016 年的时候搞了一个大新闻,宣传 Microsoft ❤️ Linux 打得一众软粉措手不及.但是这还是好事情,Linux 上也有好用的 SQL Server ...

  5. 【转】Gitlab CI & Docker & Dockerfile & Docker-compose的博客文章

    gitlab权限设置 GitLab功能系列报道-标签(Labels) Gitlab CI 使用高级技巧 docker-compose是个好东西,越用越香 基于docker-compose的Gitlab ...

  6. 【踩坑经历】一次Asp.NET小网站部署踩坑和解决经历

    2013年给1个大学的小客户部署过一个小型的Asp.NET网站,非常小,用的sqlite数据库,今年人家说要换台服务器,要重新部署一下,好吧,虽然早就过了服务时间,但无奈谁叫人家是客户了,二话不说,上 ...

  7. Gitlab CI 自动部署 asp.net core web api 到Docker容器

    为什么要写这个? 在一个系统长大的过程中会经历不断重构升级来满足商业的需求,而一个严谨的商业系统需要高效.稳定.可扩展,有时候还不得不考虑成本的问题.我希望能找到比较完整的开源解决方案来解决持续集成. ...

  8. Ubuntu & GitLab CI & Docker & ASP.NET Core 2.0 自动化发布和部署(1)

    相关博文: Ubuntu 简单安装和配置 GitLab Ubuntu 简单安装 Docker Ubuntu Docker 简单安装 GitLab Ubuntu Docker 安装和配置 GitLab ...

  9. Ubuntu & GitLab CI & Docker & ASP.NET Core 2.0 自动化发布和部署(2)

    上一篇:Ubuntu & GitLab CI & Docker & ASP.NET Core 2.0 自动化发布和部署(1) 服务器版本 Ubuntu 16.04 LTS. 本 ...

随机推荐

  1. android weight

  2. framebuffer 知识点

    设备文件是在/dev/目录下设备文件有主设备号,次设备号.当操作设备文件, 系统会根据设备文件的设备号找到相应的设备驱动(驱动在内核注册时已指定使用的设备号),并调用相应的功能.  open ---& ...

  3. 关于TensorFlow2的tf.function()和AutoGraph的一些问题解决

    在使用TensorFlow的AutoGraph的时候出现了一些问题,特此记录 AutoGraph did not convert this function. Try decorating it di ...

  4. 华为路由器AR1220E-S通过web页面不能登录

    问题原因:由于在WEB页面配置了“远程信任主机”,但是信任主机和路由器不在一个网段,导致所有IP都不能通过WEB页面管理路由器 解决方案:通过console口直接连接路由器,删除信任主机,此次咨询了华 ...

  5. 新年在家学java之基础篇-参数&修饰符&构造器

    可变参数 不知道可能给方法传递多少个参数时使用这个方法 public void printInfo (String[] args) --可以定义一个数组,在调用这个方法适合赋值给一个数组 public ...

  6. 37)PHP,获取数据库值并在html中显示(晋级2)

    下面的是上一个的改进版,我知道为啥我的那个有问题了,因为我的__construct()这个函数的里面的那个变量名字搞错了,哎,这是经常犯得毛病,傻了吧唧,气死我了. 之前的那个变量的代码样子: cla ...

  7. Linux quota磁盘配额

    quota:磁盘配额 限制某一群组所能使用的最大磁盘配额 限制某一用户的最大磁盘配额 使用限制: 仅能针对整个filesystem 核心必须支持quota quota的记录文件 只对一般身份使用者有效 ...

  8. python后端面试第八部分:制作简历和如何面试--长期维护

    ###############     就业指导    ################ 这里面有套路,你懂了这个套路,你会找到更好的工作,你会更快的找到工作, ,如何制作简历,五颗星 ,如何投递简历 ...

  9. cs231n spring 2017 lecture9 CNN Architectures

    参考<deeplearning.ai 卷积神经网络 Week 2 听课笔记>. 1. AlexNet(Krizhevsky et al. 2012),8层网络. 学会计算每一层的输出的sh ...

  10. Python-scapy学习

    scapy-arpspoof from scapy.all import Ether,ARP,sendp,getmacbyip Ether:用来构建以太网数据包 ARP:构建ARP数据包的类 send ...