1. 前言

随着互联网软件行业快速发展,为了抢占市场先机,企业不得不持续提高软件的交付效率。特别是现在国内越来越多企业已经在逐步引入DevOps研发模式的变迁,在这些背景催促之下,对于企业研发团队所需要具备的持续集成和持续交付(简称CI/CD)能力变得越来越不可或缺。

相信现在不管是开发人员、测试人员或者是运维人员,在求职招聘时,基本上如果是面试的是中高级以上的职位,大多都要求要具备相关CI/CD的项目建设或参与搭建经验。

为了帮助到更多技术读者,从本周起,将以《持续集成实践系列》为主题,分享几篇搭建CI持续集成实践的技术干货。

关于持续集成和持续交付(CI/CD)概念的介绍,之前的文章:《DevOps研发模式下CI/CD实践详解指南》 中有过较详细的介绍,如果还不清楚什么是CI/CD的读者,可以在阅读本文前先,参考一下这篇文章。

2. CI系列大纲

市面上关于CI/CD的建设如果仅从工具、框架层面来讲,方案有挺多,如TeamCityGitLab CIBambooCircle CITravis CIJenkins公司自研(在研发建设CI/CD能力时,除了CI/CD工具、框架链的建设外,还包括研发协同文化的建设等, 文化层面的这个不在本系列的讨论范围内)。

而在众多的持续集成CI建设工具体系中,Jenkins基本上可以说是独占鳌头,也是大多数公司最常用、最首选的工具之一,占据了将近70%以上的市场。

而随着Jenkins本身的不断发展,当前Jenkins已演变发展到了2.x系列,在Jenkins 2.x系列中,其中最核心的特性是引入了流水线机制,并提出了流水线即代码(pipeline as code)的理念

因此本系列也将以Jenkins 2.x作为《持续集成实践系列》的载体,为大家介绍在结合Jenkins 2.x搭建持续集成CI能力过程中常见的一些知识要点和实现过程。

系列大纲分为(初步拟订):

  • Jenkins 2.x 搭建CI需要掌握的硬核要点(一)
  • Jenkins 2.x 搭建CI流水线执行流程(二)
  • Jenkins 2.x 搭建CI流水线实现案例(三)
  • Jenkins 2.x 搭建CI流水线通知机制(四)
  • Jenkins 2.x 搭建CI扩展流水线:自定义共享库(五)

PS: 当然Jenkins 2.x & CI流水线的知识要点远不止如此。

3. 先介绍一下Jenkins 2.x

Jenkins 2本身的概念比较宽泛。在特定的上下文环境中,它用来泛指支持流水线即代码及其它类似Jenkinsfile等新特性的新版Jenkins。

Jenkins 1.X版本主要通过插件的方式来实现,确切地讲,Jenkins 2也是通过对已有插件的重点升级和新插件的引入来获取新功能。

相比之前,用户只能通过WEB界面进行配置的方式来定义Jenkins任务,Jenkins 2则通过使用Jenkins DSL和Groovy语言编写程序,用户可以定义流水线并执行各种任务。

这里提到的DSL代表领域特定语言(Domain-Specific Language),可以理解为一种适用于Jenkins的编程语言。DSL基于Grovvy实现,并通过概念和结构封装了Jenkins的特定功能。

Jenkins 2推荐使用名为Jenkinsfile的文件保存任务配置和流水线信息,不同的项目和分支都会有自己的Jenkinsfile,其内容各不相同。你可以将全部代码写在一个Jenkinsfile中,也可以通过共享库的方式调用外部代码。

4. Jenkins 2.x 实现流水线的两种语法

当我们通过Jenkins 2.x实现流水线时,有两种不同的语法样式:脚本式语法(script syntax)和声明式语法(declarative syntax)。

脚本式语法(script syntax)是Jenkins最开始实现流水线即代码的方式,这是一种命令式风格,在以前版本的Jenkins中,流水线即代码大体就是Groovy脚本,其中插件部分针对Jenkins的DSL步骤。这种方式几乎没有结构上的约束,程序流程也基于Groovy语法结构实现。

这种模式现在被称为脚本式流水线。在脚本式流水线中,DSL支持为数众多的任务步骤,但是仍然缺失了部分面向Jenkins任务的核心特性,比如,构建后处理、流水线结构错误检查以及基于不同执行状态发送通知的功能。当然大多数功能都可以通过Groovy编程机制来模拟实现,比如try-catch-finally语法。但是这在面向Jenkins编程的基础上对Groovy语言技能提出了更高的要求。

声明式语法,是Jenkins提供的一种新的选择,声明式风格的流水线代码被编排在清晰的段落中,相对于只关注实现逻辑。

5. 如何选择脚本式语法或声明式语法

那么有哪些因素会影响选择脚本式语法或声明式语法呢?和大多数事情一样,这也不是一个严谨的科学问题。在特定的情况下,对比需求、实现的结构和流程以及构建流水线的人员技能和背景,二者可能各有千秋。

比如,脚本式流水线具有以下优点:

  • 更少的代码段落和弱规范要求。
  • 更强大的程序代码能力。
  • 更像编写代码程序。
  • 传统的流水线即代码模型,用户熟悉并向后兼容性。
  • 更灵活的自定义代码操作。
  • 能够构建更复杂的工作流和流水线。

但同时,脚本式流水线也具有以下缺点:

  • 普遍要求更高的编程水平。
  • 语法检查受限于Groovy语言及环境。
  • 和传统的Jenkins模型有很大差异。
  • 与声明式流水线的实现相比,同一工作流会更复杂。

看一则简单的,脚本式流水线示例:

node("worker_node1"){
stage("Source"){
//从Git仓库中获取代码
git 'git@github.com:zhoujinjian/intelligent-test-platform.git'
}
stage("Compile"){
//运行Gradle进行编译和单元测试
sh "gradle clean comileJava test"
}
}

而声明式流水线优点有:

  • 更结构化,贴近传统的Jenkins Web表单形式。
  • 更强大的声明内容能力,高可读性。
  • 可以能过Blue Ocean图形化界面自动生成。
  • 段落可映射到常见的Jenkins概念,比如通过。
  • 更友好的语法检查和错误识别。
  • 提升流水线间的一致性。

但如此同时,声明式流水线的缺点也很明显:

  • 对迭代逻辑支持较弱(相比程序而已)
  • 对于传统的Jenkins中部分功能缺乏支持。
  • 更严格的结构。
  • 目前对于复杂的流水线和工作流难以胜任。

声明式流水线示例:

pipeline{
agent{
lable "worker_node1"
}
stages{
stage("Source"){
steps{
//从Git仓库中获取代码
git 'git@github.com:zhoujinjian/intelligent-test-platform.git'
}
}
stage("Compile"){
steps{
//运行Gradle进行编译和单元测试
sh "gradle clean comileJava test"
}
}
}
}

简而言之,对于新用户和那些希望流水线具备传统Jenkins一样可读性的用户来说,声明式流水线更容易学习和维护。脚本式流水线更加灵活,允许用户不受结构结束实现更多功能

不过,总的来说,任何一种流水线类型对大多数场景而言同样适用。好了本文作为CI持续集成系列的开篇,先介绍到这里吧。

详细可查看:原文阅读

「持续集成实践系列」Jenkins 2.x 搭建CI需要掌握的硬核要点的更多相关文章

  1. 「持续集成实践系列 」Jenkins 2.x 构建CI自动化流水线常见技巧

    在上一篇文章中,我们介绍了Jenkins 2.x实现流水线的两种语法,以及在实际工作中该如何选择脚本式语法或声明式语法.原文可查阅:「持续集成实践系列」Jenkins 2.x 搭建CI需要掌握的硬核要 ...

  2. fir.im weekly - 「 持续集成 」实践教程合集

    我们常看到许多团队和开发者分享他们的持续集成实践经验,本期 fir.im Weekly 收集了 iOS,Android,PHP ,NodeJS 等项目搭建持续集成的实践,以及一些国内外公司的内部持续集 ...

  3. [独孤九剑]持续集成实践(三)- Jenkins安装与配置(Jenkins+MSBuild+GitHub)

    本系列文章包含: [独孤九剑]持续集成实践(一)- 引子 [独孤九剑]持续集成实践(二)– MSBuild语法入门 [独孤九剑]持续集成实践(三)- Jenkins安装与配置(Jenkins+MSBu ...

  4. 基于 Node.js 的轻量「持续集成」工具 CIZE

    CIZE 是什么? CIZE 是一个「持续集成」工具,希望能让开发人员更快捷的搭建一个完整.可靠.便捷的 CI 服务. 甚至可以像 Gulp 或 Grunt 一样,仅仅通过一个 cizefile.js ...

  5. 基于Jenkins的开发测试全流程持续集成实践

    今年一直在公司实践CI,本文将近半年来的一些实践总结一下,可能不太完善或优美,但的确初步解决了我目前所在项目组的一些痛点.当然这仅是一家之言也不够完整,后续还会深入实践和引入Kubernetes进行容 ...

  6. [独孤九剑]持续集成实践(二)– MSBuild语法入门

    本系列文章包含: [独孤九剑]持续集成实践(一)- 引子 [独孤九剑]持续集成实践(二)– MSBuild语法入门 [独孤九剑]持续集成实践(三)- Jenkins安装与配置(Jenkins+MSBu ...

  7. 什么是云效持续集成?如何关联Jenkins进行持续集成?

    什么是云效持续集成?如何关联Jenkins进行持续集成?云效流水线 Flow是一款企业级.自动化的研发交付流水线, 提供灵活易用的持续集成.持续验证. 持续发布功能,帮助企业高质量.高效率的交付业务. ...

  8. 持续集成之④:GitLab触发jenkins构建项目

    持续集成之④:GitLab触发jenkins构建项目 一:目的为在公司的测试环境当中一旦开发向gitlab仓库提交成功代码,gitlab通知jenkins进行构建项目.代码质量测试然后部署至测试环境, ...

  9. Jenkins持续集成(下)-Jenkins部署Asp.Net网站自动发布

    环境:Windows 2008 R2.Jenkins2.235.1.Visual Studio 2017: 概要 前面写过一篇文章,<自动发布-asp.net自动发布.IIS站点自动发布(集成S ...

随机推荐

  1. tomcat8调优

    a. tomcat的运行原理: 1. Tomcat是运行在JVM中的一个进程.它定义为[中间件],顾名思义,是一个在Java项目与JVM之间的中间容器. 2. Web项目的本质,是一大堆的资源文件和方 ...

  2. Python基础01 集合

    初始化 # python3 # coding = utf-8 mylist = [] for item in range(10): mylist.append(item * 10 + 3) myset ...

  3. spring mvc实现转发和重定向

    转发:服务器端请求的跳转 同一个请求之内 重定向:客户端请求的跳转 两次请求 转发和重定向的区别: 1,转发地址栏不会发生变化,重定向地址栏会发生变化. 2,转发请求的参数不会丢失 重定向参数会丢失. ...

  4. 实时(RTC)时钟,系统时钟和CPU时钟

    最近在学stm32的时候看到RTC时钟和系统时钟,不知道区别在哪里,于是上网查了一下. 实时时钟:RTC时钟,用于提供年.月.日.时.分.秒和星期等的实时时间信息,由后备电池供电,当你晚上关闭系统和早 ...

  5. NEON中的L可以避免溢出

    在做加法时,比如两个255x255的数值相加,那么正确结果将是130050,对一个最大值为65565的unsigned short是会溢出的,但是如果使用L命令时,则不会产生溢出.这说明L命令,不是先 ...

  6. Programmatically add an application to Windows Firewall

    Programmatically add an application to Windows Firewall 回答1   Not sure if this is the best way, but ...

  7. properties文件导出

    功能要求根据数据库记录的key-value-remark 数据,导出保存properties文件 1. pro.load()  pro.list() 处理不能解决备注.排序问题 2. 最后考虑下什么是 ...

  8. es6中 var 和 let的区别

    区别1:var没有块级作用域,只有 函数级作用域 和 全局作用域:let有块级作用域 function fn() { { var a = 10; } console.log(a) //输出10 } f ...

  9. python语法学习第五天--函数(2)

    命名空间: 命名空间(Namespace)是从名称到对象的映射,大部分的命名空间都是通过 Python 字典来实现的. 命名空间提供了在项目中避免名字冲突的一种方法.各个命名空间是独立的,没有任何关系 ...

  10. [hdu5375 Gray code]DP

    题意:给一个二进制码,其中有一些位上为'?',对每个问号确定是'0'还是'1',最后以它对应的格雷码来取数,第i位为1则取第i个数,求取得的数的和的最大值. 思路:二进制码B转换成格雷码G的方法是,G ...