需求说明

根据领导要求,要把python 项目移到Gitlab 进行管理,并利用Gitlab CI/CD 进行自动化测试,打包,部署。(听起来很简单吧)

比较头大,完全没有经验,python 也是刚上手两个月,什么Gitlab, Gitlab runner 完全没听说过,powershell 也不常用,可以说是零起步。疯狂的查询资料,国内网站,国外网站,七八十篇博客文档,总算是出了点成果。

坏境:(关于环境的安装部署,大家另行查询资料吧)

1.Linux 服务器: 安装Gitlab https://about.gitlab.com/

2.Window 服务器:安装Gitlab runner(https://docs.gitlab.com/runner/), powershell(系统自带), pyinstaller(https://www.pyinstaller.org/打包python使用),Git(https://git-scm.com/与Git lab交互拉取,推送代码).

Gitlab runner for windows 10

我们这里重点说一下Gitlab runner 的安装,注册,使用.

install

1. 把下载好的exe 文件放到路径 C:\GitLab-Runner 文件夹下,命名为gitlab-runner.exe

2. 以管理员身份运行CMD

输入以下命令

gitlab-runner.exe install

REGISTER

输入以下命令 进行注册

gitlab-runner.exe register

输入GitLab instance URL:(gitlab 部署的服务器网址)

在gitlab ->Settings->CI/CI:   找到Runner 展开后可以找到 URL 和 token。

输入URL, Token, description for the runner, tags for the runner

tags 很重要,因为当你在脚本里使用他的时候,可以根据tags 指定要使用的runner. 因为每个runner可以有不同的系统环境,你要用的可能是特殊的。

最后选择excutor:我这里选的是shell.

可选项如下:Enter an executor: virtualbox, docker-ssh+machine, kubernetes, custom, docker-windows, docker-ssh, shell, docker, parallels, ssh, docker+machine

注册成功!这时候服务gitlab runner 应该已经启动了

可以去gitlab 服务器查看结果。

代码管理

Gitlab 新建一个test项目, 用于我们本次的自动化测试。

在自己的PC 上使用Git bash 拉取刚刚建的test项目(网址写你自己的, git clone 命令)

git clone https://code.com/GAS_GC_IT/test.git

项目结构如下:

重点关注一下 .gitlab-ci.yml、build_binaries.ps1、test.py 这三个文件

.gitlab-ci.yml:这个文件是CI/CD 执行时的配置文件,网上很多教程,可以看看如何配置。https://docs.gitlab.com/ee/ci/quick_start/

build_binaries.ps1:这个文件是powershell 要执行的脚本文件

test.py:是我们的python 脚本

这里我要进行的操作是:客户端PC push 代码到gitlab 的时候,利用gitrunner 执行job 对python 脚本进行打包

.gitlab-ci.yml 内容如下:

build:
tags:
- wz94
script:
- "powershell.exe -File C:\\GitLab-Runner\\builds\\7zyx1xwC\\0\\GAS_GC_IT\\test\\build_binaries.ps1"

build_binaries.ps1 内容如下, 利用pyinstaller 打包 test.py脚本

pyinstaller.exe -F "test.py"

test.py 内容如下

if __name__ == "__main__":
print('TEST......')

划重点

一号坑

在安装gitlab-runner.exe的时候会生产一个配置文件:config.toml(for window. 其他系统可能名字不同)

看一下它的内容(它的内容是可以修改的!!!!)

shell = 'pwsh'要改成shell = 'powershell',否则在gitlab 运行的时候,会报错stackoverflow

exec: “pwsh”: executable file not found in %PATH%

另外有关配置还可以查看文档https://docs.gitlab.com/runner/configuration/advanced-configuration.html

concurrent = 1
check_interval = 0 [session_server]
session_timeout = 1800 [[runners]]
name = "wz94"
url = "https://code.com/"
token = "id7_cuyyyA-xWzNhtdsB"
executor = "shell"
***shell = "pwsh"***
  shell = "powershell"

[runners.custom_build_dir]
  [runners.cache]
[runners.cache.s3]
[runners.cache.gcs]
[runners.cache.azure]

二号坑

这个路径要搞清楚,你可能不知道它应该是哪个,这是因为你还没有理解gitlab runner的运行原理。gitlab runner 和gitlab 在不同的服务器,他们之间是怎么通信的?

答案是SSH(一种网络协议),SSH用于计算机之间的加密登录,还记得我们注册gitlab runner 时输入的 URL 和token么。

实际上在我们push 代码到gitlab 后,会触发CI/CD 的pipline job ,这时候,gitlab runner 会从gitlab 拉取(clone )代码到 gitlab runner 服务器,没错,我们已经在gitlab runner 服务器上配置好所需要的系统环境,我们可以在这台服务器上对代码进行打包(利用pyinstaller),那它把代码拉到哪里了?请看:

Reinitialized existing Git repository in C:/GitLab-Runner/builds/7zyx1xwC/0/GAS_GC_IT/test/.git/

起码C:/GitLab-Runner 你是知道的,后面的路径是根据项目自动生成的。当然你会问了,能自己设置路径么?答案是肯定的。还记得config.toml么?

[runners.custom_build_dir] 改成自己的路径(未经尝试,可以自己实验)

"powershell.exe -File  C:\\GitLab-Runner\\builds\\7zyx1xwC\\0\\GAS_GC_IT\\test\\build_binaries.ps1"

结果

自己尝试吧兄嘚!祝你成功!

Gitlab + Gitlab runner + Window powershell的更多相关文章

  1. 利用docker compose启动gitlab及runner

    添加docker compose配置文件 新建文件docker-compose.yml,输入如下内容: gitlab: image: 'gitlab/gitlab-ce:latest' contain ...

  2. gitlab gitlab runner

    1.安装gitlab https://about.gitlab.com/installation/#ubuntu 2.安装runner https://docs.gitlab.com/runner/i ...

  3. GitLab CI runner can't connect to tcp://localhost:2375 in kubernetes

    报错的.gitlab-ci.yml配置如下 image: docker:latest services: - docker:dind variables: DOCKER_HOST: tcp://loc ...

  4. K8s 部署 Gitlab CI Runner

    K8s 版本:1.20.6 GitLab CI 最大的作用是管理各个项目的构建状态.因此,运行构建任务这种浪费资源的事情交给一个独立的 Gitlab Runner 来做就会好很多,而且 Gitlab ...

  5. Docker安装GitLab与Runner(网关),常规设置,自动化用到k8s+token

    [转]图文详解k8s自动化持续集成之GitLab CI/CD Windows里面使用Debian命令行工具完成 和Docker网络相关的命令 查看某一个容器的网络 docker inspect 容器I ...

  6. 在 Kubernetes 上安装 Gitlab CI Runner Gitlab CI 基本概念以及 Runner 的安装

    简介 从 Gitlab 8.0 开始,Gitlab CI 就已经集成在 Gitlab 中,我们只要在项目中添加一个.gitlab-ci.yml文件,然后添加一个Runner,即可进行持续集成.在介绍 ...

  7. Gitlab注册Runner

    1.先启动Gitlab,然后登陆进去,找到项目设置界面 2.部署Runner 这里采用docker安装的方式,也可以采用其他方式安装 # 创建docker镜像使用的数据卷 {20-07-16 16:2 ...

  8. 3.在 Kubernetes 上安装 Gitlab CI Runner

    结合文章:1. 在 Kubernetes 上安装 Gitlab ,地址:https://www.cnblogs.com/sanduzxcvbnm/p/13852854.html 总结: 结合开头的文章 ...

  9. Docker搭建自己的Gitlab CI Runner

    转载自:https://cloud.tencent.com/developer/article/1010595 1.Gitlab CI介绍 CI:持续集成,我们通常使用CI来做一些自动化工作,比如程序 ...

随机推荐

  1. 计算机编码规则之:Base64编码

    目录 简介 Base64和它的编码原理 Base64的变体 Base64的编码细节 总结 简介 我们知道计算机中的文件可以分为两种,一种是人肉眼可读的文本类文件,一种是肉眼不可读的二进制文件.一般来说 ...

  2. 分布式应用运行时 Dapr 1.7 发布

    Dapr 是一个开源.可移植的.事件驱动的运行时,可以帮助开发人员构建在云和边缘上运行的弹性的.微服务的.无状态和有状态应用程序,并且关注于业务逻辑而不用考虑分布式相关的问题. 分布式相关的问题交给D ...

  3. SerialPort-4.0.+ 使用说明(Kotlin版本)

    SerialPort-4.0.+ 项目官网 Java版本使用说明 介绍 SerialPort 是一个开源的对 Android 蓝牙串口通信的轻量封装库,轻松解决了构建自己的串口调试APP的复杂程度,让 ...

  4. Python图像处理丨OpenCV+Numpy库读取与修改像素

    摘要:本篇文章主要讲解 OpenCV+Numpy 图像处理基础知识,包括读取像素和修改像素. 本文分享自华为云社区<[Python图像处理] 二.OpenCV+Numpy库读取与修改像素> ...

  5. XCTF练习题---MISC---功夫再高也怕菜刀

    XCTF练习题---MISC---功夫再高也怕菜刀 flag:flag{3OpWdJ-JP6FzK-koCMAK-VkfWBq-75Un2z} 解题步骤: 1.观察题目,下载附件 2.下载到电脑后发现 ...

  6. 漏洞复现:MS12-020 远程桌面协议RDP远程代码执行漏洞

    漏洞复现:MS12-020 远程桌面协议RDP远程代码执行漏洞 攻击机:Kali2019 靶机:Win7 64位 解题步骤: 1.打开Kali2019和Win7 64位 ,确定IP地址是多少 2.确定 ...

  7. 痞子衡嵌入式:浅谈i.MXRT1xxx系列MCU时钟相关功能引脚的作用

    大家好,我是痞子衡,是正经搞技术的痞子.今天痞子衡给大家介绍的是i.MXRT1xxx系列MCU时钟相关功能引脚作用. 如果我们从一颗 MCU 芯片的引脚分类来看芯片功能,大概可以分为三大类:电源.时钟 ...

  8. CesiumJS 2022^ 原理[4] - 最复杂的地球皮肤 影像与地形的渲染与下载过程

    目录 API 回顾 1. 对象层级关系 1.1. Scene 中特殊的物体 - Globe 1.2. 地球 Globe 与椭球 Ellipsoid 1.3. 瓦片四叉树 - QuadtreePrimi ...

  9. 基于surging网络组件多协议适配的平台化发展

    前言                Surging 发展已经有快6年的时间,经过这些年的发展,功能框架也趋于成熟,但是针对于商业化需求还需要不断的打磨,前段时间客户找到我想升级成平台化,针对他的需求我 ...

  10. Fast-Rcnn学习笔记

    Fast-Rcnn学习笔记 paper code Fast-RCNN总览 step1:图片先放进卷积层 step2:再卷积层的特征图谱上回映射出对应的感兴趣区域 step3:集过一层ROI Pooli ...