利用github的webhook进行自动部署
利用github的webhook进行自动部署
github提供了webhook功能,大概意思就是,当你提交了代码,git检测到你进行了push,可以调起你一个你知道的url。
这个功能有什么用了?比如个人博客写文章的时候,提交了github应该马上把服务器的版本也更新一下,这时候webhook就可以很方便的处理这件事情了。
这篇文章主要讲解整套流程如何设置
设置github拉取权限
设置github的访问权限有两种方式,一种是直接将github的账号密码配置配置到服务器的全局配置文件中,一种是通过sshkey的方式
配置账号密码
在服务器的根目录
touch .git-credentials
vi .git-credentials
# 输入
http(s)://{你的用户名}:{你的密码}@你的服务器地址
终端输入
git config --global credential.helper store
查看~/.gitconfig会多出一行
vi .gitconfig
[credential]
helper = store
如果是邮箱账号的话,@要转义为%40,这里不转义也没关系,在你git第一次拉取的时候,会在输入一次,这次输入的就会被写入到~/.git-credentials
sshkey方式
- 先查看是否存在sshkey
cd ~/.ssh
ls
如果存在,你可以直接用,或者在创建一个都可以。如果创建一个新的,那么在~/.gitconfig文件中,多配置一句就可以了。
- 创建
sshkey
ssh-keygen -t rsa -C "your_email@example.com"
回车后会要求输入密码,根据安全需要输入,也可以不输入。如果输入了密码,在使用此秘钥的时候会要求验证密码。
代码参数含义:
-t指定密钥类型,默认是rsa,可以省略。-C设置注释文字,比如邮箱。-f指定密钥文件存储文件名。可省略,运行上面的命令会提示你输入一个文件名,不输入则默认为id
最后会生成id_rsa和id_rsa.pub两个文件,一个是私钥,一个是公钥,公钥用于配置到github中。
如果指定了文件名,那么需要在~/.ssh路径下创建一个config文件,并输入一下内容
Host github.com www.github.com
IdentityFile ~/.ssh/othername
设置公钥信息的内容
将id_rsa.pub中的内容,全部复制,然后进行入到github中进行设置,在settings、SSH and GPG keys中进行配置ssh key即可验证sshkey
ssh -T git@github.com
会有一段警告,输入yes即可,如果在生成rsa的秘钥时,输入了密码,此时会被要求验证密码.
最后你会看到下面的这段话,即表示成功。如果是access denied则表示拒绝访问。
Hi username! You've successfully authenticated, but GitHub does not provide shell access.
现在可以取拉取一下代码,试试,就不用验证账号密码了。
但是如果有可能还是会出现验证账号密码的可能。此时你要确定你用的地址是不是ssh的地址,如果是https的那是没法走sshkey的了。对于已经用git clone https的方式拉取到本地的项目,在进行pull的时候,还是会被提示,这时候需要修改项目下面的git配置即可。
修改.git/config
url = https://github.com/Name/project.git
一行改为
url = git@github.com:Name/project.git
即可。
建议设置一下git的账号和邮箱
git config --global user.name "name"
git config --global user.email "email@mail.com"
编写webhook服务
在尝试使用开源项目adnanh/webhook运行webhook服务失败后,觉得尝试自己编写,用java这种太鲁莽了点,一个监听服务而已,没必要上java这种东西,像python\node\go等都是很合适的。
这里我是采用的node来编写,比较简单方便,刚开始考虑用express来做服务监听,也基本测试成功,但解析github发过来的请求时,发现解析Payload这个挺麻烦。后面又发现一个开源的好东西https://github.com/rvagg/github-webhook-handler,这个可以帮我们来解析github推给我们的数据,并且可以自动分包处理,比如push啊issues啊等等。
按照rvagg/github-webhook-handler提供的示例我简单的改了下;如果是创建多个handler作者在issues中也给出了说明。我在这个示例上进行了简单的封装。
var handlerOption = [
{
path: '/hooks/publish_tennetcn',
secret: 'yoursecret',
shell: 'sh /home/publish/tennetcn/publish.sh'
}
]
const currOption = handlerOption.filter(item => item.path === url) || []
if(currOption.length <= 0){
console.log('current url is not matchs')
}else{
exec(currOption[0].shell, function(err,stdout,stderr){
if(!err) {
console.log(stdout);
}
})
}
这样在你使用的时候,你只用关注handlerOption即可,非常方便。项目已经开源,开源地址https://github.com/chfree/think-webhook觉得可以加个小星星
使用项目非常简单
git pull
npm install
sh run.sh &
如有需要修改run.sh中的log路径和index.js中的端口和handleOption
编写脚本
编写脚本,比较简单,就是简单的shell。主要进行以下操作:
- 设定shell及工作目录
- 开始拉取代码
- 编译及生成,在进行打包的时候需要注意使用
npm install --unsafe-perm,不然会报node-sass权限问题 - 压缩备份现有项目,养成备份好习惯
- 复制打包路径到项目发布路径
完整shell如下:
#!/bin/bash
PRJ_WORK_DIR=/home/proj_source/think-vp-tennetcn
cd $PRJ_WORK_DIR
echo 'start think-vp-tennetcn update and publish'
echo 'git pull ......'
git pull
echo 'npm install ......'
#npm install --production --unsafe-perm=true --allow-root
npm install --unsafe-perm
echo 'npm run docs:build'
npm run docs:build
echo 'dist success'
echo 'copy starter'
BAK_DIR=/home/project/tennetcn/clientbak
PUB_DIR=/home/project/tennetcn/client
DATE=$(date +%Y-%m-%d-%H-%M-%S)
echo 'bak start '
zip -r $BAK_DIR/backup-tennetcn-$DATE.zip $PUB_DIR/*
rm -rf $PUB_DIR/*
echo 'bak end delete end'
cp -r $PRJ_WORK_DIR/docs/.vuepress/dist/* $PUB_DIR
echo 'cp end'
echo 'publish success'
利用github的webhook进行自动部署的更多相关文章
- 服务器(三):利用github的webhooks实现自动部署
实现自动部署的关键就是利用github的webhooks,我们在github建立一个项目之后,在项目主页点击Settings,看到Webhooks点击打开可以添加一个链接,这里的意思是,github可 ...
- centos7 在docker swarm中运行Jenkins,利用gitlab的webhook触发自动部署脚本
1.宿主机中创建目录 mkdir -p /jenkins_home 2.编辑compose文件,文件名jenkins.yml version: '3.4' services: jenkins-upgr ...
- Webhook 实践 —— 自动部署
https://segmentfault.com/a/1190000007892407 安装nodejs 安装nodejs建议直接下载二进制包,把官网上的64位二进制版本下载地址复制下来,执行 wge ...
- 利用 Github 网络钩子实现自动化部署
GitHub 的网络钩子(webhook)功能,可以很方便的实现自动化部署.本文记录了使用 Node.js 的开发部署过程,当项目的 master 分支被推时,将在服务器进行自动部署 添加网路钩子 在 ...
- 使用码云,GitHub进行版本控制,并通过WebHook进行自动部署
我们通常需要在 PUSH 代码到远程仓库时,线上环境会自动进行代码同步,这时候就需要用到WebHook,它会自动回调我们设定的http地址. 通过请求我们自已编写的脚本,来拉取代码,实现与远程仓库代码 ...
- 利用Python和webhook实现自动提交代码
最近在为公司书写项目的api文档,计划利用码云的wiki管理整个项目,公司自有git作为项目内容依托,这样全员都可参与,而我定期向码云推送就可以了. 问题 根据需求遇见了这样一个问题:我每次从git上 ...
- 利用github webhook 结合openresty自动更新静态博客
使用hexo在github pages上弄了一个静态博客,后来觉得访问有点慢,于是放到自己vps上. 对于静态博客的部署非常简单,本来就是html,js,css等静态文件,只要nginx上配置下目录就 ...
- 使用 Github Actions 自动部署 Angular 应用到 Github Pages
前言 最近在学习 Angular,一些基础的语法也学习的差不多了,就在 github 上新建了一个代码仓库,准备用 ng-zorro 搭个后台应用的模板,方便自己以后写些小东西时可以直接使用.前端项目 ...
- gitlab之gitlab-runner自动部署(二)
转载自:https://blog.csdn.net/hxpjava1/article/details/78514999 简介 gitlab-ci全称是gitlab continuous integra ...
随机推荐
- 解决xcode ***is missing from working copy
这是由于SVN置顶文件导致的,cd 至项目根目录 命令行 输入 find . -type d -name .svn | xargs rm -rf
- 【Java】封装、继承、多态
封装 在面向对象程式设计方法中,封装(英语:Encapsulation)是指一种将抽象性函式接口的实现细节部分包装.隐藏起来的方法. 封装可以被认为是一个保护屏障,防止该类的代码和数据被外部类定义的代 ...
- J - Recommendations CodeForces - 1315D
https://blog.csdn.net/w_udixixi/article/details/104479288 大意:n个数,每个数只能向上加,a[i]+1需要的时间是t[i],求使这n个数无重复 ...
- 落谷 P1734 最大约数和
题目描述 选取和不超过S的若干个不同的正整数,使得所有数的约数(不含它本身)之和最大. 输入格式 输入一个正整数S. 输出格式 输出最大的约数之和. 输入输出样例 输入 #1复制 11 输出 #1复制 ...
- python基础-json、pickle模块
json.pickle区别 总结: """ json: 1.不是所有的数据类型否可以序列化,序列化返回结果为字符串 2.不能多次对同一文件序列化 3.json数据可以跨语 ...
- 好用的mitmproxy代理抓包
安装证书 浏览器输入 `mitm.it` 下载证书有时候打不开,可能是起的服务卡死了,回车下命令行,再再网页刷新下载证书就可以了. mitmweb Chrome浏览器代理设置 打开的话,记得保存点一下 ...
- golang 基础 map及工厂函数
Map是一种数据结构,是一个集合,用于存储一系列无序的键值对.它基于键存储的,键就像一个索引一样,这也是Map强大的地方,可以快速快速检索数据,键指向与该键关联的值. 内部实现 Map是基于 散列表 ...
- sk-learn实现L2岭回归,对线性回归正则化
岭回归算法: from sklearn.datasets import load_boston from sklearn.externals import joblib from sklearn.li ...
- JWT验证机制【刘新宇】【Django REST framework中使用JWT】
JWT 在用户注册或登录后,我们想记录用户的登录状态,或者为用户创建身份认证的凭证.我们不再使用Session认证机制,而使用Json Web Token认证机制. 什么是JWT Json web t ...
- 链表数据-PHP的实现
首先,链表数据的结构是: 其次,链表数据的结构特点: 随后,填充链表结构: 链表结构的数据,从链表尾部塞入数据. 最后,删除链表结构: