七天学会SALTSTACK自动化运维 (2)
七天学会SALTSTACK自动化运维 (2)
- 导读
- Grains
- Pillar
- 总结
- 参考链接
导读
上一篇主要介绍了安装和基本的使用方法,但是我认为如果理解了相关概念的话,使用会更加顺手,因为毕竟每一个组件都是有理由这么做的,并不是乱做的,所以一定要理解这些概念是什么意思,为什么要这样做,然后必要的时候再去debug代码。 这里主要介绍Grains和Pillar 这2个概念.
接下来会分别介绍Saltstack中的核心概念,核心概念理解之后,应用起来才会得手,对于trouble shooting也是有很大的帮助.
Grains
Saltstack通过Grains来展示数据, Grans其实就是存储于minion上的一组静态数据,它在minion启动的时候就已经被读取并且存储了,不要被它的名字所误导,就是一组存储与minion上的数据而已,可以由SLS配置文件来配置来组织自己想要的数据,然后通过在master上通过简单的命令来获取,大部分时候可以用于minion的监控。grains的数据好比服务器的硬盘大小,cpu频率等各种参数.
Grans 是大小写不敏感的, FOO, foo 会得到相同的返回结果.
获取grains的值是非常简单的
salt -G 'A:C' test.echo 'how are you'
如上的命令会去匹配符合具有 'A:B' 的minion,然后在该服务器上执行 test.echo命令, 之前笔者都是使用pcre去匹配minion的id去选定主机的,现在可以使用grains去匹配了,而且grains的匹配也有多种方式,搭配灵活,又比方说如下的命令
salt -G 'A:B:C' test.echo 'how are you again'
这条命令就是用来匹配具有 grains A并且A下有一个字典,字典的内容是 B:C 的minion, 我的配置文件是这样写的
grains:
A:
B: C
Grains本身应用起来非常简单,如果想要获取全部的grains信息可以使用下面的命令
salt -E mypc grains.ls
salt -E mypc grains.items
这2条命令会获取一个grains的字典,包含匹配minion的所有grains信息.
Grains的配置
Grains的配置途径有两种,可以配置在minion的配置文件中,也可以配置在minion服务器上的/etc/salt/grains中,配置方法大同小异,分别介绍之前,先要说明一件事,在官方的Grains指南当中,大部分的案例都是通过Grains去适配minion的,其实也就是起的一个选择器的作用,当然你也可以随意使用grains去做其他的功能,Grains通常用于minion适配非常方便,因为我总不能把mysql版本,apache版本,nginx版本,redis版本全都写进minion的id里去吧,这是笔者对grains的理解,当然你也应该有自己的理解,毕竟人各不同.
#!/usr/bin/env python
def my_grains():
grains = dict(user='younger')
return grains
这样定义的脚本会被分发到minion,可以随意写入信息,脚本的位置应该是在一个叫做 _grains 的文件夹中,该文件夹位置与 master配置文件中的 file_roots 中所配置的路径相同, 脚本写好之后,经过
sudo salt -E mypc state.highstate
这条命令之后才可以通过 grains.get 获取, 按照文档中说法, 必须每次都执行在minion启动的时候都执行这条命令,文档中有一个补救方法,文中描述了一个先有鸡还是先有蛋的ISSUE(# TODO),有待深入研究,通过文中的reactor,便可以解决在启动minion的时候顺便同步grains的问题。
最后关于grains还有一个优先级别的问题,由于有多种方式定义grains,而系统本身又带有自己的grains,所以就要小心在自定义grains的时候,覆盖系统自带的grain,除非你是故意这么做的。
1 Core grains.
2 Custom grain modules in _grains directory, synced to minions.
3 Custom grains in /etc/salt/grains.
4 Custom grains in /etc/salt/minion.
上面的列表中,下面的条目会覆盖上面的条目,目录 _grains中的grains会覆盖系统自带的grians, /etc/salt/grains中的grain会覆盖前2个级别的grains,/etc/salt/minion 在有定义的情况下,会成为最终的grains,就是会覆盖其余的所有grains。 核心grains在这里.
Pillar
Pillar与Grains经常被混淆,这是官方Pillar文档里的说法,当然,就在昨天的之后我基本还不知道Pillar与Grains的区别,不过现在知道了,要分清楚2者是很简单的
1 前者master定义传给minion,后者minion自己定义
2 前者是存储在master上的,后者基本上全部存储于minion上
3 前者可以动态定义,后者是静态常量
从文档来看,Pillar基本上是作用于动态配置管理上的,基本的应用场景比如,a, b, 2台vps,一个是dev,是一个prod, 这2个服务器的grains中都有一个叫做ENV的值,值分别是 dev和prod, 在请求django的配置文件的时候,需要做highstate,这个时候把watch的config文件名写在pillar里, pillar里的逻辑是根据不同的grains值返回不同的结果,这里是文件名,这样不同的minion,在highstate的时候,就会获取不同的配置文件, 这个是很简单的场景, 当然你也可以直接在sls里配置。 更通用的情况是传输密码之类的敏感数据,这样不仅好管理,而且也更安全, 不用每次登陆ssh然后改完之后再改另一个,突触一个批量修改。具体请参见文档中的4个应用场景,不过一定要记住,pillar是动态的数据,可以写到变量里,然后根据不同的情况用不通的值,基本上就是这么个用法。
现在来看一个简单的例子
pillar的配置路径要在master的配置文件里设置, pillar_roots, 这里我使用默认的路径,也就是 /etc/pillar, 没有的话就直接建立相应文件,我的配置里一共有2个文件,分别如下
top.sls
base:
'*':
- config
-------------------------------------------------------
config.sls
{% if grains['env'] == 'development'%}
config: dev
{% else %}
config: prod
{% endif %}
这个是一目了然的例子,模板是jinja2的,模板的使用可以参考这里.
当我执行这条命令的时候
sudo salt -E mypc pillar.get config
返回
mypc:
prod
这时候我的env是 development
-------------------------------------
返回
mypc:
dev
这时候我的env配置是其他值
这里只给出在我的理解之上最简单的用法,实际环境可以按需求慢慢扩展,慢慢学习。
还有一个复杂一点的例子,这个例子用来配置不同apache配置文件,原理就是 读grains,然后pillar动态生成变量, /etc/salt/web.sls中使用jinja2渲染变量到模板,然后调用 sudo salt -E mypc state.highstate 命令同步文件,根据config grains来复制dev或者prod的配置文件.
/etc/pillar/top.sls
base:
'*':
- config
------------------------
/etc/pillar/config.sls
{% if grains['env'] == 'development'%}
config: dev
{% else %}
config: prod
{% endif %}
-------------------------
/etc/salt/web.sls
apache_config:
file.managed:
- name : /etc/{{ pillar.get('config', 'dev') }}.config
- source: salt://{{ pillar.get('config', 'dev') }}.config
gedit:
pkg.installed:
- watch:
- file: apache_config
/etc/salt/prod.config:
password: 123
/etc/salt/dev.config:
password: 321
比较简单的例子,功能比上一个复杂不少,具体的可以参见官方文档.
总结
笔者主要是在研究了好几篇文档之后才有的这篇心得,主要是理解概念上,理解之后就可以顺着软件的思路来写配置了,saltstack可以简单使用,也可以做非常复杂的分布式配置,单机可以配合花生壳使用,主要看应用场景是什么。
参考链接
http://docs.saltstack.com/en/latest/topics/tutorials/starting_states.html(pillar文档)
http://docs.saltstack.com/en/latest/topics/targeting/grains.html (grains文档)
http://docs.saltstack.com/en/latest/topics/reactor/index.html#minion-start-reactorss (鸡蛋问题)
http://docs.saltstack.com/en/latest/ref/renderers/all/salt.renderers.jinja.html (jinaj2模板)
http://www.shencan.net/index.php/2013/05/24/saltstack-二-grains和pillar/ (一个友人的grains和pillar教程)
七天学会SALTSTACK自动化运维 (2)的更多相关文章
- 七天学会SALTSTACK自动化运维 (3)
七天学会SALTSTACK自动化运维 (3) 导读 SLS TOP.SLS MINION选择器 SLS文件的编译 总结 参考链接 导读 SLS SLS (aka SaLt State file) 是 ...
- saltstack自动化运维系列11基于etcd的saltstack的自动化扩容
saltstack自动化运维系列11基于etcd的saltstack的自动化扩容 自动化运维-基于etcd加saltstack的自动化扩容# tar -xf etcd-v2.2.1-linux-amd ...
- saltstack自动化运维系列⑩SaltStack二次开发初探
saltstack自动化运维系列⑩SaltStack二次开发初探 1.当salt运行在公网或者网络环境较差的条件下,需要配置timeout时间vim /etc/salt/master timeout: ...
- saltstack自动化运维系列⑧SaltStack实践配置管理安装nginx-1.10.3
saltstack自动化运维系列⑧SaltStack实践配置管理安装nginx-1.10.3 安装nginx-1.10.3.tar.gz # mkdir -p /srv/salt/prod/pkg / ...
- saltstack自动化运维系列⑦SaltStack实践配置管理安装zabbix
saltstack自动化运维系列⑥SaltStack实践配置管理安装zabbix 1.添加管理zabbix的sls文件# vim /srv/salt/base/init/zabbix_agent.sl ...
- saltstack自动化运维系列⑥SaltStack实践安装配置HAproxy的Keepalived
saltstack自动化运维系列⑥SaltStack实践安装配置HAproxy的Keepalived 安装配置Keepalived 1.编写功能模块 #创建keepalived目录# mkdir -p ...
- saltstack自动化运维系列⑥SaltStack实践安装配置HAproxy
saltstack自动化运维系列⑥SaltStack实践安装配置HAproxy 下载haproxy1.6.2.tar.gz下载地址:http://www.haproxy.org/download/1. ...
- saltstack自动化运维快速入门
saltstack自动化运维快速入门 关于saltstack 这个软件是干啥的 我这里就不介绍了 只是简单的说下是干啥的 网上的说法是 它是func的强化版本+ puppet的精简版 关于puppet ...
- saltstack 自动化运维
salt介绍 saltstack是由thomas Hatch于2011年创建的一个开源项目,设计初衷是为了实现一个快速的远程执行系统. salt强大吗 系统管理员日常会进行大量的重复性操作,例如安装软 ...
随机推荐
- postgresql数据库的数据导出
一.pg_dump的用法:数据库的导入导出是最常用的功能之一,每种数据库都提供有这方面的工具,例如Oracle的exp/imp,Informix的dbexp/dbimp,MySQL的mysqldump ...
- kafka配额控制
转载请注明地址http://www.cnblogs.com/dongxiao-yang/p/5217754.html Starting in 0.9, the Kafka cluster has th ...
- Ehcache简单说明及使用
EhCache 是一个纯Java的进程内缓存框架,具有快速.精干等特点,是Hibernate中默认的CacheProvider. Ehcache是一种广泛使用的开源Java分布式缓存.主要面向通用缓存 ...
- HTTPClient实现java自动登录人人网
参考网址: https://passport.csdn.net/account/login http://www.iteye.com/topic/638206 httpClient http://b ...
- 超人学院Hadoop大数据资源分享
超人学院Hadoop大数据资源分享 http://bbs.superwu.cn/forum.php?mod=viewthread&tid=770&extra=page%3D1 很多其它 ...
- Oracle、MySql、Sql Server比对
1. 价格 MySql:廉价(部分免费):当前,MySQL採用双重授权(DualLicensed),他们是GPL和MySQLAB制定的商业许可协议.假设你在一个遵循GPL的自由(开源)项目中使用 ...
- hdoj 3157 Crazy Circuits 【有下界最小流】
题目:hdoj 3157 Crazy Circuits 题意:如今要制造一个电路板.电路板上有 n 个电子元件,各个元件之间有单向的电流流向.然后有一个 + .电流进入, -- 电流汇入,然后推断能不 ...
- ExtJs4学习(四):Extjs 中id与itemId的差别
为了方便表示或是指定一个组件的名称,我们一般会使用id或者itemId进行标识命名. (推荐尽量使用itemId.这样能够降低页面唯一标识而产生的冲突) id: id是作为整个页面的Comp ...
- OOP 概述
面向对象程序设计基于四个基本概念:数据抽象.封装.继承和动态绑定. 类的基本思想是数据抽象和封装. 1 数据抽象 数据抽象是一种依赖于接口和实现分离的编程技术.类的接口包括用户所能执行的操作:类的实现 ...
- IOS的工程目录结构和生命周期
IOS的工程目录结构和生命周期 ·simple table文件夹:工程相关源代码和配置文件 BIDAppDelegate : 委托的声明和实现 BIDViewController: 视图控 ...