CMDB项目实战

• 01-CMDB项目介绍
• 02-CMDB开发背景
• 03-CMDB开发目的
• 04-CMDB资产采集方式之agent
• 05-CMDB资产采集方式之ssh
• 06-CMDB资产采集方式之saltstack
• 07-CMDB资产采集方式之puppet
• 08-CMDB资产采集方式比较
• 09-CMDB采集内容梳理
• 10-CMDB资产采集功能之agent
• 11-CMDB资产采集之实现之ssh
• 12-CMDB资产采集功能实现之saltstack（一）
• 13-CMDB资产采集功能实现之saltstack（二）
• 14-CMDB资产采集插件开发（一）
• 15-面向对象继承
• 16-CMDB资产采集插件开发（二）
• 17-CMDB资产采集插件开发（三）
• 18-基于配置文件加载插件
• 19-作业讲解
• 20-CMDB项目采集资产数据（一）
• 21-CMDB项目采集资产数据之唯一标识规定
• 22-CMDB项目采集资产数据（二）
• 23-CMDB项目采集资产数据
• 24-知识拾遗之线程进程池
• 25-CMDB项目采集资产之日志记录
• 26-自定义JSON序列化类型
• 27-本小结作业
• 28-基于requests模块汇报资产数据
• 29-基于requests模块汇报API验证（一）
• 30-基于requests模块汇报API验证（二）
• 31-CMDB项目示例之API验证流程
• 32-CMDB项目之数据表结构（一）
• 33-CMDB项目之数据表结构（二）
• 34-CMDB资产之汇报并持久化（一）
• 35-CMDB资产汇报并持久化（二）
• 36-CMDB之持久化资产流程
• 37-作业
• 38-CMDB项目CRUD组件之配置文件构造
• 39-CMDB项目CURD组件之神奇的单@符号
• 40-CMDB项目CURD组件之神奇的双@符号（一）
• 41-CMDB项目CURD组件之神奇的双@符号（二）
• 42-CMDB项目CURD组件之自定义td属性
• 43-内容预习
• 44-CMDB项目CURD组件之进入编辑模式
• 45-CMDB项目CURD组件之全选取消反选和编辑模式
• 46-CMDB项目CURD组件之内容截图
• 47-CMDB项目CURD组件进入编辑模式详细
• 48-CMDB项目CURD组件属性中应用神奇的单@符号
• 49-CMDB项目CURD组件之退出编辑模式
• 50-CMDB项目CURD组件更新数据
• 51-CMDB项目CURD组件之基于jQuery扩展封装组件
• 52-CMDB项目CURD组件之基本操作
• 53-CMDB项目CURD组件之分页功能
• 54-CMDB项目CURD组件之搜索功能介绍
• 55-CMDB项目介绍

01- CMDB项目介绍

1.1 业务场景开发最难；

1.2 CMDB（配置管理数据库）；

1.3 程序员与产品经理互掐；

1.4 运维开发&自动化开发；

1.5 PHP转Python的岗位场景；

02-CMDB开发背景

2.1 针对运维自动化的项目；

2.2 开发工具给公司某一岗位的使用；

2.3 业务开发；

• 电商；
• 交给运维人员进行发布部署；

2.4 工具开发；

• 公司内部人员使用；
• 减少人工干预，降低成本；
• 统计公司的重资产-路由器、交换机、服务器；
• 运维操作会失误；
• 资产统计会失误；
• 运维开发给普通运维人员开发工具——减少人工干预，降低运维成本；
• 自动化方向-资产管理&操作管理&日志管理&监控管理；

03-CMDB开发目的

3.1 为什么开发CMDB系统？

• 批量采购的服务器需要安装OS；
• 批量安装操作系统——PXE；Kickstart；
• Python、Java、Go、大数据等环境；
• 灰度发布；
• 自动化工具-ssh、saltstack、puppet、Ansible、迅雷种子发布；
• CMDB是运维自动化的基础，有了它，才能构建上层项目；

04-CMDB资产采集方式之agent

4.1 私有云和公有云（AWS、阿里云、腾讯云、华为云）

4.2 CMDB的模块；

• 资产；
• 配置管理；
• 私有云；
• 监控；
• 堡垒机；
• 任务；
• DNS；
• 资源池；
• 流程；

4.3 信息的搜集方式；

• 客户端agent；不安全
• 手动录入基本信息；
• 优点：采集数据快；
• 缺点：软件安装多；

05-CMDB资产采集方式之ssh

5.1 API方式获取；

5.2 优点与缺点：SSH连接非常慢，本质是基于paramiko模块；

06-CMDB资产采集方式之saltstack

6.1 依赖于第三方工具如saltstack进行开发（agent本身存在）；

6.2 saltstack利用了rpc的方式进行数据搜集；基于队列的方式，速度快；

• salt-master；
• salt-slave；
• 优点：快，开发成本低；
• 缺点：依赖于saltstack-slave；

07-CMDB资产采集方式之puppet

7.1 老牌工具-puppet进行远程操作；

7.2 puppet-master和puppet-slave；

7.3 puppet内置的报表功能每30分钟连接一次slave；

• 缺点：得用Ruby语言写；

08-CMDB资产采集方式比较

8.1 使用哪种方式？

• agent；
• ssh；
• saltstack；

8.2 修改配置文件进行场景选择；

8.3 资产监控数据没有必要每分钟采集一次；

09-CMDB采集内容梳理

9.1 数据采集的四种方式；

• agent主动汇报；每天执行脚本+定时任务；
• ssh；数据库压力大；
• saltstack；
• puppet；

9.2 为什么要使用API的方式？

• 给别人提供数据；
• 降低数据库连接池数量；

10-CMDB资产采集功能之agent

10.1 pip3 install requests;

• 采集资产信息；
• 正则处理想要获取的数据；
• 整理资产信息；
• 发送数据；

11-CMDB资产采集之实现之ssh

import paramiko

# 创建SSH对象
ssh = paramiko.SSHClient()
# 允许连接不在know_hosts文件中的主机
ssh.set_missing_host_key_policy(paramiko.AutoAddPolicy())
# 连接服务器
ssh.connect(hostname='c1.salt.com', port=22, username='cuixiaozhao', password='')

# 执行命令
stdin, stdout, stderr = ssh.exec_command('df')
# 获取命令结果
result = stdout.read()

# 关闭连接
ssh.close()

12-CMDB资产采集功能实现之saltstack（一）

• 安装saltstack
• http://docs.saltstack.cn/topics/installation/rhel.html
• yum install salt-master salt-minion
• 修改配置文件 vim /etc/salt/master,修改interface位置本机IP地址；
• 重启salt-master；
• 修改minion的配置文件，指定master的ip地址并重启；

13-CMDB资产采集功能实现之saltstack（二）

14-CMDB资产采集插件开发（一）

14.1 做好程序目录结构规划；

15-面向对象继承

16-CMDB资产采集插件开发（二）

17-CMDB资产采集插件开发（三）

17.1 使用可拔插式的方法编写；

18-基于配置文件加载插件

19-作业讲解

19.1 为什么开发CMDB系统？

• 运维自动化的基础；
• 进行公司资产管理，不再基于Excel表格；
• 资产进行自动汇报，以及资产的自动汇报；

20-CMDB项目采集资产数据（一）

20.1 agent形式；

• 采集资产
• 将资产数据发送到API（POST）

20.2 SSH形式；

• 获取今日未采集主机列表
• 采集资产
• 将资产数据发送到API（post方法）

20.3 Salt形式；

• 获取今日未采集主机列表
• 采集资产
• 将资产数据发送到API（post）

可执行文件中，代码越少越好；

21-CMDB项目采集资产数据之唯一标识规定

21.1 唯一标识号码-SN号；

21.2 做运维自动化之前，先制定规则，要不然无法向下执行；比如主机名无法重复；

21.3 公司既有物理机又有虚拟机，SN号不好使；

22-CMDB项目采集资产数据（二）

22.1 开发CMDB前，先制定规则；

23-CMDB项目采集资产数据

24-知识拾遗之线程进程池

25-CMDB项目采集资产之日志记录

26-自定义JSON序列化类型

27-本小结作业

28-基于requests模块汇报资产数据

29-基于requests模块汇报API验证（一）

30-基于requests模块汇报API验证（二）

31-CMDB项目示例之API验证流程

32-CMDB项目之数据表结构（一）

33-CMDB项目之数据表结构（二）

34-CMDB资产之汇报并持久化（一）

35-CMDB资产汇报并持久化（二）

36-CMDB之持久化资产流程

37-作业

38-CMDB项目CRUD组件之配置文件构造

39-CMDB项目CURD组件之神奇的单@符号

40-CMDB项目CURD组件之神奇的双@符号（一）

41-CMDB项目CURD组件之神奇的双@符号（二）

42-CMDB项目CURD组件之自定义td属性

43-内容预习

44-CMDB项目CURD组件之进入编辑模式

45-CMDB项目CURD组件之全选取消反选和编辑模式

46-CMDB项目CURD组件之内容截图

47-CMDB项目CURD组件进入编辑模式详细

48-CMDB项目CURD组件属性中应用神奇的单@符号

49-CMDB项目CURD组件之退出编辑模式

50-CMDB项目CURD组件更新数据

51-CMDB项目CURD组件之基于jQuery扩展封装组件

52-CMDB项目CURD组件之基本操作

53-CMDB项目CURD组件之分页功能

54-CMDB项目CURD组件之搜索功能介绍

55-CMDB项目介绍