CMDB学习之一
CMDB - 配置管理数据库 资产管理
自动化相关的平台(基础 CMDB):
1. 发布系统
2. 监控
3. 配管系统、装机
4. 堡垒机
CMDB的目的:
1. 替代EXCEL资产管理 —— 资产不准确
2. 与监控系统联动
3. 自动装机
期望:资产管理
实现原理:
1. agent 机器多的时候
2. ssh
3. salt
实现兼容三种模式,可扩展性
基础的架构:
1. 资产采集的代码
2. API
3. 管理平台
################
今天的目标:
资产采集:
- 资产采集代码
python的脚本
- api
Django
创建项目:
资产采集
auto_clent:
agent模式:
1. 采集资产信息
2. 使用requests模块发POST请求提交的资产信息,交给api,持久化
ssh模式:
1. 获取未采集的主机列表
2. 远程连接(ssh)上指定的主机,执行命名采集资产信息
3. 使用requests模块发POST请求提交的资产信息
salt模式:
1. 获取未采集的主机列表
2. 远程连接(salt)上指定的主机,执行命名采集资产信息
3. 使用requests模块发POST请求提交的资产信息
知识点:
1. csrf_exempt 某个视图不需要检验CSRF
2. requests模块 data={} url编码 Django中取 request.POST
data = json字符串 request.POST没有值 ——》 request.body
3. 处理错误信息:
不要用e traceback.format_exc() 错误堆栈
4. 唯一标识:
物理机 s/n号
物理机 + 虚拟机:
主机名 + 文件
规则:
1. 新的机器 以主机名的一个空的文件 采集信息存到文件中 当前是新增
2. 老的机器 改主机名 文件内容更新 当前变更 文件名也更新
5. 返回值:
r1.content, byte
r1.text, 字符串
r1.json(), 反序列化的结果
6. 线程池:
from concurrent.futures import ThreadPoolExecutor
pool = ThreadPoolExecutor(10)
for host in host_list:
pool.submit(task,host)
7. 遵循的原则:
开放封闭原则:
开放: 配置
封闭: 源码
###############################################
首先模块设计,资产采集方式 第一个种是Agent的方式采集
第二种采集方式采用中间控件机制,中控件机,首先要获取未采集数据信息的列表,然后去服务器去采集
资产采集客户端目录规划开始 创建一个项目目录这个,这个是采集目录,是直接运行在服务器程序,
auto_client的目录规划
bin执行文件,
config配置文件,
lib公共库,
src程序逻辑,
log日志
执行入口bin 开始
bin
clinet.py
import os, sys sys.path.append(os.path.dirname(os.path.dirname(os.path.abspath(__file__))))
from src.script import run if __name__ == '__main__':
run()
逻辑文件
src
engine (创建采集目录)
agent.py
class AgnetHandler(object):
def handler(self):
"""
Agent模式下处理资产采集
:return:
"""
print('agent模式')
salt.py
class SaltHandler(object):
def handler(self):
"""
Salt模式下处理资产采集
:return:
"""
print(‘salt模式’)
ssh.py
class SSHHandler(object):
def handler(self):
"""
SSH模式下处理资产采集
:return:
"""
print('SSH模式')
script.py
from config import setting
from src.engine import agent,salt,ssh def run():
"""
资产采集入口
:return:
"""
if setting.ENGINE == 'agent':
obj =agent.AgnetHandler()
obj.handler()
elif setting.ENGINE == 'salt':
obj = salt.SaltHandler()
obj.handler()
elif setting.ENGINE == 'ssh':
obj=ssh.SSHHandler()
obj.handler()
else:
print("不支持这个模式采集")
#这种是简单工厂模式
做可插拔的程序,写在配置文件,选项使用那一种方式去采集数据
config
settings.py
ENGINE='agent' #支持agent,salt,SSH数据采集
#########################上面的比较low 下面用反射实现
#利用反射的方式,执行采集方法,首先在配置文件写一个字典
#利用反射执行采集,开发封闭原则
ENGINE_HANDLERS = {
'agent':'src.engine.AgnetHandler',
'salt':'src.engine.SaltHandler',
'ssh':'src.engine.SSHHandler',
}
script.py
from config import setting
# from src.engine import agent,salt,ssh
import importlib def run():
"""
资产采集入口
:return:
"""
# if setting.ENGINE == 'agent':
# obj =agent.AgnetHandler()
# obj.handler()
# elif setting.ENGINE == 'salt':
# obj = salt.SaltHandler()
# obj.handler()
# elif setting.ENGINE == 'ssh':
# obj=ssh.SSHHandler()
# obj.handler()
# else:
# print("不支持这个模式采集")
#利用反射的方式,执行采集方法,首先在配置文件写一个字典
engine_path = setting.ENGINE_HANDLERS.get(setting.ENGINE) #拿到采集模式的脚本的执行路径
#'src.engine.agnet.AgnetHandler' 使用rsplit进行右分割,只是分割一次
path,engine_class=engine_path.rsplit('.',maxsplit=1)
#拿到执行模式脚本的类,使用importlib,导入
# print(path,engine_class)
module = importlib.import_module(path)
# print(module,type(module))
obj=getattr(module,engine_class)() #反射并实例化
obj.handler()
然后可以把反射写一个公用的插件
在lib 创建一个文件,module.srting.py
import importlib def import_sting(path):
module_path,engine_class=path.rsplit('.',maxsplit=1)
module = importlib.import_module(module_path)
return getattr(module,engine_class)
我在script.py 在修改下
from config import setting
from lib.module_srting import import_sting
def run():
"""
资产采集入口
:return:
"""
#利用反射的方式,执行采集方法,首先在配置文件写一个字典
engine_path = setting.ENGINE_HANDLERS.get(setting.ENGINE) #拿到采集模式的脚本的执行路径
engine_class = import_sting(engine_path)
obj=engine_class() #反射并实例化
obj.handler()
所有采集数据方法,都进行约束
class BaseHandler(object):
def handler(self):
'''
约束派生类
:return:
'''
raise NotImplementedError('handler() must Implemented han')
每一个 方法都要导入 基类进行继承,agent,salt ,ssh 都要继承
from .base import BaseHandler class AgnetHandler(BaseHandler):
def handler(self):
"""
Agent模式下处理资产采集:硬盘、内存、网卡
:return:
"""
print('agent模式')
#调用pulugins.disk /plugins.momory /plugins.nerwork
CMDB学习之一的更多相关文章
- CMDB学习之七-实现采集错误捕捉,日志信息处理
首先采集disk的具体实现方上代码: # !/usr/bin/env python # -*- coding:utf-8 -*- from .base import BasePlugin import ...
- CMDB学习之四 ——DEBUG模式
定义一个debug,进行解析调试,到测试文件 配置文件,配置debug模式,定义环境变量, #!/usr/bin/env python # -*- coding:utf-8 -*- import os ...
- CMDB学习之二数据采集
首先也要调用插件的方式,来写采集数据插件,在src目录下创建一个插件 plugins ,然后在plugins下创建disk.py ,memory.py, network.py等等 src plugin ...
- CMDB学习之六 --客户端请求测试,服务端api优化
客户端使用agent 请求测试,agent使用的POST 请求,使用requests模块 本地采集,汇报服务端 #!/usr/bin/env python # -*- coding:utf-8 -*- ...
- CMDB学习之八,完成所有资产采集信息的收集
#!/usr/bin/env python # -*- coding:utf-8 -*- import traceback from .base import BasePlugin from lib. ...
- CMDB学习之五服务端api
服务端api 对发送来的数据进行处理,并返回结果,首先要创建一个Django项目 第一步,就是写URL路由在分支中写url api 主路由 from django.conf.urls import u ...
- CMDB学习之三数据采集
判断系统因为是公用的方法,所有要写基类方法使用,首先在插件中创建一个基类 将插件文件继承基类 思路是创建基类使用handler.cmd ,命令去获取系统信息,然后进行判断,然后去执行 磁盘 ,cpu, ...
- Python 学习 第十篇 CMDB用户权限管理
Python 学习 第十篇 CMDB用户权限管理 2016-10-10 16:29:17 标签: python 版权声明:原创作品,谢绝转载!否则将追究法律责任. 不管是什么系统,用户权限都是至关重要 ...
- Python学习路程CMDB
本节内容 浅谈ITIL CMDB介绍 Django自定义用户认证 Restful 规范 资产管理功能开发 浅谈ITIL TIL即IT基础架构库(Information Technology Infra ...
随机推荐
- laravel5.0 自定义服务类
一.创建加密服务类 在 app\services 目录下创建 Encrypt.php <?php namespace App\Services; class Encrypt { } 二.注册服务 ...
- 关于 nginx 的配置的 location
精准匹配和普通匹配: server{ location =/index.htm{ ////精准匹 ...
- MySQL 大数据量文本插入
导入几万条数据需要等好几分钟的朋友来围观一下! 百万条数据插入,只在一瞬间.呵呵夸张,夸张!! 不到半分钟是真的! 插入指令: load data infile 'c:/wamp/tmp/Data_O ...
- 外媒分析:iPhone销量低于预期是中国市场疲软影响的
根据外媒AppleInsider的报道,来自摩根士丹利(Morgan Stanley)的Katy Huberty是最新一位下调苹果目标股价的分析师,她在报告中写道,iPhone的销量低于预期,主要是因 ...
- js 异步加载的方式
js 异步加载的方式 渲染引擎遇到 script 标签会停下来,等到执行完脚本,继续向下渲染 defer 是“渲染完再执行”,async 是“下载完就执行”,defer 如果有多个脚本,会按照在页面中 ...
- Java基础学习总结(12)——一哈希编码HashCode
一.哈希编码 现在是站在JAVA虚拟机的角度来看内存里面的布局,站在JAVA虚拟机的角度,在内存里面有好多好多个对象,这里用椭圆来代表一个个对象.一个程序运行起来的时候,可能会有很多个对象在内存里面分 ...
- BNUOJ 4049 四叉树
四叉树 Time Limit: 1000ms Memory Limit: 65536KB 64-bit integer IO format: %lld Java class name: Ma ...
- ArcGIS api for javascript——用第二个服务的范围设置地图范围
描述 本例展示了如何设置地图的范围为地图其中一个图层的范围.本例有两个图层:ArcGIS Online上的世界地图图层ArcGISTiledMapServiceLayer和堪萨斯州的要素的图层ArcG ...
- Android中集成ffmpeg(一):编译ffmpeg
方案选择 Android中集成ffmpeg的codec功能无非两种方式: JNI直接调用,主要用于App开发(无权限修改系统底层),如EXOPlayer,JPlayer等. 集成ffmpeg到OMX, ...
- Ubuntu14环境下minigui安装问题记录--object.lo错误
minigui3.0.12在Ubuntu14上面编译只是去?出现这个错误:object.h:275:9: error: incompatible types when assigning to typ ...