CMDB02/单例模式、资产采集参考命令、日志处理

1. 单例模式

1.1 多例模式

  • 代码示例

    class Foo(object):
    def __init__(self,name,age):
    self.name = name
    self.age = age def func(self):
    msg = "%s-%s" %(self.name,self.age) obj1 = Foo("张三",18) # Foo的一个对象/Foo类的一个实例
    obj1.func() obj2 = Foo("李四",19)
    obj2.func()

1.2 单例模式

  • 代码示例/以前:

    class Foo(object):
    instance = None
    def __init__(self,name,age):
    self.name = name
    self.age = age def __new__(cls,*arg,**kawrgs):
    if not cls.instance:
    cls.instance = object.__new__(cls)
    return cls.instance
    class Singleton(object):
    instance = None def __init__(self):
    self.name = None def __new__(cls, *arg, **kawrgs):
    if not cls.instance:
    cls.instance = object.__new__(cls)
    return cls.instance
  • 应用场景:

    • django配置文件,只要加载一次,以后使用都用同一份值。

      class Singleton(object):
      instance = None def __init__(self):
      self.k0 = 0
      self.k1 = 1
      self.k2 = 2
      ... def __new__(cls, *arg, **kawrgs):
      if not cls.instance:
      cls.instance = object.__new__(cls)
      return cls.instance obj1 = Singleton()
      obj2 = Singleton()
      obj3 = Singleton()
    • django的admin,在注册models中用,希望所有的model类注册到同一个列表中。

1.2.1 单例模式/错误
  • 代码示例:

    class Singleton(object):
    instance = None def __init__(self):
    self.name = None def __new__(cls, *arg, **kawrgs):
    if not cls.instance:
    cls.instance = object.__new__(cls)
    return cls.instance
1.2.2 单例模式 new/正确
  • 代码示例:

    import time
    import threading class Singleton(object):
    instance = None
    lock = threading.RLock() def __new__(cls, *arg, **kwargs):
    if cls.instance:
    return cls.instance
    with cls.lock:
    if not cls.instance:
    cls.instance = object.__new__(cls)
    return cls.instance obj1 = Singleton()
    obj2 = Singleton()
1.2.3 单例模式之文件导入/正确,在源码中的应用
  • 代码示例1:

    # xx.py
    
    class Site(object):
    def __init__(self):
    self.names = [] def xx(self):
    pass
    site = Site()
    import xx
    
    print(xx.site)
  • 代码示例2:

    # xx.py 
    
    class Singleton(object):
    
        def __init__(self):
    self._registry = [] def register(self,model_class):
    self._registry.append(model_class) site = Singleton()
    import xx
    xx.site

1.3 单例模式补充

  • 基于__new__实现单例模式,在init中不设置值。

  • 是单例,但数据会被覆盖

    class Singleton(object):
    instance = None def __init__(self):
    self.registry = [] def __new__(cls, *arg, **kawrgs):
    if not cls.instance:
    cls.instance = object.__new__(cls)
    return cls.instance def register(self, val):
    self.registry.append(val) # {registry:[]}
    obj1 = Singleton()
    # {registry:[x1]}
    obj1.register('x1') # instance = {registry:[x1]}
    # instance = {registry:[]}
    obj2 = Singleton()
    # instance = {registry:[x2]}
    obj2.register('x2') print(obj2.registry)
    print(obj1.registry)
  • 单例模式/数据不会覆盖

    class Singleton(object):
    instance = None
    registry = [] def __new__(cls, *arg, **kawrgs):
    if not cls.instance:
    cls.instance = object.__new__(cls)
    return cls.instance def register(self, val):
    self.registry.append(val) obj1 = Singleton()
    obj1.register('x1') obj2 = Singleton()
    obj2.register('x2') print(obj2.registry)
    print(obj1.registry)

2. 日志

  • 代码示例:

    import logging
    import settings class AutoLogger(object):
    def __init__(self,log_path,log_name):
    file_handler = logging.FileHandler(log_path, 'a', encoding='utf-8')
    fmt = logging.Formatter(fmt="%(asctime)s - %(name)s - %(levelname)s -%(module)s: %(message)s")
    file_handler.setFormatter(fmt) self.logger = logging.Logger(log_name, level=logging.DEBUG)
    self.logger.addHandler(file_handler) def log(self,msg):
    self.logger.error(msg) logger = AutoLogger(settings.LOG_FILE_PATH,'cmdb')
  • 获取日志堆栈信息

    import traceback
    
    def run():
    try:
    int('lbzhk')
    except Exception as e:
    print(traceback.format_exc()) if __name__ == '__main__':
    run()

3. 获取资产信息的命令

  • 内存信息

    sudo dmidecode  -q -t 17 2>/dev/null
    
    # 注意:linux上要提前安装 yum install dmidecode
  • 硬盘(安装MegaCli)

    sudo MegaCli  -PDList -aALL
  • 网卡

    sudo ip link show
    sudo ip addr show
  • 主板

    sudo dmidecode -t1
  • CPU

    cat /proc/cpuinfo

4. 数据封装

  • 代码示例:

    class BaseResponse(object):
    def __init__(self):
    self.status = True
    self.data = None
    self.error = None
    @property
    def dict(self):
    return self.__dict__ def process():
    info = BaseResponse()
    try:
    info.status = True
    info.data = "lbzhk"
    except Exception:
    pass
    return info.dict result = process()
    print(result)

5.表关系

总结:

  1. cmdb资产采集后,为什么不直接放到数据库?

    • 单独编写api,为了给其他系统提供数据支持(接口)
    • 维护的数据库连接比较多,修改不方便。
  2. 手写单例模式

    • new+锁
  3. 其他单例模式

    • 使用模块

      class Singleton(object):
      def foo(self):
      pass
      singleton = Singleton()
      from a import singleton
    • 使用装饰器

      def Singleton(cls):
      _instance = {} def _singleton(*args, **kargs):
      if cls not in _instance:
      _instance[cls] = cls(*args, **kargs)
      return _instance[cls] return _singleton @Singleton
      class A(object):
      a = 1
      def __init__(self, m=0):
      self.m = m a1 = A(1)
      a2 = A(2)
    • 使用类 -- 可以防止多线程的时候出问题

      import time
      import threading
      class Singleton(object):
      _instance_lock = threading.Lock() def __init__(self):
      time.sleep(1) @classmethod
      def instance(cls, *args, **kwargs):
      with Singleton._instance_lock:
      if not hasattr(Singleton, "_instance"):
      Singleton._instance = Singleton(*args, **kwargs)
      return Singleton._instance def task(arg):
      obj = Singleton.instance()
      print(obj)
      for i in range(10):
      t = threading.Thread(target=task,args=[i,])
      t.start()
      time.sleep(20)
      obj = Singleton.instance()
      print(obj)
    • 基于__new__实现 ,代码如上

  4. __new__方法返回的是什么

    • 新创建的对象,内部没有数据,需要经过init来进行初始化。
  5. 单利模式应用场景:

    • django的配置文件
    • django的admin
    • 数据库链接池(单例模式)
    • 写日志

CMDB02/ 单例模式、资产采集参考命令、日志处理的更多相关文章

  1. Django项目:CMDB(服务器硬件资产自动采集系统)--12--08CMDB采集硬件数据日志记录

    #settings.py # ————————01CMDB获取服务器基本信息———————— import os BASEDIR = os.path.dirname(os.path.dirname(o ...

  2. CMDB资产采集方案

    CMDB资产采集方案 CMDB 资产采集的方案总共有四种 Agent SSH类 Saltstack Puttet 方案设计,从性能上考虑 下面前三种是用Python开发的,目标是兼容三种采集方式的软件 ...

  3. CMDB学习之八,完成所有资产采集信息的收集

    #!/usr/bin/env python # -*- coding:utf-8 -*- import traceback from .base import BasePlugin from lib. ...

  4. CMDB03 /今日未采集的资产、资产入库、资产变更记录、资产采集

    CMDB03 /今日未采集的资产.资产入库.资产变更记录.资产采集 目录 CMDB03 /今日未采集的资产.资产入库.资产变更记录.资产采集 1. 获取今日未采集的服务器 2. server资产入库以 ...

  5. 应用Flume+HBase采集和存储日志数据

    1. 在本方案中,我们要将数据存储到HBase中,所以使用flume中提供的hbase sink,同时,为了清洗转换日志数据,我们实现自己的AsyncHbaseEventSerializer. pac ...

  6. CMDB资产采集笔记

    一.资产采集四种方式 1. Agent方式 API:Django接收数据并入库 程序:放置在每台服务器 应用场景:针对服务器较多的公司 步骤一: #执行本地命令的库 import subprocess ...

  7. CMDB资产采集的四种方式

    转 https://www.cnblogs.com/guotianbao/p/7703921.html 资产采集的概念 资产采集的四种方式:Agent.SSH.saltstack.puppet 资产采 ...

  8. [日志分析]Graylog2采集mysql慢日志

    之前聊了一下graylog如何采集nginx日志,为此我介绍了两种采集方法(主动和被动),让大家对graylog日志采集有了一个大致的了解. 从日志收集这个角度,graylog提供了多样性和灵活性,大 ...

  9. CMDB服务器管理系统【s5day91】:资产采集相关问题

    资产采集唯一标识和允许临时修改主机名 class AgentClient(BaseClient): def exec(self): obj = PluginManager() server_dict ...

随机推荐

  1. @atcoder - AGC008E@ Next or Nextnext

    目录 @description@ @solution@ @accepted code@ @details@ @description@ 给定一个长度为 N 的序列 a,问有多少排列 p,满足对于每一个 ...

  2. 2019-02-12 html的初步学习

    前两天看了下python的爬虫,后面的抓包模拟登录实在是难弄,于是暂时放弃,来学学前端知识QAQ <!DOCTYPE html>文档类型符合HTML5标准 <html lang=&q ...

  3. Excel只想显示一部分日期,怎样把其余部分隐藏起来?

      问题:只想显示一部分日期,怎样把其余部分隐藏起来? 方法:分列 Step1:选中需要修改的单元格——数据——分列. Step2:固定宽度——点击下一步. Step3:在建立分列处单击鼠标(若想取消 ...

  4. Jmeter基础002----Jmeter简单使用

    一.Jmeter概述 1.概述 JMeter是Apache公司使用JAVA开发的一款开源测试工具,它的功能强大.高效,可以模拟一些高并发或多次循环等测试场景,使用方便灵活. 2.使用 安装配置java ...

  5. 破解版BrupSuite安装及其问题解决及环境部署

    一 下载 BrupSuite_pro_v1.7.37的压缩包百度网盘链接: https://pan.baidu.com/s/1KkuseybjpuHo-6V4_wh9vw 提取码: 3vcs 说明一下 ...

  6. 斐讯N1搭建高性能博客

    前些日子我在网上淘到了一台斐讯n1,Amlogic S905D的板子让这个盒子平滑地用上了Armbian系统,有了linux的加持,让这个设备的玩法又上升了一个层次,网上大多都是把他作为旁路由用来富强 ...

  7. spring boot actuator扩展httptrace的记录

    SpringBoot记录HTTP请求日志 1.需求解读 需求: 框架需要记录每一个HTTP请求的信息,包括请求路径.请求参数.响应状态.返回参数.请求耗时等信息. 需求解读: Springboot框架 ...

  8. 入门大数据---Hbase容灾与备份

    一.前言 本文主要介绍 Hbase 常用的三种简单的容灾备份方案,即CopyTable.Export/Import.Snapshot.分别介绍如下: 二.CopyTable 2.1 简介 CopyTa ...

  9. xeus-clickhouse: Jupyter 的 ClickHouse 内核

    在科学计算领域,Jupyter 是一个使用非常广泛的集成开发环境,它支持多种主流的编程语言比如 Python, C++, R 或者 Julia.同时,数据科学最重要的还是数据,而 SQL 是操作数据最 ...

  10. Python实用笔记 (13)函数式编程——返回函数

    函数作为返回值 我们来实现一个可变参数的求和.通常情况下,求和的函数是这样定义的: def calc_sum(*args): ax = 0 for n in args: ax = ax + n ret ...