hashlib摘要算法模块，logging日志，configparser配置文件模块

一、hashlib模块（摘要算法模块）

1、算法介绍

　　Python的hashlib提供了常见的摘要算法，如MD5，SHA1等等。

　　什么是摘要算法呢？

　　　　摘要算法又称哈希算法、散列算法。它通过一个函数，把任意长度的数据转换为一个长度　　固定的数据串（通常用16进制的字符串表示）。

　　摘要算法就是通过摘要函数f()对任意长度的数据data计算出固定长度的摘要digest，目的是为了发现原始数据是否被人篡改过。

　　摘要算法之所以能指出数据是否被篡改过，就是因为摘要函数是一个单向函数，计算f(data)很容易，但通过digest反推data却非常困难。而且，对原始数据做一个bit的修改，都会导致计算出的摘要完全不同。

2、MD5算法

　　MD5是最常见的摘要算法，速度很快，生成结果是固定的128 bit字节，通常用一个32位的16进制字符串表示。另一种常见的摘要算法是SHA1，调用SHA1和调用MD5完全类似，对于相同数据分块进行update（），hexdigest（）得出的结果是一样的：

import hashlib
md5 = hashlib.md5()
md5.update(b'jassin')  # update方法接收字节的数据类型
print(md5.hexdigest())  # 82c8e351e86c57576f62804d6cfaf0dd

import hashlib
md5 = hashlib.md5()
md5.update(bytes('黎诗',encoding = 'utf-8'))
print(md5.hexdigest())

如果数据量很大，可以分块多次调用update()，最后计算的结果是一样的：

import hashlib
md5 = hashlib.md5()
md5.update(b'jassin')  # update方法接收字节的数据类型(括号内只能有一个参数)
md5.update(b'jassin')
md5.update(b'jassin')
print(md5.hexdigest())
print(md5.hexdigest())
print(md5.hexdigest())

MD5是最常见的摘要算法，速度很快，生成结果是固定的128 bit字节，通常用一个32位的16进制字符串表示。另一种常见的摘要算法是SHA1，调用SHA1和调用MD5完全类似：

import hashlib

sha1 = hashlib.sha1()
sha1.update(b'lalala')
sha1.update(bytes('啦啦啦',encoding = 'utf-8'))
print(sha1.hexdigest()) # bf3a5415dcb1c6d7e30df18fdce7c13c7889ca0a
print(sha1.hexdigest()) # bf3a5415dcb1c6d7e30df18fdce7c13c7889ca0a

要确保存储的用户口令不是那些已经被计算出来的常用口令的MD5，这一方法通过对原始口令加一个复杂字符串来实现，俗称“加盐”：

import hashlib
md5 = hashlib.md5('lishi'.encode('utf-8'))
md5.update(b'jassin')
print(md5.hexdigest())

import hashlib
md5 = hashlib.md5(b'lishi')
md5.update(b'jassin')
print(md5.hexdigest())

# 加盐
import hashlib
md5 = hashlib.md5('星星点灯'.encode('utf-8'))
md5.update(b'jassin')
print(md5.hexdigest())

例子（登录加密验证）bug：

import hashlib
#存储密文密码
f = open('userinfo2','w')
md5 = hashlib.md5(b'')  #加盐处理
md5.update(b'jassin')
md5_value = md5.hexdigest()
f.write('lishi|%s'%md5_value)
f.close()
#登录读取验证
username = input('username:')
pwd = input('pwd! ')
f = open('userinfo2')
lishi_info = f.readline().strip()
user,passwd = lishi_info.split('|') # 用户名，密码
md5 = hashlib.md5(b'')  #加盐处理
md5.update(bytes(pwd,encoding='utf-8'))
if passwd == md5.hexdigest() and username == user:
    print('登录成功')
else:
    print('我会对你说上一世情话')

一篇文章的校验
读文件 ： 一行一行拿
转换成bytes

文件1
文件2
分别打开两个文件，一行一行读，每一行update一下 对比最终的hexdigest

摘要算法在很多地方都有广泛的应用。要注意摘要算法不是加密算法，不能用于加密（因为无法通过摘要反推明文），只能用于防篡改，但是它的单向计算特性决定了可以在不存储明文口令的情况下验证用户口令。

小结：

hashilib 摘要算法的模块
md5 sha1 sha256 sha512
摘要的过程 不可逆
能做的事儿：
    文件的一致性检测
    用户的加密认证
        单纯的mg5不够安全
        加盐处理 简单的盐可能被破解 且破解之后所有的盐都失效了
        动态加盐

二、configparser模块

conf、config、configer 以这些开头基本跟配置文件有关

configparser模块适用于配置文件的格式与windows ini文件类似，可以包含一个或多个节（section），每个节可以有多个参数（键=值）。

为什么要有配置文件
　　配置文件其实是多种多样的
　　configparser是专门解决一种样式的配置文件而生的
yaml 是另一种配置规则 python也提供了扩展模块

1、创建文件

[DEFAULT]
ServerAliveInterval = 45
Compression = yes
CompressionLevel = 9
ForwardX11 = yes

[bitbucket.org]
User = hg

[topsecret.server.com]
Port = 50022
ForwardX11 = no

如果想用python生成一个这样的文档怎么做呢？

import configparser

config = configparser.ConfigParser()

config["DEFAULT"] = {'ServerAliveInterval': '',
                      'Compression': 'yes',
                     'CompressionLevel': '',
                     'ForwardX11':'yes'
                     }

config['bitbucket.org'] = {'User':'hg'}

config['topsecret.server.com'] = {'Host Port':'','ForwardX11':'no'}

with open('example.ini', 'w') as configfile:

   config.write(configfile)

2、查找文件内容

import configparser

config = configparser.ConfigParser()

#---------------------------查找文件内容,基于字典的形式---------------------------------

print(config.sections())                               #  []

config.read('example.ini')

print(config.sections())                               #['bitbucket.org', 'topsecret.server.com']

print('bytebong.com' in config)                        # False
print('bitbucket.org' in config)                       # True

print(config['bitbucket.org']["user"])                 # hg

print(config['DEFAULT']['Compression'])                #yes

print(config['topsecret.server.com']['ForwardX11'])    #no

print(config['bitbucket.org'])                         #<Section: bitbucket.org>

for key in config['bitbucket.org']:                    # 注意,有default会默认default的键
    print(key)

print(config.options('bitbucket.org'))                 # 同for循环,找到'bitbucket.org'下所有键

print(config.items('bitbucket.org'))                   #找到'bitbucket.org'下所有键值对

print(config.get('bitbucket.org','compression'))       # yes---get方法Section下的key对应的value

3、增删改操作

import configparser

config = configparser.ConfigParser()

config.read('example.ini')

config.add_section('yuan')

config.remove_section('bitbucket.org')
config.remove_option('topsecret.server.com',"forwardx11")

config.set('topsecret.server.com','k1','')
config.set('yuan','k2','')

config.write(open('new2.ini', "w"))

三、logging模块（日志）

　　日志就是程序在运行过程中，人为的添加一些要打印的中间信息

　　在程序的排错、在一些行为、结果的记录

logging模块简单配置

import logging
logging.debug('debug message')        # 调式信息
logging.info('info message')          # 信息模式
logging.warning('warning message')    # 警告模式 ：不会直接引发程序崩溃。但是可能出现问题
logging.error('error message')        # 错误模式 ：出错了
logging.critical('critical message')  # 批判模式 ：程序崩溃

默认情况下Python的logging模块将日志打印到了标准输出中，且只显示了大于等于WARNING级别的日志即

（默认情况不打印info 、 debug），这说明默认的日志级别设置为WARNING（日志级别等级CRITICAL > ERROR > WARNING > INFO > DEBUG），默认的日志格式为日志级别：Logger名称：用户输出消息。

　　必须出现但是对程序的正常运行没有影响 -----info

　　不是必须出现，但是如果有问题需要借助他的信息调式 --- debug

　　

1、将日志值只写在文件或者屏幕显示情况

import logging
logging.basicConfig(
　　　　　　　　　　　 level=logging.DEBUG,                                                          #设置日志的默认
                    format='%(asctime)s %(filename)s[line:%(lineno)d] %(levelname)s %(message)s', #设置日志格式：filename为当前程序的文件名
                    filename='log.txt',                                                           #设置日志写入的文件名，一旦被设置日志将不在屏幕显示
                    filemode='w'                                                                  #添加日志的写入模式，可以设置为‘a’模式
                    )
logging.debug('debug msg')
logging.info('info msg')
logging.warning('warning message')
logging.error('error msg')
logging.critical('critical msg')

2、相关配置文件

logging.basicConfig()函数中可通过具体参数来更改logging模块默认行为，可用参数有：

filename：用指定的文件名创建FiledHandler，这样日志会被存储在指定的文件中。
filemode：文件打开方式，在指定了filename时使用这个参数，默认值为“a”还可指定为“w”。
format：指定handler使用的日志显示格式。
datefmt：指定日期时间格式。
level：设置rootlogger（后边会讲解具体概念）的日志级别
stream：用指定的stream创建StreamHandler。可以指定输出到sys.stderr,sys.stdout或者文件(f=open(‘test.log’,’w’))，默认为sys.stderr。若同时列出了filename和stream两个参数，则stream参数会被忽略。

format参数中可能用到的格式化串：
%(name)s Logger的名字
%(levelno)s 数字形式的日志级别
%(levelname)s 文本形式的日志级别
%(pathname)s 调用日志输出函数的模块的完整路径名，可能没有
%(filename)s 调用日志输出函数的模块的文件名
%(module)s 调用日志输出函数的模块名
%(funcName)s 调用日志输出函数的函数名
%(lineno)d 调用日志输出函数的语句所在的代码行
%(created)f 当前时间，用UNIX标准的表示时间的浮 点数表示
%(relativeCreated)d 输出日志信息时的，自Logger创建以 来的毫秒数
%(asctime)s 字符串形式的当前时间。默认格式是 “2003-07-08 16:49:45,896”。逗号后面的是毫秒
%(thread)d 线程ID。可能没有
%(threadName)s 线程名。可能没有
%(process)d 进程ID。可能没有
%(message)s用户输出的消息

3、将日志既在文件中储存又在屏幕显示情况（推荐）：

import logging
#将获得logger_obj对象封装成一个函数
def get_logger():
    logger_obj=logging.getLogger()                                                                    
 #获得一个空logger_obj对象
    fh=logging.FileHandler('log.txt')                                                                  
#创建一个文件流，log.txt为日志文件名
    fh.setLevel(logging.WARNING)                                                                       
#设置文件默认日志级别
    sh=logging.StreamHandler()                                                                         
#创建一个屏幕流
    sh.setLevel(logging.ERROR)                                                                         
#设置屏幕默认日志级别
    formater=logging.Formatter('%(asctime)s %(filename)s[line:%(lineno)d] %(levelname)s %(message)s')  
#设置日志格式
    fh.setFormatter(formater)                                                                          
#为文件流设置日志格式
    sh.setFormatter(formater)                                                                          
#为屏幕流设置日志格式
    logger_obj.addHandler(fh)                                                                          
#为logger_obj对象添加一个文件流
    logger_obj.addHandler(sh)                                                                          
#为logger_obj对象添加一个屏幕流
    return logger_obj     #返回一个logger_obj对象
logger_obj=get_logger()
logger_obj.debug('debug')
logger_obj.info('info')
logger_obj.warning('warning')
logger_obj.error('error')
logger_obj.critical('critical')

 logger日志对象 ----> 日志的文件句柄-----> 日志的输出格式
import logging

logger = logging.getLogger()   #实例化一个logger对象
# 创建一个handler，用于写入日志文件
fh = logging.FileHandler('test.log',encoding='utf-8')  # 文件句柄-日志文件操作符
formatter = logging.Formatter('%(asctime)s - %(name)s - %(levelname)s - %(message)s') #日志输出格式
formatter2 = logging.Formatter('%(asctime)s - %(name)s  [%(levelname)s]  %(message)s') #日志输出格式
fh.setFormatter(formatter)   #文件句柄 绑 格式
logger.setLevel(logging.DEBUG)  #设置日志等级，默认是Warning
logger.addHandler(fh) #logger 绑文件句柄
sh = logging.StreamHandler()  #屏幕流对象
sh.setFormatter(formatter2)
logger.addHandler(sh)
logger.info('hello!')

logger = logging.getLogger()
fh = logging.FileHandler('test.log.20171123',encoding='utf-8')
logger.addHandler(fh)

logging库提供了多个组件：Logger、Handler、Filter、Formatter。Logger对象提供应用程序可直接使用的接口，Handler发送日志到适当的目的地，Filter提供了过滤日志信息的方法，Formatter指定日志显示格式。另外，可以通过：logger.setLevel(logging.Debug)设置级别,当然，也可以通过fh.setLevel(logging.Debug)单对文件流设置某个级别。