Pickle模块数据对象持久化操作
Pickle模块的作用是持久化(序列化)的储存数据。
因此我先解释下:什么是序列化与反序列化、什么是对象序列化和对象反序列化。
通俗地讲,它们的定义如下:
序列化: 把一个对象保存到一个文件或数据库字段中去;
反序列化: 在适当的时候把这个文件再转化成原来的对象使用;
对象的序列化: 把对象转换为字节序列的过程;
对象的反序列化: 把字节序列恢复为对象的过程;
使用场合:
使用序列化主要是因为跨平台和对象存储的需求,因为网络上只允许字符串或者二进制格式,而文件需要使用二进制流格式。
如果想把一个内存中的对象存储下来就必须使用序列化转换为xml(字符串)、json(字符串)或二进制(流)等
注意: file.write/read操作的字符串对象,而pickle.dump/load操作的是结构化数据对象(如:列表、字典)。
常用接口:
(1) pickle.dump(obj, file, [,protocol]) #将obj对象序列化存入已经打开的file中。
obj: 结构化对象
file: 类文件对象(对象保存)
protocol: 序列化使用的协议版本。protocol默认值为0。
0:ASCII协议,所序列化的对象使用可打印的ASCII码表示;
1:老式的二进制协议;
2:2.3版本引入的新二进制协议,较以前的更高效
(2) pickle.load(file) # 将file中的对象序列化读出。
(3) pickle.dumps(obj[, protocol]) #以字节对象形式返回封装的对象,不需要写入文件中。
(4) pickle.loads(file) #从字节对象中读取被封装的对象,并返回。
dump能将多个对象序列化存储到同一个文件中,随后调用load()来以同样的顺序反序列化读出这些对象。
#pickle用法举例: version: python 3.3.4
1.dump和load
>>> import pickle #导入pickle
>>> my_list = ['ABC','','中文',['']] #添加一个测试列表
>>> pickle_file = open('my_list.pkl','wb') #文件(my_list.pkl)必须以二进制可写模式打开,即"wb"
>>> pickle.dump(my_list,pickle_file) #调用pickle.dump方法,将my_list以二进制的方式写入pickle_file对象
>>> pickle_file.close() #关闭文件对象
>>> import os; os.getcwd() #引入os包,查看当前python目录
'D:\\Python33'
>>> os.listdir('D:\\Python33') #查看指定目录下的文件,可以看到已经生成一个名为my_list.pkl的二进制文件
[... 'my_list.pkl', .....] >>> pickle_file2 = open('my_list.pkl','rb') #文件(my_list.pkl)必须以二进制可读模式打开,即"rb"
>>> my_list2 = pickle.load(pickle_file2) #调用ickle.load方法,将以二进制格式保存的对象还原回来
>>> print (my_list2)
['ABC', '', '中文', ['']] #可以看出对象已经还原 #改进写法:
>>> import pickle
>>> my_list = ['ABC','','中文',['']]
>>> with open('my_list.pkl','wb') as file1: #采用with open as方式,不需要再调用close()
pickle.dump(my_list,file1)
>>> import os
>>> os.listdir(os.getcwd())
[... 'my_list.pkl', .....]
>>> with open('my_list.pkl','rb') as file2:
new_list = pickle.load(file2)
>>> print (new_list)
['ABC', '', '中文', ['']] 2.dumps和loads
#测试元组
>>> import pickle #导入pickle
>>> tuple1 = ('A',1,'小泉') #添加一个元祖
>>> tuple1
('A', 1, '小泉')
>>> str1 = pickle.dumps(tuple1) #以字节对象形式返回封装的对象,不需要写入文件中
>>> str2 = pickle.loads(str1) #从字节对象中读取被封装的对象
>>> print (str2)
('A', 1, '小泉')
>>> type(str2)
<class 'tuple'> #测试字符串
>>> str = 'Hello World!'
>>> import pickle
>>> str1 = pickle.dumps(str)
>>> str2 = pickle.loads(str1)
>>> print (str2)
Hello World!
>>> type(str)
<class 'str'>
>>> type(str2)
<class 'str'>
Pickle与CPickle对比
前者是完全用Python来实现的模块,这个CPickle是用C来实现的,它的速度要比pickle快好多倍。
一般建议如果电脑中只要有CPickle的话都应该使用它。
参考资料:
pickle模块的使用讲解: http://blog.csdn.net/coffee_cream/article/details/51754484
Pickle模块数据对象持久化操作的更多相关文章
- python全栈开发-json和pickle模块(数据的序列化)
一.什么是序列化? 我们把对象(变量)从内存中变成可存储或传输的过程称之为序列化,在Python中叫pickling,在其他语言中也被称之为serialization,marshalling,flat ...
- 使用pickle模块存储对象
import time import hashlib import pickle import os class Info(): def __init__(self): self.create_tim ...
- 设计模式---单例模式,pickle模块
设计模式---单例模式 简介 单例模式(Singleton Pattern) 是一种常用的软件设计模式,该模式的主要目的是确保某一个类只有一个实 例存在.当你希望在整个系统中,某个类只能出现一个实例时 ...
- python学习_应用pickle模块封装和拆封数据对象
学习文件数据处理的时候了解到有pickle模块,查找官方文档学习了一些需要用到的pickle内容. 封装是一个将Python数据对象转化为字节流的过程,拆封是封装的逆操作,将字节文件或字节对象中的字节 ...
- python pickle模块的使用/将python数据对象序列化保存到文件中
# Python 使用pickle/cPickle模块进行数据的序列化 """Python序列化的概念很简单.内存里面有一个数据结构, 你希望将它保存下来,重用,或者发送 ...
- python数据持久存储:pickle模块的基本使用
经常遇到在Python程序运行中得到了一些字符串.列表.字典等数据,想要长久的保存下来,方便以后使用,而不是简单的放入内存中关机断电就丢失数据. 这个时候Pickle模块就派上用场了,它可以将对象转换 ...
- python数据的存储和持久化操作
Python的数据持久化操作主要是六类:普通文件.DBM文件.Pickled对象存储.shelve对象存储.对象数据库存储.关系数据库存储. 普通文件不解释了,DBM就是把字符串的键值对存储在文件里: ...
- python数据持久存储:pickle模块的使用
python的pickle模块实现了基本的数据序列和反序列化.通过pickle模块的序列化操作我们能够将程序中运行的对象信息保存到文件中去,永久存储:通过pickle模块的反序列化操作,我们能够从文件 ...
- pickle 数据对象的序列化和反序列化
python的pickle模块实现了基本的数据序列和反序列化.通过pickle模块的序列化操作我们能够将程序中运行的对象信息保存到文件中去,永久存储:通过pickle模块的反序列化操作,我们能够从文件 ...
随机推荐
- 对于错误“Refused to execute script from '...' because its MIME type ('') is not executable, and strict MIME type checking is enabled.”的处理。
今天在是用公司的报表插件Stimulsoft时发现的问题.之前可以正常使用,突然不能加载了.查看发现得到这个错误. 查看请求头 可以看到,请求正常响应,但是发现 Content-Type是空的,但是引 ...
- POJ-2996 Help Me with the Game---模拟棋子
题目链接: https://vjudge.net/problem/POJ-2996 题目大意: 给出白方和黑方的棋子和对应的坐标,输出该副棋盘的样子 1,棋盘中大写字母表示的是白方棋子,小写是黑方.2 ...
- 关于if后面直接加上参数名,不加条件的用法
<template> <section> <p v-if="aa">{{aa}}</p> <p v-if="bb&q ...
- 大数据处理架构hadoop
Hadoop简介 Hadoop是Apache软件基金会旗下的一个开源分布式计算平台,为用户提供了系统底层细节透明的分布式基础架构.它是基于java语言开发的,具有很好的跨平台特性,其核心是分布式文件系 ...
- 运维技巧-Nginx日志格式
1.说一说 当你安装完nginx,输出的格式是比较乱的,这样我们就需要自己去定义一下,自己看着舒服的格式. 2.Nginx日志字段 $remote_addr 记录客户端IP,但她的值不是客户端提供的, ...
- [Codeforces]856E - Satellites
传送门 做法:每个卫星分别用连到左边圆与x轴交点的线的斜率和连到右边交点的线旋转90度的斜率可以表示成一个区间,问题转化成支持加/删区间和询问其中两个区间是否有交以及它们的交是否被其他区间包含.我一开 ...
- bzoj 5287: [Hnoi2018]毒瘤
Description Solution \(dfs\) 出一棵生成树之后,多出来的边就都是反祖边了 把反祖边两个端点都拿出来,就会得到最多 \(k=2*(m-n+1)\) 个关键点 除了关键点以外的 ...
- 例10-11 uva11181
题意:n个人去逛超市,第i个人买东西的概率是pi,,计算每个人实际买了东西的概率 思路: 搜索标处理所以的情况,得出所有概率和all(开始天真的以为是1 - -,就说怎么案例看着怪怪的),用tt[i] ...
- hdu 1166 线段树(sum+单点修改)
敌兵布阵 Time Limit: 2000/1000 MS (Java/Others) Memory Limit: 65536/32768 K (Java/Others) Total Submi ...
- bzoj1044[HAOI2008]木棍分割 单调队列优化dp
1044: [HAOI2008]木棍分割 Time Limit: 10 Sec Memory Limit: 162 MBSubmit: 4314 Solved: 1664[Submit][Stat ...