Python对象如何序列化?避开循环引用有这些妙招
Python对象序列化是数据持久化和传输的关键技术,本文深入探讨了`pickle`和`json`两种常用的序列化方法。`pickle`模块功能强大,支持复杂对象和自定义类的序列化,但需警惕安全风险;`json`模块则更安全,适用于跨语言兼容场景,但仅限于内置数据类型。针对Python对象序列化时常见的循环引用问题,文章提供了手动打破循环引用的实用技巧,避免程序卡死。此外,还介绍了通过`__getstate__`和`__setstate__`方法自定义序列化过程,灵活控制属性的保存与恢复。掌握这些技巧,能让你在安全性、性能、兼容性和可读性之间做出明智选择,高效处理Python对象的序列化与反序列化。
Python中序列化对象的方法主要有pickle和json,针对安全性、性能、兼容性和可读性进行选择。1.pickle模块支持复杂对象和自定义类的序列化,但存在安全风险,尤其在反序列化不可信数据时;2.json模块更安全,但仅限于内置数据类型的序列化,适用于跨语言兼容和文本可读性要求高的场景;3.处理循环引用时,pickle默认跟踪对象避免重复序列化,但复杂情况下建议手动打破循环,如将引用设为None后再恢复;4.自定义序列化可通过__getstate__和__setstate__方法实现,灵活控制属性的保存与恢复过程。综合考虑需求后合理选用方法,若仅Python内部使用且追求性能可选pickle,否则优先用json。

Python中序列化对象,简单说就是把对象变成字符串或者字节流,方便存储或传输。避免循环引用,得用点技巧,不然会卡死。

解决方案
Python提供了pickle模块来做序列化,但pickle容易出安全问题,特别是反序列化不可信数据的时候。更安全的选择是json,但json只能序列化Python内置的一些类型,比如字典、列表、字符串、数字等。如果你的对象比较复杂,或者自定义的类,json就搞不定了。

pickle的基本用法:

import pickle
class MyClass:
def __init__(self, data):
self.data = data
obj = MyClass(123)
# 序列化到文件
with open('my_object.pkl', 'wb') as f:
pickle.dump(obj, f)
# 从文件反序列化
with open('my_object.pkl', 'rb') as f:
loaded_obj = pickle.load(f)
print(loaded_obj.data) # 输出: 123避免循环引用,pickle其实自带了处理机制。它会跟踪已经序列化的对象,如果遇到重复的对象,就不会再次序列化,而是保存一个引用。但如果循环引用过于复杂,可能会导致性能问题。
一个更靠谱的方法是手动打破循环引用。在序列化之前,把循环引用的地方设置为None,序列化之后再恢复。
import pickle
class Node:
def __init__(self, name):
self.name = name
self.parent = None
self.children = []
def add_child(self, child):
self.children.append(child)
child.parent = self
node1 = Node("Node 1")
node2 = Node("Node 2")
node3 = Node("Node 3")
node1.add_child(node2)
node2.add_child(node3)
node3.add_child(node1) # 循环引用
# 序列化前打破循环引用
node3.parent = None
# 序列化
serialized_data = pickle.dumps(node1)
# 反序列化
loaded_node1 = pickle.loads(serialized_data)
# 恢复循环引用(可选,如果需要的话)
# loaded_node3 = loaded_node1.children[0].children[0]
# loaded_node3.parent = loaded_node1如何选择合适的序列化方法?
选择序列化方法,要考虑几个因素:安全性、性能、兼容性和可读性。
- 安全性: 如果要序列化的数据来自不可信的来源,千万别用
pickle。json更安全,但只能序列化简单的数据类型。 - 性能:
pickle通常比json快,但如果对象结构复杂,json可能更有效率。 - 兼容性:
json是一种通用的数据格式,在不同的编程语言和平台之间都有很好的兼容性。pickle只能在Python中使用。 - 可读性:
json是文本格式,可读性好。pickle是二进制格式,可读性差。
如果对性能要求不高,而且数据结构简单,json是首选。如果性能是关键,而且数据只在Python中使用,可以考虑pickle,但一定要注意安全问题。
如何自定义序列化和反序列化过程?
有时候,默认的序列化方式可能不满足需求。比如,你可能想忽略某些属性,或者对某些属性进行特殊处理。
pickle提供了__getstate__和__setstate__两个方法,可以让你自定义序列化和反序列化的过程。
__getstate__:在序列化之前被调用,返回一个对象的状态。你可以选择返回哪些属性,或者对属性进行修改。__setstate__:在反序列化之后被调用,接收__getstate__返回的状态。你可以用这个状态来恢复对象。
import pickle
class MyClass:
def __init__(self, a, b, c):
self.a = a
self.b = b
self.c = c
def __getstate__(self):
# 只序列化a和b
return {'a': self.a, 'b': self.b}
def __setstate__(self, state):
# 恢复a和b,c设置为默认值
self.a = state.get('a', 0)
self.b = state.get('b', 0)
self.c = -1 # 默认值
obj = MyClass(1, 2, 3)
# 序列化
serialized_data = pickle.dumps(obj)
# 反序列化
loaded_obj = pickle.loads(serialized_data)
print(loaded_obj.a, loaded_obj.b, loaded_obj.c) # 输出: 1 2 -1这样,你就可以灵活地控制对象的序列化和反序列化过程,满足各种特殊需求。
文中关于Python,JSON,序列化,pickle,循环引用的知识介绍,希望对你的学习有所帮助!若是受益匪浅,那就动动鼠标收藏这篇《Python对象如何序列化?避开循环引用有这些妙招》文章吧,也可关注golang学习网公众号了解相关技术文章。
JS高阶函数看不懂?一篇文章帮你整透彻!
- 上一篇
- JS高阶函数看不懂?一篇文章帮你整透彻!
- 下一篇
- Go语言高并发优化全攻略:性能瓶颈+实战技巧
-
- 文章 · python教程 | 3分钟前 |
- Python中sys.stdout详解与使用技巧
- 318浏览 收藏
-
- 文章 · python教程 | 9分钟前 |
- Python结果模式处理可选属性详解
- 418浏览 收藏
-
- 文章 · python教程 | 1小时前 | Python3 打包 pyinstaller 代码加密 py2exe
- Python3代码无法用py2exe打包加密
- 255浏览 收藏
-
- 文章 · python教程 | 1小时前 |
- 动态弹窗滚动与元素定位问题解决方法
- 297浏览 收藏
-
- 文章 · python教程 | 1小时前 |
- Python读取DICOM医疗文件方法解析
- 286浏览 收藏
-
- 文章 · python教程 | 1小时前 |
- 币安API止盈止损查询技巧
- 174浏览 收藏
-
- 文章 · python教程 | 1小时前 | Matplotlib Python绘图 画布 子图 plt.figure
- Python绘图画布实用技巧分享
- 319浏览 收藏
-
- 文章 · python教程 | 2小时前 |
- Python字符串字面量详解与用法
- 294浏览 收藏
-
- 文章 · python教程 | 2小时前 |
- Pythonconfigparser配置读取教程
- 345浏览 收藏
-
- 文章 · python教程 | 2小时前 |
- Python传递不定参数方法详解
- 464浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
-
- ChatExcel酷表
- ChatExcel酷表是由北京大学团队打造的Excel聊天机器人,用自然语言操控表格,简化数据处理,告别繁琐操作,提升工作效率!适用于学生、上班族及政府人员。
- 3183次使用
-
- Any绘本
- 探索Any绘本(anypicturebook.com/zh),一款开源免费的AI绘本创作工具,基于Google Gemini与Flux AI模型,让您轻松创作个性化绘本。适用于家庭、教育、创作等多种场景,零门槛,高自由度,技术透明,本地可控。
- 3394次使用
-
- 可赞AI
- 可赞AI,AI驱动的办公可视化智能工具,助您轻松实现文本与可视化元素高效转化。无论是智能文档生成、多格式文本解析,还是一键生成专业图表、脑图、知识卡片,可赞AI都能让信息处理更清晰高效。覆盖数据汇报、会议纪要、内容营销等全场景,大幅提升办公效率,降低专业门槛,是您提升工作效率的得力助手。
- 3426次使用
-
- 星月写作
- 星月写作是国内首款聚焦中文网络小说创作的AI辅助工具,解决网文作者从构思到变现的全流程痛点。AI扫榜、专属模板、全链路适配,助力新人快速上手,资深作者效率倍增。
- 4531次使用
-
- MagicLight
- MagicLight.ai是全球首款叙事驱动型AI动画视频创作平台,专注于解决从故事想法到完整动画的全流程痛点。它通过自研AI模型,保障角色、风格、场景高度一致性,让零动画经验者也能高效产出专业级叙事内容。广泛适用于独立创作者、动画工作室、教育机构及企业营销,助您轻松实现创意落地与商业化。
- 3803次使用
-
- Flask框架安装技巧:让你的开发更高效
- 2024-01-03 501浏览
-
- Django框架中的并发处理技巧
- 2024-01-22 501浏览
-
- 提升Python包下载速度的方法——正确配置pip的国内源
- 2024-01-17 501浏览
-
- Python与C++:哪个编程语言更适合初学者?
- 2024-03-25 501浏览
-
- 品牌建设技巧
- 2024-04-06 501浏览

