Python集合去重原理与运算全解析
2026-03-24 19:09:46
0浏览
收藏
Python集合(set)凭借哈希表实现高效去重与成员查找(平均O(1)),但其“快”背后有严格约束:元素必须可哈希(故列表等可变类型被拒)、不保留插入顺序(即便Python 3.7+ dict已有序)、且大量操作会就地修改原集合;掌握其原理——从为何不能存列表、如何优雅保序去重,到运算符与方法的灵活性差异、哈希冲突对性能的影响,再到那些看似无害却可能引发RuntimeError的陷阱——才能真正驾驭set,避免在关键逻辑中因“看似简洁”的写法而遭遇隐蔽崩溃。

为什么 set() 去重会丢掉顺序,且不能放列表?
因为 set 依赖哈希(hash)判断相等性:元素必须可哈希(immutable),且内部用哈希表实现,不记录插入顺序(Python 3.7+ 的 dict 有序,但 set 仍不保证)。列表是可变对象,没有固定哈希值,直接塞进 set 会报 TypeError: unhashable type: 'list'。
- 想保留顺序去重?用
dict.fromkeys(items).keys()或手动遍历 +seen = set()辅助判断 - 要对含列表的数据去重?先转成不可变形式,比如
tuple(item)(前提是 item 里所有元素都可哈希) - 自定义类想进
set?必须正确定义__hash__和__eq__,且两者逻辑一致
set 的数学运算符和方法有什么区别?
符号写法(|、&、-、^)要求两边都是 set;方法名(.union()、.intersection() 等)允许传入任意可迭代对象,更灵活。但注意:.difference() 是左减右,而 - 同样是左减右 —— 这点容易和 ^(对称差)混淆。
{1,2} | [2,3]→ 报错;但{1,2}.union([2,3])→{1,2,3}.update()是就地修改(类似+=),.union()返回新集合^和.symmetric_difference()等价,但后者也接受多个参数:s.symmetric_difference(t, u)
用 in 判断成员比用 list 快多少?原理是什么?
平均时间复杂度:set 是 O(1),list 是 O(n)。因为 set 底层是哈希表,通过哈希值直接定位桶;而 list 只能逐个比较。当数据量超过几百,差异就明显了;万级数据下,set 查找可能快百倍以上。
- 别为了“看起来整洁”把小列表硬转
set再查 —— 创建set本身有开销(O(n)),只查一次不划算 - 如果频繁查、数据不变,提前建好
set;如果数据动态增删,注意set的增删也是平均 O(1) - 哈希冲突多时(比如大量自定义对象哈希值撞了),性能会退化到接近 O(n),这时得检查
__hash__实现是否均匀
哪些常见操作看似安全,实则改变原 set?
很多方法名带 update 或以 _ 结尾的(如 .intersection_update()),都是就地修改。还有 .add()、.remove()、.discard()、.pop() —— 全部改原集合。唯一“安全”的是纯函数式操作:用运算符或不带 update 的方法(如 .copy()、.union())。
s.intersection_update(t)修改s,等价于s &= t;而s.intersection(t)不动s.pop()随机删一个并返回,不是删最后一个(set无序);删空集合会抛KeyError- 循环中修改
set(比如边遍历边.remove())会触发RuntimeError: Set changed size during iteration
set 的能力边界:它快,但只认“相等性”;它简洁,但容错低——一个不可哈希的对象、一次意外的就地修改、甚至哈希函数写歪了,都可能让逻辑在看似无关的地方突然崩掉。今天关于《Python集合去重原理与运算全解析》的内容就介绍到这里了,是不是学起来一目了然!想要了解更多关于的内容请关注golang学习网公众号!
B站账号注册时长怎么查?周年成就查询教程
- 上一篇
- B站账号注册时长怎么查?周年成就查询教程
- 下一篇
- Workerman并发低?试试event扩展优化方法
查看更多
最新文章
-
- 文章 · python教程 | 2小时前 |
- Python asyncio TaskGroup 一个任务失败时其他任务怎么收尾
- 475浏览 收藏
-
- 文章 · python教程 | 3小时前 |
- Python Path.iterdir 遇到权限错误时怎么继续扫描
- 468浏览 收藏
-
- 文章 · python教程 | 7小时前 |
- Python 3.14 free-threaded 构建选择前要检查哪些扩展兼容性
- 270浏览 收藏
-
- 文章 · python教程 | 7小时前 |
- Python multiprocessing spawn 模式为什么需要 main 保护
- 488浏览 收藏
-
- 文章 · python教程 | 8小时前 |
- Python typing Protocol 怎么为第三方对象定义最小接口
- 298浏览 收藏
-
- 文章 · python教程 | 10小时前 |
- Python subprocess 管道死锁时怎么读取 stdout 和 stderr
- 459浏览 收藏
-
- 文章 · python教程 | 12小时前 | 性能优化 · 多线程 · Python教程 · 日志处理 · Python logging queue.Queue 后台线程 QueueHandler QueueListener
- Python logging QueueHandler 怎么把日志写入后台线程
- 174浏览 收藏
-
- 文章 · python教程 | 13小时前 |
- Python zoneinfo 找不到时区数据库时怎么部署
- 326浏览 收藏
查看更多
课程推荐
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
查看更多
AI推荐
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
- 18次使用
-
- SuperCLUE
- SuperCLUE是权威的中文大语言模型综合评测基准,涵盖语言理解、知识应用、AI Agent智能体及安全性等12项核心能力。通过多轮对话与客观测试,定期发布榜单与技术报告,为模型研发、优化及行业选型提供科学依据。
- 174次使用
-
- C-Eval
- 深入了解C-Eval中文评估套件,涵盖52个学科与4级难度。本文详解其功能特点、Zero-shot/Few-shot使用方法及代码示例,助您全面评测LLM中文理解与泛化能力。
- 109次使用
-
- AI Prompt Library
- 探索AI Prompt Library免费资源库,涵盖营销、写作及多场景AI提示词。兼容ChatGPT、Claude等工具,一键复制优化输出,提升工作效率。
- 37次使用
-
- Generrated
- Generrated汇集9300+张DALL·E生成图像及对应提示词,支持查看完整图集、对比DALL·E 2与3版本差异,是AI绘图新手学习Prompt设计与获取创作灵感的实用工具。
- 16次使用
查看更多
相关文章
-
- Python sqlite3 Connection serialize 怎么导出数据库快照:备份窗口、内存占用与恢复校验
- 2026-08-26 501浏览
-
- Python监控网页状态:requests异常处理实战
- 2026-05-29 501浏览
-
- TensorFlow模型部署为API的TF Serving方法
- 2026-05-26 501浏览
-
- Python字符串编码转换:encode与decode详解
- 2026-05-16 501浏览
-
- TensorFlow裁剪无用算子方法详解
- 2026-05-15 501浏览
