Python集合去重原理与运算全解析
2026-03-24 19:09:46
0浏览
收藏
Python集合(set)凭借哈希表实现高效去重与成员查找(平均O(1)),但其“快”背后有严格约束:元素必须可哈希(故列表等可变类型被拒)、不保留插入顺序(即便Python 3.7+ dict已有序)、且大量操作会就地修改原集合;掌握其原理——从为何不能存列表、如何优雅保序去重,到运算符与方法的灵活性差异、哈希冲突对性能的影响,再到那些看似无害却可能引发RuntimeError的陷阱——才能真正驾驭set,避免在关键逻辑中因“看似简洁”的写法而遭遇隐蔽崩溃。

为什么 set() 去重会丢掉顺序,且不能放列表?
因为 set 依赖哈希(hash)判断相等性:元素必须可哈希(immutable),且内部用哈希表实现,不记录插入顺序(Python 3.7+ 的 dict 有序,但 set 仍不保证)。列表是可变对象,没有固定哈希值,直接塞进 set 会报 TypeError: unhashable type: 'list'。
- 想保留顺序去重?用
dict.fromkeys(items).keys()或手动遍历 +seen = set()辅助判断 - 要对含列表的数据去重?先转成不可变形式,比如
tuple(item)(前提是 item 里所有元素都可哈希) - 自定义类想进
set?必须正确定义__hash__和__eq__,且两者逻辑一致
set 的数学运算符和方法有什么区别?
符号写法(|、&、-、^)要求两边都是 set;方法名(.union()、.intersection() 等)允许传入任意可迭代对象,更灵活。但注意:.difference() 是左减右,而 - 同样是左减右 —— 这点容易和 ^(对称差)混淆。
{1,2} | [2,3]→ 报错;但{1,2}.union([2,3])→{1,2,3}.update()是就地修改(类似+=),.union()返回新集合^和.symmetric_difference()等价,但后者也接受多个参数:s.symmetric_difference(t, u)
用 in 判断成员比用 list 快多少?原理是什么?
平均时间复杂度:set 是 O(1),list 是 O(n)。因为 set 底层是哈希表,通过哈希值直接定位桶;而 list 只能逐个比较。当数据量超过几百,差异就明显了;万级数据下,set 查找可能快百倍以上。
- 别为了“看起来整洁”把小列表硬转
set再查 —— 创建set本身有开销(O(n)),只查一次不划算 - 如果频繁查、数据不变,提前建好
set;如果数据动态增删,注意set的增删也是平均 O(1) - 哈希冲突多时(比如大量自定义对象哈希值撞了),性能会退化到接近 O(n),这时得检查
__hash__实现是否均匀
哪些常见操作看似安全,实则改变原 set?
很多方法名带 update 或以 _ 结尾的(如 .intersection_update()),都是就地修改。还有 .add()、.remove()、.discard()、.pop() —— 全部改原集合。唯一“安全”的是纯函数式操作:用运算符或不带 update 的方法(如 .copy()、.union())。
s.intersection_update(t)修改s,等价于s &= t;而s.intersection(t)不动s.pop()随机删一个并返回,不是删最后一个(set无序);删空集合会抛KeyError- 循环中修改
set(比如边遍历边.remove())会触发RuntimeError: Set changed size during iteration
set 的能力边界:它快,但只认“相等性”;它简洁,但容错低——一个不可哈希的对象、一次意外的就地修改、甚至哈希函数写歪了,都可能让逻辑在看似无关的地方突然崩掉。今天关于《Python集合去重原理与运算全解析》的内容就介绍到这里了,是不是学起来一目了然!想要了解更多关于的内容请关注golang学习网公众号!
B站账号注册时长怎么查?周年成就查询教程
- 上一篇
- B站账号注册时长怎么查?周年成就查询教程
- 下一篇
- Workerman并发低?试试event扩展优化方法
查看更多
最新文章
-
- 文章 · python教程 | 14小时前 |
- Python contextvars Token 怎样撤销临时上下文修改
- 353浏览 收藏
-
- 文章 · python教程 | 15小时前 |
- Python io.BufferedReader.peek 怎样预读字节
- 356浏览 收藏
-
- 文章 · python教程 | 15小时前 | 面向对象 · Python教程 · 字段默认值 slots Python dataclasses 继承字段 weakref_slot
- Python dataclasses slots 与继承字段的设计
- 399浏览 收藏
-
- 文章 · python教程 | 15小时前 |
- Python inspect.get_annotations 怎样安全读取函数注解
- 440浏览 收藏
-
- 文章 · python教程 | 15小时前 | 网络编程 · 标准库 · Python教程 · Python 网段判断 ipaddress IPv4Network IPv4Address
- Python ipaddress.IPv4Network 怎样判断地址是否属于网段
- 365浏览 收藏
-
- 文章 · python教程 | 15小时前 | 标准库 · Python教程 · Python 附件 MIME email.message EmailMessage add_attachment
- Python email.message.EmailMessage 怎样添加 MIME 附件
- 170浏览 收藏
-
- 文章 · python教程 | 15小时前 | 标准库 · Python教程 · Python 命令行 位置参数 argparse parse_intermixed_args
- Python argparse.parse_intermixed_args 怎样处理混合位置参数
- 342浏览 收藏
-
- 文章 · python教程 | 15小时前 | Python教程 · Python 保留关键字 str.isidentifier keyword.iskeyword 名称校验
- Python str.isidentifier 为什么不能排除保留关键字
- 282浏览 收藏
-
- 文章 · python教程 | 15小时前 | 字符串 · Python教程 · Python 字符替换 str.maketrans str.translate 字符串清理
- Python str.maketrans 怎样同时替换字符并删除指定符号
- 264浏览 收藏
-
- 文章 · python教程 | 15小时前 | 字符串 · Python教程 · Python 制表符 str.expandtabs tabsize 字符串排版
- Python str.expandtabs 怎样按制表位展开空格
- 284浏览 收藏
查看更多
课程推荐
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
查看更多
AI推荐
-
- PubMedQA
- 深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
- 764次使用
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
- 761次使用
-
- LMArena
- LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
- 843次使用
-
- HELM
- 深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
- 814次使用
-
- MMBench
- MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
- 641次使用
查看更多
相关文章
-
- Python xml.dom.minidom.unlink 怎样释放不再使用的 DOM 树引用
- 2026-10-27 501浏览
-
- Python typing 怎样用 TypeIs 缩小类型
- 2026-10-24 501浏览
-
- Python sqlite3 Connection serialize 怎么导出数据库快照:备份窗口、内存占用与恢复校验
- 2026-08-26 501浏览
-
- Python监控网页状态:requests异常处理实战
- 2026-05-29 501浏览
-
- TensorFlow模型部署为API的TF Serving方法
- 2026-05-26 501浏览

