numpyufuncreduceat分组归约教程
在文章实战开发的过程中,我们经常会遇到一些这样那样的问题,然后要卡好半天,等问题解决了才发现原来一些细节知识点还是没有掌握好。今天golang学习网就整理分享《numpy np.ufunc.reduceat 分组归约详解》,聊聊,希望可以帮助到正在努力赚钱的你。
np.ufunc.reduceat 的核心行为是按索引切片归约:以 indices 中非递减整数为左闭右开切片起点,对每段调用 ufunc 归约,最后一段自动延至数组末尾。

np.ufunc.reduceat 的核心行为是什么
np.ufunc.reduceat 不是按值分组,而是按索引切片归约:它在指定起始位置对数组做“左闭右开”切片,然后对每个切片调用 ufunc(如 np.add、np.maximum)归约。关键点在于:分组边界由索引数组决定,不是由数据值决定。
- 输入
indices必须是非递减的整数数组 - 若
indices[i+1] <= indices[i],该段归约为单个元素(即a[indices[i]]) - 最后一段自动延伸到数组末尾(不需显式补长度)
比如 np.add.reduceat(a, [0,2,4]) 等价于:[a[0]+a[1], a[2]+a[3], a[4]+a[5]+...](假设 a 长度 ≥6)
如何把“按值分组”转成“按索引分组”
真实场景中,你通常有类似 group_ids = np.array([0,0,1,1,1,2]) 这样的标签,想按值聚合。这时不能直接传 group_ids 给 reduceat —— 它要的是每组第一个元素的索引。
- 先用
np.unique获取分组起始位置:_, idx_start = np.unique(group_ids, return_index=True)
- 若需包含末尾边界,追加数组长度:
indices = np.append(idx_start, len(group_ids))
- 再用
reduceat对目标数组归约:result = np.add.reduceat(values, indices[:-1])
注意:必须用 indices[:-1] 作为 reduceat 的 indices 参数,因为 reduceat 自动处理最后一段到末尾。
常见错误和边界情况indices 中出现重复或递减索引(如 [0,2,2,5])会导致第二段归约仅取 a[2],容易误以为漏数据- 如果分组不连续(如
group_ids = [0,1,0]),unique(..., return_index=True) 只返回首次出现位置,无法用于非序贯分组 —— 此时 reduceat 不适用,应改用 np.bincount 或 pandas.groupby values 和 group_ids 长度不一致会静默出错(广播或截断),务必校验:len(values) == len(group_ids)- 使用
np.minimum.reduceat 时,若某段为空(如 indices = [3,3]),结果为 values[3],不是无穷大 —— 它不检查段长
和 bincount 比较:什么情况下该选 reduceat
indices 中出现重复或递减索引(如 [0,2,2,5])会导致第二段归约仅取 a[2],容易误以为漏数据group_ids = [0,1,0]),unique(..., return_index=True) 只返回首次出现位置,无法用于非序贯分组 —— 此时 reduceat 不适用,应改用 np.bincount 或 pandas.groupbyvalues 和 group_ids 长度不一致会静默出错(广播或截断),务必校验:len(values) == len(group_ids)np.minimum.reduceat 时,若某段为空(如 indices = [3,3]),结果为 values[3],不是无穷大 —— 它不检查段长np.bincount 要求 group_id 是非负小整数,且隐式归约方式固定为求和;reduceat 则无类型限制,支持任意 ufunc,也支持 float / str(只要 ufunc 支持)。
- 你需要
np.maximum或np.logical_or归约?→ 用reduceat - group_id 是字符串或负数?→ 先映射为整数索引,再用
reduceat(比转 pandas 更轻量) - 数据已按 group_id 排序,且分组密集?→
reduceat是零拷贝、纯 NumPy 向量化方案 - 分组稀疏、id 范围极大(如 ID > 1e6)?→
bincount会分配巨量内存,reduceat更稳
实际写的时候,最容易被忽略的是:reduceat 的 indices 必须严格对应“每组首个元素位置”,且必须升序;而多数人第一反应是传 group_id 数组本身——这直接导致结果完全不可读。
以上就是《numpyufuncreduceat分组归约教程》的详细内容,更多关于的资料请关注golang学习网公众号!
Word第三页开始加页码的设置方法
- 上一篇
- Word第三页开始加页码的设置方法
- 下一篇
- 增值税发票查验平台入口详解
-
- 文章 · python教程 | 3小时前 | csv · python · DictWriter ·
- Python csv.DictWriter 缺少字段时如何设置 extrasaction
- 274浏览 收藏
-
- 文章 · python教程 | 5小时前 |
- Python pathlib Path.resolve 遇到不存在路径如何处理
- 278浏览 收藏
-
- 文章 · python教程 | 6小时前 |
- Python asyncio.timeout_at 如何用绝对截止时间包住任务
- 470浏览 收藏
-
- 文章 · python教程 | 9小时前 | 资源管理 · python · memoryview · 缓冲区协议 · 性能编程 · Python memoryview memoryview.release Python 缓冲区协议 bytearray BufferError mmap 资源释放
- Python memoryview 使用后如何释放底层资源
- 275浏览 收藏
-
- 文章 · python教程 | 11小时前 |
- Python array 类型码不匹配时怎样安全转换数值
- 311浏览 收藏
-
- 文章 · python教程 | 12小时前 |
- Python mmap 修改文件后如何保证变更刷回磁盘
- 415浏览 收藏
-
- 文章 · python教程 | 14小时前 | 网络编程 · Socket · python · Python socket 端口绑定 SO_REUSEADDR
- Python socket 设置 SO_REUSEADDR 后端口仍无法绑定怎么办
- 154浏览 收藏
-
- 文章 · python教程 | 15小时前 | 并发 · python · 线程安全 · http.server · Python http.server threading.Lock ThreadingHTTPServer
- Python http.server 共享状态时如何避免线程请求互相覆盖
- 344浏览 收藏
-
- 文章 · python教程 | 16小时前 |
- Python urllib.parse.quote_plus 处理空格和加号有什么区别
- 453浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
-
- PubMedQA
- 深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
- 31次使用
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
- 132次使用
-
- LMArena
- LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
- 68次使用
-
- HELM
- 深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
- 24次使用
-
- CMMLU
- 深入了解CMMLU中文评估基准,涵盖67个学科主题,提供数据集下载、Zero-shot/Five-shot评估方法及排行榜,助力优化中文语言模型性能。
- 14次使用
-
- Python sqlite3 Connection serialize 怎么导出数据库快照:备份窗口、内存占用与恢复校验
- 2026-08-26 501浏览
-
- Python监控网页状态:requests异常处理实战
- 2026-05-29 501浏览
-
- TensorFlow模型部署为API的TF Serving方法
- 2026-05-26 501浏览
-
- Python字符串编码转换:encode与decode详解
- 2026-05-16 501浏览
-
- TensorFlow裁剪无用算子方法详解
- 2026-05-15 501浏览

