当前位置:首页 > 文章列表 > 文章 > java教程 > Java Stream 分组统计如何避免重复遍历:Collectors.groupingBy 的性能与内存取舍

Java Stream 分组统计如何避免重复遍历:Collectors.groupingBy 的性能与内存取舍

来源:17golang原创 2026-08-25 09:43:32 0浏览 收藏

订单列表已经在数据库里按时间查出来了,业务代码却又连续遍历几遍:先按状态分组,再统计金额,最后还要取每组数量。数据量一大,这种写法的代价不在某一行 API,而在中间集合不断膨胀。更稳妥的做法是先明确结果形状,再选择 Collectors.groupingBy 和下游收集器,让一次归约直接产出需要的数据。

如果最终只需要每个状态的数量或金额,不要先把每个分组都收集成完整的 List;优先使用 counting()、summingLong() 或自定义下游收集器。这样可以少保留一层中间对象,但并不意味着 Stream 自动减少了源数据本身的内存占用。

实践要点
  • 只要统计结果,就用下游收集器直接归约。
  • 需要明细列表时,才接受每组 List 的内存成本。
  • 并行流要结合数据量、分组基数和合并成本实测。

先把“分组结果”定义清楚

下面用一个不可变的订单记录作为例子。状态只有 PAID、REFUNDED 和 PENDING,金额用分为单位的 long 保存,避免在归约过程中引入浮点误差。

record Order(String status, long amountCent) {}

List orders = List.of(
    new Order("PAID", 12900),
    new Order("PAID", 8800),
    new Order("REFUNDED", 12900),
    new Order("PENDING", 4500)
);

如果页面要展示每个状态的订单明细,结果类型应该是 Map>;如果只展示数量和成交金额,结果就不该携带完整订单对象。先确定这一点,后面的收集器选择会简单很多。

需要明细时才使用 List 分组

最直观的写法是:

Map> byStatus = orders.stream()
    .collect(Collectors.groupingBy(Order::status));

它的优点是可读性好,后续要筛选某个状态的订单也方便。代价也很明确:每条订单至少要被某个分组列表引用一次,分组数量和列表对象都会增加。如果只为了算数量再遍历这些列表,就形成了不必要的中间结构。

Java Stream 按订单状态分组后形成明细列表与统计结果的结构对比示意图

只统计数量和金额时直接使用下游收集器

数量统计可以把下游收集器改成 counting():

Map countByStatus = orders.stream()
    .collect(Collectors.groupingBy(
        Order::status,
        Collectors.counting()
    ));

金额合计同理:

Map amountByStatus = orders.stream()
    .collect(Collectors.groupingBy(
        Order::status,
        Collectors.summingLong(Order::amountCent)
    ));

这两段代码都不会为每个状态保留订单列表。注意,groupingBy 仍然要建立一个结果 Map,源集合也仍然存在;它节省的是分组明细的额外引用和列表结构,不是把所有内存成本都变成零。

一个归约同时得到多个指标

页面经常既要数量又要金额。此时不要对同一源集合做两次分组,可以使用 teeing 将两个下游结果合并。它需要 Java 12 或更高版本:

record StatusStat(long count, long amountCent) {}

Map stats = orders.stream()
    .collect(Collectors.groupingBy(
        Order::status,
        Collectors.teeing(
            Collectors.counting(),
            Collectors.summingLong(Order::amountCent),
            StatusStat::new
        )
    ));

如果项目还停留在 Java 8,可以先保留一次分组后的列表,或者写一个小型可变累加器。迁移时要把版本边界写进构建检查,不能只在本地 JDK 21 上编译通过就结束。

并行流不是默认的性能开关

groupingByConcurrent 可以在并行流场景下使用并发 Map,但它并不会自动让所有分组统计更快:

Map countByStatus = orders.parallelStream()
    .collect(Collectors.groupingByConcurrent(
        Order::status,
        Collectors.counting()
    ));

数据量小、状态种类少、单条计算很轻时,拆分任务和合并结果的成本可能超过收益。状态种类很多时,线程竞争也会改变结果。建议固定数据生成方式,分别测量顺序流、并行流和普通循环的耗时,并观察堆占用,而不是只看一次请求的墙上时间。

用结果检查来防止“统计正确但模型错误”

上线前至少检查三个边界:空集合返回空 Map;未知状态是否应该归入 OTHER;金额是否可能超出 long 的业务范围。还要核对统计总数与源数据数量一致:

long groupedCount = countByStatus.values().stream()
    .mapToLong(Long::longValue)
    .sum();
if (groupedCount != orders.size()) {
    throw new IllegalStateException("grouped count does not match source size");
}
Java Stream 分组统计完成后核对总数量与金额边界的检查流程示意图

常见误区与选择建议

为了一个 count 先收集全部明细

如果没有后续明细需求,直接使用 counting()。这不是为了追求代码短,而是让结果类型准确表达页面真正需要的数据。

把 groupingBy 换成并发版本就算优化

并发收集器适合有足够计算量且分组键竞争可接受的场景。先做基准,再决定是否引入并行流;不要用它掩盖数据库查询、对象创建或序列化的瓶颈。

忽略 Map 的键顺序

默认 groupingBy 不承诺业务展示顺序。如果接口需要固定顺序,显式传入 LinkedHashMap::new,或在输出层按状态枚举排序,不要依赖某次运行的偶然结果。

延伸问答

分组后还需要每组最大金额怎么办?

可以使用 Collectors.maxBy,并在输出层处理 Optional。若要同时保留明细和统计,建议把需求拆成两个明确的结果对象,避免让一个 Map 承担互相冲突的生命周期。

什么时候普通 for 循环更合适?

需要多个字段一起累加、对异常输入做精细分支,或需要严格控制对象分配时,普通循环往往更直白。Stream 的价值是表达归约关系,不是替代所有循环。

最后的落地清单

先按最终消费方式选择 List、counting() 或 summingLong();再确认 JDK 版本是否支持所用收集器;最后用空集合、未知键、大数据量和并行对照样本复查结果。只要把“是否需要明细”这一个问题问清楚,groupingBy 的内存取舍通常就不会再靠猜。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
PHP DateTimeImmutable 怎么处理月底加一个月:日期溢出、modify 与显式校正PHP DateTimeImmutable 怎么处理月底加一个月:日期溢出、modify 与显式校正
上一篇
PHP DateTimeImmutable 怎么处理月底加一个月:日期溢出、modify 与显式校正
Linux swap 使用升高怎么判断:vmstat 的 si/so、swappiness 与回收边界
下一篇
Linux swap 使用升高怎么判断:vmstat 的 si/so、swappiness 与回收边界
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    395次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    476次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    481次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    426次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    251次使用