
本文介绍如何在 Java 中对 List 按 productId 分组,并在每组内保留 productTitle 字典序最小的那一条记录(即“去重但保优”),适用于需基于业务规则(如字面优先)筛选唯一主键数据的场景。
本文介绍如何在 Java 中对 List
在实际系统集成中,我们常遇到来自遗留系统的重复数据:同一 productId 对应多个 Product 实例(如 productId=3 同时有 "furniture" 和 "TV"),而业务要求仅保留 productTitle 字典序最小的那一条(即“首优项”),其余重复项全部剔除。这不同于简单的 distinct() 去重,而是“分组 + 局部优选”的典型需求。
核心思路是两阶段流式处理:
- 按 productId 分组,并在每组内使用 Collectors.maxBy(Comparator.comparing(Product::getProductTitle)) —— 注意:为获取字典序 最小 项,应使用 minBy;原答案中误用 maxBy,此处已修正并强调;
- 安全解包 Optional,过滤空值并收集为新列表。
✅ 正确实现如下(Java 17+,兼容 Java 8 可将 .toList() 替换为 .collect(Collectors.toList())):
分析 Java Spring Boot 后端 Controller 代码,自动生成 Markdown 格式的接口文档。当用户说“生成 Java 接口文档”、“生成 API 文档”、“从 Spring 代码生成文档”时触发。
立即学习“Java免费学习笔记(深入)”;
import java.util.*;
import java.util.stream.Collectors;
List<Product> filteredProducts = products.stream()
.collect(Collectors.groupingBy(
Product::getProductId,
Collectors.minBy(Comparator.comparing(Product::getProductTitle))
))
.values() // Collection<Optional<Product>>
.stream()
.filter(Optional::isPresent)
.map(Optional::get)
.toList();? 关键说明:
- 使用 minBy(而非 maxBy)确保选出 productTitle 字典序 最小 的项(如 "furniture"
- groupingBy 配合 minBy 返回 Map
>,天然处理空组(如某 productId 无数据),避免 NoSuchElementException; - filter(Optional::isPresent) 是防御性编程必需步骤,防止上游数据异常导致运行时崩溃;
- 若需保持原始插入顺序(即结果中 productId 出现顺序与首次出现位置一致),可改用 LinkedHashMap 工厂方法:
Collectors.groupingBy(
Product::getProductId,
LinkedHashMap::new, // 保持分组键插入顺序
Collectors.minBy(Comparator.comparing(Product::getProductTitle))
)? 扩展建议:
- 若比较逻辑更复杂(如忽略大小写、按多字段联合排序),可自定义 Comparator:
Comparator.comparing(Product::getProductTitle, String.CASE_INSENSITIVE_ORDER)
或 Comparator.comparing(Product::getProductId).thenComparing(Product::getProductTitle) - 对于超大数据集,考虑先 sorted() 再用 distinct() 配合自定义 equals/hashCode,但本方案在可读性、健壮性和通用性上更优。
最终结果将严格保留每个 productId 下 productTitle 字典序最优的唯一记录,完美满足“去重保首优”这一常见数据清洗需求。

















