讲师中心 微信公众号
AI工具推荐 视频效率加速

Java集合框架中的集合与元素去重操作

陌丽君_1721

陌丽君_1721

发布时间:2026-01-15 12:39:32

|

607人浏览过

|

来源于php中文网

原创

HashSet去重需元素正确重写equals()和hashCode(),否则逻辑相等对象仍被视作不同;自定义类须手动实现,包装类和JDK不可变类已内置支持。

java集合框架中的集合与元素去重操作

HashSet 去重原理与使用前提

Java 中最常用的去重方式是把元素放进 HashSet,但它能正确去重的前提是:元素类型必须正确重写 equals() 和 hashCode()。否则即使两个对象逻辑上相等,HashSet 也会当作不同元素保留。

常见错误现象:new Person("Alice", 25) 和 new Person("Alice", 25) 被当成两个不同对象存入 HashSet —— 因为 Person 没有重写 hashCode(),默认用内存地址计算哈希值。

  • 自定义类去重前,务必检查是否已重写 equals() 和 hashCode()(IDE 通常可自动生成)
  • 基本类型包装类(Integer、String 等)和 JDK 自带不可变类已内置正确实现,可直接用
  • HashSet 不保证插入顺序;如需有序去重,改用 LinkedHashSet

ArrayList 去重的三种典型写法对比

面对一个已有 ArrayList,想保留首次出现的元素并去重,有多个选择,但行为和性能差异明显。

最容易踩的坑是用 removeIf() 配合 indexOf(),看似简洁,实则时间复杂度 O(n²),大数据量下卡顿明显。

立即学习“Java免费学习笔记(深入)”;

Java Maven Code Review
Java Maven Code Review

审查Java Maven项目(ZIP压缩包或GitLab仓库URL),检查代码规范、命名、模块边界、可维护性问题以及重复代码。

下载
  • 推荐写法(兼顾可读与性能):
    Set<String> seen = new HashSet<>();
    list.removeIf(e -> !seen.add(e));
    —— 利用 Set.add() 返回 true 表示新增成功,false 表示已存在
  • 若需新集合不修改原列表:
    List<String> uniqueList = new ArrayList<>(new LinkedHashSet<>(list));
    —— 构造时自动去重,且 LinkedHashSet 保持插入顺序
  • 慎用写法:
    list.stream().distinct().collect(Collectors.toList());
    —— 语义清晰,但底层仍依赖 equals/hashCode,且对大列表有额外流开销

Stream.distinct() 的限制与适用场景

Stream.distinct() 是声明式去重方式,但它内部依赖元素的 hashCode() 和 equals(),和 HashSet 使用同一套逻辑,没有额外魔法。

它不适合用于未重写 equals/hashCode 的自定义对象,也不适合按特定字段去重(比如只看 id 字段忽略其他字段)。

  • 仅适用于已满足去重契约的对象(如 String、重写过方法的 POJO)
  • 无法指定去重依据字段;如需按 user.getId() 去重,得用 Collectors.toMap() 或 Collectors.collectingAndThen() 组合
  • 对并行流(parallelStream())也生效,但结果顺序不保证,除非源是 ArrayList 且未做中间操作打乱顺序

按对象字段去重的实用方案

实际业务中,常需“按 ID 去重”或“按 name + email 联合去重”,这时不能依赖默认 equals,得手动控制。

最简可控的方式是用 Collectors.toMap(),以目标字段为 key,整个对象为 value,重复 key 时保留第一个:

List<User> uniqueById = list.stream()
    .collect(Collectors.toMap(
        User::getId, 
        user -> user, 
        (existing, replacement) -> existing))
    .values()
    .stream()
    .collect(Collectors.toList());
  • (existing, replacement) -> existing 表示遇到重复 key 时保留首次出现的对象
  • 若要保留最后一次,改成 (existing, replacement) -> replacement
  • 联合字段去重可构造复合 key,例如 u.getName() + "|" + u.getEmail(),但注意 null 安全,建议用 Objects.toString(u.getName())
  • 该方式比手写循环更函数式,也比多次遍历更高效

复杂点在于字段组合逻辑和 null 处理,这些地方容易被忽略,一出错就导致去重失效或 NPE。

热门AI工具

更多
Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

相关专题

更多
string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

5939

2023.08.02

c语言中null和NULL的区别
c语言中null和NULL的区别

c语言中null和NULL的区别是:null是C语言中的一个宏定义,通常用来表示一个空指针,可以用于初始化指针变量,或者在条件语句中判断指针是否为空;NULL是C语言中的一个预定义常量,通常用来表示一个空值,用于表示一个空的指针、空的指针数组或者空的结构体指针。

549

2023.09.22

java中null的用法
java中null的用法

在Java中,null表示一个引用类型的变量不指向任何对象。可以将null赋值给任何引用类型的变量,包括类、接口、数组、字符串等。想了解更多null的相关内容,可以阅读本专题下面的文章。

1678

2024.03.01

PixTV官网入口地址合集
PixTV官网入口地址合集

本专题汇总了 PixTV AI 一站式视频创作平台的官方入口与使用教程。无需下载软件,浏览器直接访问即可使用。平台将剧本、图像、视频、声音与剪辑整合在“无限画布”中,接入 GPT Image 2.5、Seedance 2.5 等头部模型。本专题整理了从新建画布、角色锚定、分镜拆分到视频生成与导出的完整操作指南,助你快速上手 AI 短剧与漫剧创作。

20

2026.10.10

Kratos框架HTTP与gRPC服务开发教程
Kratos框架HTTP与gRPC服务开发教程

本专题围绕Kratos框架双协议服务开发,涵盖HTTP路由与处理器编写、参数获取、gRPC服务实现与客户端调用、metadata上下文传递、encoding编解码注册、统一响应封装、超时控制与流式响应实现方法。

20

2026.10.10

Kratos框架Protobuf接口定义与代码生成合集
Kratos框架Protobuf接口定义与代码生成合集

本专题讲解Kratos框架接口定义体系,涵盖proto编写规范、proto add/client/server生成命令、http注解路由、validate校验、OpenAPI文档生成、跨服务proto复用与兼容性设计。

0

2026.10.10

C++虚函数怎么定义和调用
C++虚函数怎么定义和调用

C++虚函数是实现运行时多态的重要机制。本专题从virtual关键字的基本用法入手,介绍基类与派生类之间的函数重写、基类指针调用派生类方法,以及动态绑定的执行过程,帮助初学者掌握虚函数的核心语法。

20

2026.10.10

C++类与对象的封装方法教程
C++类与对象的封装方法教程

C++封装是面向对象编程的核心特性之一,通过类将数据与操作数据的函数组织在一起,并利用访问权限控制外部访问。本专题介绍类的定义、成员变量、成员函数以及public、private和protected的使用方法,帮助初学者掌握封装的基本原理。

0

2026.10.10

C++构造函数定义与调用方法
C++构造函数定义与调用方法

C++构造函数用于初始化类对象,是面向对象编程的重要基础。本专题从构造函数的定义、声明和调用入手,介绍默认构造函数、带参数构造函数、拷贝构造函数及成员初始化列表,帮助初学者掌握对象创建与初始化的基本方法。

20

2026.10.10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
dev.java 官方:Learn Java
dev.java 官方:Learn Java

共0课时 | 0人学习

Java JDBC数据库连接官方教程
Java JDBC数据库连接官方教程

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn