讲师中心 微信公众号
AI工具推荐 视频效率加速

Windows 中怎么在 PowerShell基础 中使用 Get-Unique 去除重复数据

轻雪君_1243

轻雪君_1243

发布时间:2026-07-28 10:05:08

|

743人浏览过

|

来源于php中文网

原创

Get-Unique仅对已排序输入有效,执行相邻去重;默认区分大小写;可用-OnType按.NET类型去重;文本处理需先Sort-Object再Get-Unique。

get-unique 不能直接去重任意列表,它只对**已排序的输入**有效——这是最关键的限制,也是新手最容易出错的地方。

必须先排序,再用 Get-Unique

PowerShell 的 Get-Unique 是“相邻去重”:它只比较当前项和下一项,发现相同时跳过后者。如果重复项不挨着,就会被漏掉。

  • 错误写法(无排序):1,2,2,3,2 | Get-Unique → 输出 1,2,3,2(末尾的 2 没被去掉)
  • 正确写法:1,2,2,3,2 | Sort-Object | Get-Unique → 输出 1,2,3

区分大小写与忽略大小写

默认区分大小写,“Apple” 和 “apple” 被视为不同项。

  • 保留默认(区分):"Apple","apple","Banana" | Sort-Object | Get-Unique → 返回全部三项
  • 忽略大小写:"Apple","apple","Banana" | Sort-Object -CaseSensitive:$false | Get-Unique -CaseInsensitive
  • 更常用写法(统一转小写再处理):"Apple","apple","Banana" | ForEach-Object { $_.ToLower() } | Sort-Object | Get-Unique

按对象类型去重(-OnType)

当管道中混有多种类型对象(如文件和文件夹),想每种类型只留一个示例,用 -OnType 参数:

  • Get-ChildItem | Get-Unique -OnType → 可能返回一个 DirectoryInfo 和一个 FileInfo,其余同类型对象被跳过
  • 注意:它不关心内容或属性值,只看 .NET 类型名(如 System.IO.DirectoryInfo

文本文件去重的典型流程

比如清理日志中的重复行,或提取唯一关键词:

  • 读取并去重所有行:Get-Content log.txt | Sort-Object | Get-Unique
  • 提取单词再去重(忽略大小写):(Get-Content file.txt | ForEach-Object { $_.Split() }) | ForEach-Object { $_.Trim() } | Where-Object { $_ } | Sort-Object -CaseSensitive:$false | Get-Unique -CaseInsensitive
  • 统计唯一项数量:$unique = Get-Content data.csv | Sort-Object | Get-Unique; $unique.Count

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

相关专题

更多
windows查看端口占用情况
windows查看端口占用情况

Windows端口可以认为是计算机与外界通讯交流的出入口。逻辑意义上的端口一般是指TCP/IP协议中的端口,端口号的范围从0到65535,比如用于浏览网页服务的80端口,用于FTP服务的21端口等等。怎么查看windows端口占用情况呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2999

2023.07.26

查看端口占用情况windows
查看端口占用情况windows

端口占用是指与端口关联的软件占用端口而使得其他应用程序无法使用这些端口,端口占用问题是计算机系统编程领域的一个常见问题,端口占用的根本原因可能是操作系统的一些错误,服务器也可能会出现端口占用问题。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2558

2023.07.27

windows照片无法显示
windows照片无法显示

当我们尝试打开一张图片时,可能会出现一个错误提示,提示说"Windows照片查看器无法显示此图片,因为计算机上的可用内存不足",本专题为大家提供windows照片无法显示相关的文章,帮助大家解决该问题。

1408

2023.08.01

windows查看端口被占用的情况
windows查看端口被占用的情况

windows查看端口被占用的情况的方法:1、使用Windows自带的资源监视器;2、使用命令提示符查看端口信息;3、使用任务管理器查看占用端口的进程。本专题为大家提供windows查看端口被占用的情况的相关的文章、下载、课程内容,供大家免费下载体验。

2339

2023.08.02

windows无法访问共享电脑
windows无法访问共享电脑

在现代社会中,共享电脑是办公室和家庭的重要组成部分。然而,有时我们可能会遇到Windows无法访问共享电脑的问题。这个问题可能会导致数据无法共享,影响工作和生活的正常进行。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

3190

2023.08.08

windows自动更新
windows自动更新

Windows操作系统的自动更新功能可以确保系统及时获取最新的补丁和安全更新,以提高系统的稳定性和安全性。然而,有时候我们可能希望暂时或永久地关闭Windows的自动更新功能。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

1457

2023.08.10

windows boot manager
windows boot manager

windows boot manager无法开机的解决方法:1、系统文件损坏,使用Windows安装光盘或USB启动盘进入恢复环境,选择修复计算机,然后选择自动修复;2、引导顺序错误,进入恢复环境,选择命令提示符,输入命令"bootrec /fixboot"和"bootrec /fixmbr",然后重新启动计算机;3、硬件问题,使用硬盘检测工具进行扫描和修复;4、重装操作系统。本专题还提供其他解决

2377

2023.08.28

windows锁屏快捷键
windows锁屏快捷键

windows锁屏快捷键是Windows键+L、Ctrl+Alt+Del、Windows键+D、Windows键+P和Windows键+R。本专题为大家提供windows相关的文章、下载、课程内容,供大家免费下载体验。

4187

2023.08.30

Buffalo框架数据库开发全教程
Buffalo框架数据库开发全教程

本专题围绕Buffalo框架数据库开发,讲解database.yml多环境配置、soda与fizz迁移生成回滚、模型结构体标签、增删改查与条件查询、一对多与多对多关联、数据校验、回调钩子、事务处理及原生SQL执行能力。

0

2026.09.23

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn