讲师中心 微信公众号
AI工具推荐 视频效率加速

awk中怎么对含有中文字符的报表进行精准的按列截取与统计

夜杰姑娘_2152

夜杰姑娘_2152

发布时间:2026-07-23 06:56:07

|

852人浏览过

|

来源于php中文网

原创

awk处理中文报表的核心难点是分隔符混乱与编码不一致,而非中文本身;需统一UTF-8编码,用file -i和hexdump确认分隔符,再以-F指定制表符、全角符号或FIELDWIDTHS按列提取,并通过NF、正则匹配、数组统计等完成可靠处理。

awk中怎么对含有中文字符的报表进行精准的按列截取与统计

awk 处理含中文字符的报表时,核心难点不是“中文本身”,而是字段分隔方式和编码一致性。只要分隔符明确、不与中文混杂,awk 对中文完全无感——它只认字节或字符边界,不解析语义。关键在预处理和分隔符控制。

确认并统一文本编码与分隔符

中文报表常见问题不是字符乱码,而是字段用空格、制表符、全角逗号、顿号甚至多个连续空格分隔,导致默认空格分隔失效。

  • 先用 file -i 报表.txt 查看编码(推荐 UTF-8);用 hexdump -C 报表.txt | head 看前几行实际分隔符字节(如 0x09 是 tab,0xe3 0x80 08 是中文顿号「、」)
  • 若分隔符是制表符(常见于 Excel 导出为 .txt),显式用 -F '\t',别依赖默认空格
  • 若分隔符是全角逗号(,)、分号(;)或顿号(、),用 -F ',|;|、'(正则分隔,需加 --posix 或 gawk)或转义:-F ','
  • 若字段内含空格但列对齐(如固定宽度报表),不用 -F,改用 substr() 或 FIELDWIDTHS(gawk 特有)

按列截取中文字段的可靠写法

避免用 $1 $2 直接取,尤其当某列为空或含空格时。优先用字段数(NF)和位置逻辑判断。

  • 打印第 2 列和第 4 列(假设用制表符分隔):awk -F '\t' '{print $2, $4}' 报表.txt
  • 打印最后一列(无论中文多长):awk -F '\t' '{print $NF}' 报表.txt
  • 提取“姓名”列(假设标题行为第一行,且“姓名”在第 1 列):awk -F '\t' 'NR==1 || $1 ~ /姓名|Name/ {next} $1 != "" {print $1}' 报表.txt
  • 按固定宽度取(如第 1–10 字符为编号,11–20 为姓名):gawk 'BEGIN{FIELDWIDTHS="10 10 *"} {print $1, $2}' 报表.txt

对中文字段做统计的实用技巧

中文内容可直接参与匹配与计数,无需额外转义;但注意正则匹配要加 /.../i 忽略大小写(对拼音有用),或用 index() 做子串查找更稳定。

  • 统计“部门”列为“技术部”的记录数:awk -F '\t' '$3 == "技术部" {count++} END{print count+0}' 报表.txt
  • 统计所有不同“状态”值及其出现次数:awk -F '\t' '{status[$4]++} END{for (s in status) print s, status[s]}' 报表.txt
  • 筛选含“已完成”或“已关闭”的行(模糊匹配):awk -F '\t' '$5 ~ /已完成|已关闭/ {print $1, $5}' 报表.txt
  • 计算“金额”列(第 6 列)总和(确保该列纯数字,中文单位需提前清理):awk -F '\t' '{sum += $6} END{printf "总计:%.2f\n", sum}' 报表.txt

预处理中文报表的小建议

如果原始报表格式混乱(如中英文混排、多空格、无统一分隔符),awk 单独处理易出错,建议前置清洗:

  • 用 sed 's/ //g; s/ / /g' 去掉全角空格,压缩连续空格为单空格
  • 用 iconv -f GBK -t UTF-8 报表.csv > 报表_utf8.csv 2>/dev/null 统一编码(根据实际源编码调整)
  • 导出为 CSV 时选“UTF-8 with BOM”或用 LibreOffice 指定分隔符,比直接复制粘贴更可靠
  • 实在无法结构化,改用 perl -CSD -nale 'print $F[1], $F[3]'(Perl 对 Unicode 更健壮)

热门AI工具

更多
WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

3790

2023.06.21

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

3273

2023.06.29

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2373

2023.06.30

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

5710

2023.07.05

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

5362

2023.07.06

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

3173

2023.07.20

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

2685

2023.07.20

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

2899

2023.07.25

LLVM自定义Pass怎么写
LLVM自定义Pass怎么写

本专题聚焦LLVM自定义Pass开发,整理Pass类结构、run()方法、PreservedAnalyses、CMake构建、插件注册、-load-pass-plugin加载和测试用例编写流程。

20

2026.09.30

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Linux开发篇视频教程
Linux开发篇视频教程

共18课时 | 4.6万人学习

Perl 入门教程
Perl 入门教程

共29课时 | 31.2万人学习

Perl 入门教程
Perl 入门教程

共29课时 | 31.2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn