讲师中心 微信公众号

工具推荐

视频效率加速
AniShort
AniShort

AI短剧协同制作平台

Laper
Laper

剧本策划到成片协作

剧云
剧云

中文短剧剧本制作平台

updream

一键生成高质量推广成片

怎样在Python中通过正则表达式过滤敏感词汇?

胖婷姑娘_2538

胖婷姑娘_2538

发布时间:2026-06-13 11:08:58

|

952人浏览过

|

来源于php中文网

原创

用re.sub()配合预编译正则最稳妥,因str.replace()无法处理嵌套敏感词和词边界问题,需用或负向断言、长词优先排序、re.escape转义及IGNORECASE标志。

怎样在python中通过正则表达式过滤敏感词汇?

直接用 re.sub() 配合预编译的正则模式最稳妥,但必须注意词边界、大小写和 Unicode 问题,否则会漏匹配或误伤正常文本。

为什么不能直接用 str.replace()?

敏感词常有嵌套或部分重合(比如“苹果”和“苹果手机”),str.replace() 是贪心逐次替换,顺序错就可能留漏网之鱼;更关键的是它无法识别“独立词汇”——比如把“南京”替换成 ***,但“南京市”里不该动“南京”二字。正则的  词边界和 (? 负向先行断言才能真正按“词”处理。

  • “南京路” → 不该触发“南京”过滤
  • “他买了个苹果。” → “苹果”要被过滤,“苹果手机”也要被过滤,且不能重复替换
  • 用户输入可能含全角空格、换行、emoji,需提前 normalize 或扩展字符类

如何正确构建带词边界的正则模式?

核心是用  或更可靠的 (?,尤其当敏感词含非 ASCII 字符(如中文)时,<code> 在某些 Python 版本下对中文支持不一致,推荐显式写负向断言。

Python Hardener
Python Hardener

通过完整的安全审查、代码整洁重构、健壮的错误处理、正确的日志记录以及完整的文档字符串覆盖,强化 Python 脚本。

下载
  • 编译前对敏感词排序:长词优先(如先“苹果手机”,再“苹果”),避免短词截断长词匹配
  • 转义所有特殊字符:re.escape(word) 必须加,否则“a.b”会被当成正则元字符
  • 加上 re.IGNORECASE 标志处理大小写变体,但注意中文通常不用,可单独控制
  • 示例:
    import re
    words = ["苹果", "苹果手机", "南京"]
    # 排序 + 转义 + 负向断言
    pattern = "|".join(re.escape(w) for w in sorted(words, key=len, reverse=True))
    regex = re.compile(r"(?<!w)(" + pattern + r")(?!\w)", re.IGNORECASE)
    text = "我爱吃苹果,也用苹果手机,在南京市。"
    result = regex.sub("***", text)

实际部署时容易踩哪些坑?

本地测试通过,上线后失效很常见,多数出在编码、上下文或性能上。

立即学习“Python免费学习笔记(深入)”;

  • 敏感词文件用 UTF-8 BOM 编码读入,导致首词多出 ufeff,匹配失败 —— 读取时加 encoding="utf-8-sig"
  • 用户输入含零宽空格(u200b)、全角标点,绕过  —— 可在正则中扩展为 (? 覆盖常见中文区间
  • 敏感词上千条时,| 拼接的大正则会变慢甚至回溯爆炸 —— 改用 Aho-Corasick 算法(如 ahocorasick 库)替代
  • 日志或调试输出里打印被过滤文本时,忘了脱敏,造成二次泄露 —— 替换后立即丢弃原始字段,或统一走脱敏日志处理器

真正难的不是写对一行 re.sub(),而是让模式在各种输入边界下稳定不漏不滥。词边界逻辑、字符集覆盖、编译时机、替换顺序,四者缺一都会在灰度期突然暴露问题。

热门AI工具

更多
DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

花生AI
花生AI Hot

一款AI视频创作工具,主要用于B站推出的AI视频创作工具,适合需要提升相关任务效率的用户。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

PixPix
PixPix Hot

PixPix是一款面向电商视觉生产的AI商品图生成工具。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

相关专题

更多
python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

1911

2023.07.20

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

5264

2023.07.25

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

1849

2023.07.31

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

31897

2023.08.03

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

3767

2023.08.04

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

3787

2023.08.04

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

1263

2023.08.11

python合并两个列表
python合并两个列表

Python是一种强大的编程语言,具有许多方便的功能和工具。在Python中,有多种方法可以合并两个列表。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

616

2023.08.10

Postman身份认证怎么配置
Postman身份认证怎么配置

本专题从实际API接口调试场景出发,讲解Postman身份认证的完整配置流程,包括常见认证协议介绍、授权参数设置、访问令牌填写、OAuth 2.0授权及认证失败排查,帮助用户正确完成接口授权与访问验证。

60

2026.11.06

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn