讲师中心 微信公众号

工具推荐

视频效率加速
AniShort
AniShort

AI短剧协同制作平台

updream

一键生成高质量推广成片

立刻MV
立刻MV

低成本歌曲 MV、视频生成

Laper
Laper

剧本策划到成片协作

如何正确实现英文单词去后缀“ness”并处理“i→y”变形的词干提取

梦伟姑娘_8533

梦伟姑娘_8533

发布时间:2026-02-07 23:40:14

|

863人浏览过

|

来源于php中文网

原创

如何正确实现英文单词去后缀“ness”并处理“i→y”变形的词干提取

本文介绍在去除英文单词后缀“ness”时,如何正确处理如“heaviness→heavy”这类需将末尾“i”替换为“y”的拼写规则,并提供手动实现与专业词干提取库两种可靠方案。

在自然语言处理中,简单地截掉后缀(如 -ness)远不足以完成准确的词干提取(stemming)。以 heaviness 为例:直接移除末4字符得到 heavi,但英语正字法规则要求将词根末尾的 i 在加 -ness 前变为 y(即 heavy + ness → heaviness),因此还原时必须反向执行 i → y 变形。原代码存在多个逻辑错误:

  • without_ness[:-5] 索引越界(若 without_ness 长度不足5会报错);
  • list(word) 转为字符列表后,without_ness 是列表而非字符串,无法调用 .replace();
  • 判断条件应检查倒数第一个字符是否为 'i',而非错误索引 [:-5];
  • 缺少对 'i' 出现在非末尾位置的容错(如 business 不应变为 bussyness → bussy)。

✅ 正确的手动实现应如下(仅适用于基础场景):

def remove_suffix_ness(word):
    if not word.endswith("ness"):
        return word
    stem = word[:-4]  # 移除 "ness"
    # 仅当 stem 以 'i' 结尾且长度 ≥ 2 时,替换为 'y'
    if len(stem) >= 2 and stem.endswith("i"):
        stem = stem[:-1] + "y"
    return stem

# 测试
print(remove_suffix_ness("sadness"))     # → "sad"
print(remove_suffix_ness("heaviness"))   # → "heavy"
print(remove_suffix_ness("happiness"))   # → "happy"
print(remove_suffix_ness("business"))    # → "business"(不误改)

⚠️ 注意:该函数仍无法覆盖所有英语变形规则(如 darkness→dark、loneliness→lonely 中的元音重复、辅音双写等),且未处理大小写、标点或不规则词。

SEO Keyword Density
SEO Keyword Density

SEO关键词密度优化与页面审计技能。使用场景:①提供页面路径与关键词进行SEO优化;②提升页面关键词密度;③提升搜索引擎排名;④进行SEO审计(meta标签、OG、hreflang等)。触发词:关键词密度、SEO优化、关键词优化等。

下载

? 生产环境强烈推荐使用成熟NLP库,例如 NLTK 的 Lancaster 或 Porter 词干器,它们经过大量语料验证,能稳健处理边缘案例:

import nltk
# 首次运行需下载数据(取消注释并执行一次)
# nltk.download('wordnet')

from nltk.stem import PorterStemmer, LancasterStemmer

porter = PorterStemmer()
lancaster = LancasterStemmer()

print(porter.stem("heaviness"))    # → "heavi"(Porter 较保守)
print(lancaster.stem("heaviness")) # → "heavy"(更激进,符合需求)
print(lancaster.stem("happiness")) # → "happy"
print(lancaster.stem("sadness"))   # → "sad"

? 总结:

  • 手动实现适合教学或极简场景,但务必校验边界(长度、结尾字符、语义合理性);
  • 工业级应用请优先选用 nltk.stem.LancasterStemmer 或更现代的 SnowballStemmer('english');
  • 若需语义精准还原(如 better→good),应升级至词形还原(lemmatization),使用 WordNetLemmatizer 并指定词性。

热门AI工具

更多
UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

函子Zion

一款支持AI搭建、可视化编辑和多端发布的全栈无代码开发平台。

PixPix
PixPix Hot

PixPix是一款面向电商视觉生产的AI商品图生成工具。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

相关专题

更多
js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

1938

2023.08.03

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

3184

2023.09.04

java基础知识汇总
java基础知识汇总

java基础知识有Java的历史和特点、Java的开发环境、Java的基本数据类型、变量和常量、运算符和表达式、控制语句、数组和字符串等等知识点。想要知道更多关于java基础知识的朋友,请阅读本专题下面的的有关文章,欢迎大家来php中文网学习。

6384

2023.10.24

字符串介绍
字符串介绍

字符串是一种数据类型,它可以是任何文本,包括字母、数字、符号等。字符串可以由不同的字符组成,例如空格、标点符号、数字等。在编程中,字符串通常用引号括起来,如单引号、双引号或反引号。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

6549

2023.11.24

java读取文件转成字符串的方法
java读取文件转成字符串的方法

Java8引入了新的文件I/O API,使用java.nio.file.Files类读取文件内容更加方便。对于较旧版本的Java,可以使用java.io.FileReader和java.io.BufferedReader来读取文件。在这些方法中,你需要将文件路径替换为你的实际文件路径,并且可能需要处理可能的IOException异常。想了解更多java的相关内容,可以阅读本专题下面的文章。

8074

2024.03.22

php中定义字符串的方式
php中定义字符串的方式

php中定义字符串的方式:单引号;双引号;heredoc语法等等。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

12534

2024.04.29

go语言字符串相关教程
go语言字符串相关教程

本专题整合了go语言字符串相关教程,阅读专题下面的文章了解更多详细内容。

6519

2025.07.29

c++字符串相关教程
c++字符串相关教程

本专题整合了c++字符串相关教程,阅读专题下面的文章了解更多详细内容。

7307

2025.08.07

Go-Zero API开发使用教程
Go-Zero API开发使用教程

本专题聚焦Go-Zero的API开发,拆解.api描述文件的语法结构、路由与分组定义、参数绑定与校验规则,说明统一响应体、JWT鉴权、跨域与接口文档生成的落地方式,并给出网关聚合与接口测试的实践建议。

20

2026.11.12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Go-Zero HTTP服务开发指南
Go-Zero HTTP服务开发指南

共0课时 | 0人学习

Go-Zero goctl安装与使用手册
Go-Zero goctl安装与使用手册

共0课时 | 0人学习

Go-Zero框架快速开始指南
Go-Zero框架快速开始指南

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn