讲师中心 微信公众号
AI工具推荐 视频效率加速

Polars 中按 Life–Death 区间计算列最大值的完整实现指南

陌浩大大_8677

陌浩大大_8677

发布时间:2026-02-17 17:01:27

|

822人浏览过

|

来源于php中文网

原创

Polars 中按 Life–Death 区间计算列最大值的完整实现指南

本文介绍如何在 Polars 中为每个以 "Life" 开头、以 "Death" 结尾的连续区间,高效计算指定列(如 Column A)的最大值,并仅将结果填充至对应 "Life" 行,其余行置为 null。

本文介绍如何在 polars 中为每个以 "life" 开头、以 "death" 结尾的连续区间,高效计算指定列(如 `column a`)的最大值,并仅将结果填充至对应 "life" 行,其余行置为 `null`。

在数据处理中,常需基于语义边界(如状态标记 "Life" 和 "Death")划分逻辑区间,并对区间内数值列进行聚合。Polars 本身不提供原生的“区间分组”操作,但可通过累积运算与条件逻辑组合构建等效的分组标识(group_id),再结合 over() 实现分组聚合。该方法兼具性能优势与表达简洁性,适用于大规模数据场景。

以下为完整实现步骤(含可运行代码):

✅ 步骤一:构造区间分组 ID

核心思想是:

  • 每次遇到 "Life",视为新区间开始;
  • 每次遇到 "Death",视为当前区间结束;
  • 同一 "Life" 到其后首个 "Death"(含)之间的所有行属于同一组;
  • "Death" 行本身不参与聚合,但需将其 group_id 归入前一 "Life" 所属组(即向后对齐)。

利用 cum_sum() 和 forward_fill() 构建基础分组信号,再通过 shift() 校正 "Death" 行归属:

import polars as pl

df = pl.DataFrame({
    "Column A": [2, 3, 1, 4, 1, 3, 3, 2, 1, 0],
    "Column B": ["Life", None, None, None, "Death", None, "Life", None, None, "Death"]
})

# 定义布尔标记
is_life = pl.col("Column B") == "Life"
is_death = pl.col("Column B") == "Death"

# 构建 group_id:先累加 life/death 事件,再前向填充 → 得到初步分组
group_id = (is_life.cum_sum() + is_death.cum_sum()).forward_fill()

# 关键校正:将 Death 行的 group_id 替换为其前一行的值(即归入前一个 Life 区间)
group_id = pl.when(is_death).then(group_id.shift()).otherwise(group_id)

? 说明:group_id.shift() 默认向前移动一行(n=1),因此 "Death" 行获得其前一 "Life" 所启动区间的 ID,确保后续 max().over(group_id) 能正确覆盖整个区间。

✅ 步骤二:按组聚合并条件赋值

使用 pl.when(...).then(...).otherwise(...) 实现:仅当行为 "Life" 时,填入其所属 group_id 内 Column A 的最大值;其余行(null 或 "Death")保持 null:

result = df.with_columns(
    pl.when(is_life)
      .then(pl.col("Column A").max().over(group_id))
      .alias("Column C")
)

print(result)

输出结果完全匹配预期:

shape: (10, 3)
┌──────────┬──────────┬──────────┐
│ Column A ┆ Column B ┆ Column C │
│ ---      ┆ ---      ┆ ---      │
│ i64      ┆ str      ┆ i64      │
╞══════════╪══════════╪══════════╡
│ 2        ┆ Life     ┆ 4        │
│ 3        ┆ null     ┆ null     │
│ 1        ┆ null     ┆ null     │
│ 4        ┆ null     ┆ null     │
│ 1        ┆ Death    ┆ null     │
│ 3        ┆ null     ┆ null     │
│ 3        ┆ Life     ┆ 3        │
│ 2        ┆ null     ┆ null     │
│ 1        ┆ null     ┆ null     │
│ 0        ┆ Death    ┆ null     │
└──────────┴──────────┴──────────┘

⚠️ 注意事项与最佳实践

  • 空值安全:pl.col("Column B") == "Life" 自动处理 None(返回 False),无需额外 fill_null();
  • 类型一致性:max().over(...) 返回与原始列一致的类型(此处为 i64),若需浮点型可显式 .cast(pl.Float64);
  • 边界鲁棒性:若末尾无 "Death"(如 "Life" 后无终止标记),该方案会将 "Life" 至数据末尾视为一个开放区间——可根据业务需求添加兜底逻辑(例如 pl.when(is_life).then(...).otherwise(pl.lit(None)));
  • 性能提示:所有操作均为惰性求值、零拷贝,适合百万级以上数据;避免在循环中调用 to_pandas() 或 collect() 中断执行链。

此模式可轻松泛化至其他边界标记(如 "START"/"END")、多列聚合(.max().over(...).min().over(...))或自定义窗口函数(如 pl.col("A").rolling_max(window_size=...).over(...)),是 Polars 高级分组场景的经典范式。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

相关专题

更多
c语言中null和NULL的区别
c语言中null和NULL的区别

c语言中null和NULL的区别是:null是C语言中的一个宏定义,通常用来表示一个空指针,可以用于初始化指针变量,或者在条件语句中判断指针是否为空;NULL是C语言中的一个预定义常量,通常用来表示一个空值,用于表示一个空的指针、空的指针数组或者空的结构体指针。

549

2023.09.22

java中null的用法
java中null的用法

在Java中,null表示一个引用类型的变量不指向任何对象。可以将null赋值给任何引用类型的变量,包括类、接口、数组、字符串等。想了解更多null的相关内容,可以阅读本专题下面的文章。

1678

2024.03.01

Playwright 测试失败怎么办
Playwright 测试失败怎么办

Playwright测试失败专题汇集超时、定位器匹配、浏览器提前关闭、依赖与插件配置、文件上传、SSL及Docker启动等故障文章,并介绍通过截图、报告和Trace定位错误。

0

2026.10.21

Playwright 页面操作指南
Playwright 页面操作指南

Playwright页面操作专题汇集元素定位、点击与输入、等待响应、多页面切换、Iframe、事件监听及文件处理的已审核文章,便于按操作场景查阅示例与常见问题。

0

2026.10.21

Playwright 入门教程
Playwright 入门教程

Playwright入门专题汇集测试框架安装、VS Code配置、录制脚本、编写首个用例、运行调试及查看报告的已审核文章,帮助初学者搭建端到端测试流程。

0

2026.10.21

OpenJDK JVM参数怎么调优
OpenJDK JVM参数怎么调优

Java应用运行缓慢,如何调整JVM参数?本专题介绍OpenJDK JVM性能调优的基本流程,涵盖性能指标确认、运行数据采集、内存配置和垃圾回收分析,帮助你先定位瓶颈,再通过对照测试验证效果,避免直接套用参数而影响应用稳定性。

100

2026.10.16

OpenJDK怎么配置Java开发环境
OpenJDK怎么配置Java开发环境

怎样用OpenJDK搭建开发环境?本专题介绍版本选择、下载安装、环境变量配置和编译运行验证,帮助你理清JDK的作用及基本配置流程,并通过简单程序检查环境是否可用,为后续项目开发做好准备。

80

2026.10.16

OpenJDK怎么部署Java应用
OpenJDK怎么部署Java应用

Java项目开发完成后,怎样部署到目标环境并正常运行?本专题介绍OpenJDK应用部署流程,涵盖运行环境准备、版本兼容检查、应用打包、启动参数配置和日志查看,帮助你理清部署前后的操作顺序,减少环境差异造成的运行问题。

40

2026.10.16

Revel框架模板渲染与表单验证
Revel框架模板渲染与表单验证

本专题围绕Revel框架视图层开发,介绍模板语法、变量输出、布局复用、表单提交、参数绑定与验证规则,帮助开发者完成安全规范的页面交互。

40

2026.10.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn