讲师中心 微信公众号
AI工具推荐 视频效率加速

如何在 Pandas GroupBy 中使用 agg() 高效计算并命名分位数

风芳酱_9967

风芳酱_9967

发布时间:2026-10-22 09:51:13

|

560人浏览过

|

来源于php中文网

原创

如何在 Pandas GroupBy 中使用 agg() 高效计算并命名分位数

本文详解如何通过自定义函数工厂配合 groupby().agg() 一次性计算多个字段的任意分位数,并生成语义清晰的列名(如 bell_q10),避免循环拼接,兼顾可读性、简洁性与计算效率。

本文详解如何通过自定义函数工厂配合 `groupby().agg()` 一次性计算多个字段的任意分位数,并生成语义清晰的列名(如 `bell_q10`),避免循环拼接,兼顾可读性、简洁性与计算效率。

在 Pandas 数据分析中,常需对分组数据同时计算多种统计量(如均值、中位数、特定分位数)。虽然 Series.quantile() 和 GroupBy.quantile() 可直接获取分位数,但它们返回的是多级索引 Series,难以与常规聚合(如 "mean"、"median")统一集成到一次 agg() 调用中——这正是用户遇到的核心痛点:希望用声明式语法(如 ("bell", "q90"))实现“一调用、多结果、好命名”。

解决方案:函数工厂(Function Factory)

关键在于将参数化的 quantile(q) 封装为无参函数,使其能被 agg() 正确识别为聚合器:

def quantile(q=0.5, **kwargs):
    def f(series):
        return series.quantile(q, **kwargs)
    return f

该函数返回一个闭包 f,它接收 Series 并调用 series.quantile(q),完全符合 agg() 对自定义聚合器的签名要求(单参数 Series → 标量或 Series)。

完整示例:混合聚合 + 命名分位数

import pandas as pd
import numpy as np

rng = np.random.default_rng(seed=18860504)
df = pd.DataFrame({
    "dummy": 1,
    "bell": rng.normal(loc=0, scale=1, size=100),
    "fish": rng.poisson(lam=10, size=100),
    "cabin": rng.lognormal(mean=0, sigma=1.0, size=100),
})

# 定义分位点(如 q10, q50, q90)
quants = [0.1, 0.5, 0.9]

# 使用函数工厂构建聚合字典
agg_dict = {
    # 基础统计量
    "bell_med": ("bell", "median"),
    "bell_mean": ("bell", "mean"),
    "fish_med": ("fish", "median"),
    "fish_mean": ("fish", "mean"),
    # 分位数(动态命名)
    **{f"{col}_q{int(q*100):02d}": (col, quantile(q)) 
       for q in quants 
       for col in ["bell", "fish"]}
}

result = df.groupby("dummy").agg(**agg_dict)
print(result)

输出示例(列名清晰、结果紧凑):

       bell_med  bell_mean  fish_med  fish_mean  bell_q10  bell_q50  bell_q90  fish_q10  fish_q50  fish_q90
dummy                                                                                                      
1     -0.063454  -0.058557      10.0       9.92 -1.553682 -0.063454  1.452172       7.0      10.0      14.0

注意事项与最佳实践

  • ✅ 性能优势:agg() 内部会对每个分组只遍历一次数据,比多次 groupby().quantile() 更高效;
  • ⚠️ 命名冲突:确保生成的列名(如 "bell_q10")不与内置方法名(如 "quantile")重复;
  • ? 扩展性:可轻松扩展至其他参数化统计(如 std(ddof=0)、rolling(3).mean()),只需调整函数工厂;
  • ? 兼容性:该方案完全兼容 Pandas 1.4+,且支持 agg() 的所有输入格式(元组、字典、列表);
  • ? 进阶技巧:若需保留原始分位数索引(如 q10, q50),可改用 lambda s: s.quantile(quants),但此时需额外 stack() 或 unstack() 处理层级,牺牲了列命名的直观性。

综上,函数工厂是连接“参数化聚合”与“声明式 agg()”的优雅桥梁——它既保持了代码的可读性与可维护性,又充分发挥了 Pandas 向量化计算的性能潜力。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

PixPix
PixPix Hot

PixPix是一款面向电商视觉生产的AI商品图生成工具。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

320

2025.12.04

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

252

2026.01.31

Python数据分析与Pandas高级实战
Python数据分析与Pandas高级实战

本专题围绕 Python 数据分析展开,系统讲解 Pandas 的高级用法,包括数据清洗、透视表、时间序列分析以及多表合并与分组操作。通过实战案例,帮助开发者掌握高效处理与分析数据的方法,提高数据处理效率与分析能力。

591

2026.04.13

剧云故事大纲与分场规划教程
剧云故事大纲与分场规划教程

本专题讲解剧云梗概与多级大纲功能,覆盖全局、分集、分场结构生成,以及主线冲突、剧情节点和场次顺序调整。

0

2026.10.22

VibeKnow PPT讲解视频教程汇总
VibeKnow PPT讲解视频教程汇总

本专题介绍VibeKnow PPT讲解模式的素材准备、旁白生成、页面节奏、画面呈现与导出设置,适合课程和培训场景。

0

2026.10.22

VibeKnow PDF转视频教程合集
VibeKnow PDF转视频教程合集

本专题围绕VibeKnow的PDF转视频功能,讲解文件准备、内容解析、脚本生成、重点可视化及配音字幕检查方法。

0

2026.10.22

二狗PPT模板与视觉设计
二狗PPT模板与视觉设计

本专题介绍二狗PPT的职场模板、主题风格与页面版式,覆盖模板切换、色彩选择、内容匹配和正式汇报场景下的视觉优化方法。

0

2026.10.22

php漏洞修复方法
php漏洞修复方法

PHP漏洞聚合专题,持续整理PHP最新高危漏洞、CVE安全预警、受影响版本、自查命令及修复方案,覆盖PHP-FPM、Docker、Ubuntu与Linux服务器环境,帮助开发者快速完成漏洞排查、版本升级和安全加固。

0

2026.10.22

二狗PPT入门与基础操作
二狗PPT入门与基础操作

本专题整理二狗PPT从官网进入、输入主题、生成大纲到制作成稿的基础操作,帮助新手掌握AI一键生成职场PPT的完整流程。

0

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn