讲师中心 微信公众号
AI工具推荐 视频效率加速

如何在 Pandas GroupBy 中使用 agg() 高效计算并命名分位数

风芳酱_9967

风芳酱_9967

发布时间:2026-10-22 09:51:13

|

560人浏览过

|

来源于php中文网

原创

如何在 Pandas GroupBy 中使用 agg() 高效计算并命名分位数

本文详解如何通过自定义函数工厂配合 groupby().agg() 一次性计算多个字段的任意分位数,并生成语义清晰的列名(如 bell_q10),避免循环拼接,兼顾可读性、简洁性与计算效率。

本文详解如何通过自定义函数工厂配合 `groupby().agg()` 一次性计算多个字段的任意分位数,并生成语义清晰的列名(如 `bell_q10`),避免循环拼接,兼顾可读性、简洁性与计算效率。

在 Pandas 数据分析中,常需对分组数据同时计算多种统计量(如均值、中位数、特定分位数)。虽然 Series.quantile() 和 GroupBy.quantile() 可直接获取分位数,但它们返回的是多级索引 Series,难以与常规聚合(如 "mean"、"median")统一集成到一次 agg() 调用中——这正是用户遇到的核心痛点:希望用声明式语法(如 ("bell", "q90"))实现“一调用、多结果、好命名”。

解决方案:函数工厂(Function Factory)

关键在于将参数化的 quantile(q) 封装为无参函数,使其能被 agg() 正确识别为聚合器:

def quantile(q=0.5, **kwargs):
    def f(series):
        return series.quantile(q, **kwargs)
    return f

该函数返回一个闭包 f,它接收 Series 并调用 series.quantile(q),完全符合 agg() 对自定义聚合器的签名要求(单参数 Series → 标量或 Series)。

完整示例:混合聚合 + 命名分位数

import pandas as pd
import numpy as np

rng = np.random.default_rng(seed=18860504)
df = pd.DataFrame({
    "dummy": 1,
    "bell": rng.normal(loc=0, scale=1, size=100),
    "fish": rng.poisson(lam=10, size=100),
    "cabin": rng.lognormal(mean=0, sigma=1.0, size=100),
})

# 定义分位点(如 q10, q50, q90)
quants = [0.1, 0.5, 0.9]

# 使用函数工厂构建聚合字典
agg_dict = {
    # 基础统计量
    "bell_med": ("bell", "median"),
    "bell_mean": ("bell", "mean"),
    "fish_med": ("fish", "median"),
    "fish_mean": ("fish", "mean"),
    # 分位数(动态命名)
    **{f"{col}_q{int(q*100):02d}": (col, quantile(q)) 
       for q in quants 
       for col in ["bell", "fish"]}
}

result = df.groupby("dummy").agg(**agg_dict)
print(result)

输出示例(列名清晰、结果紧凑):

       bell_med  bell_mean  fish_med  fish_mean  bell_q10  bell_q50  bell_q90  fish_q10  fish_q50  fish_q90
dummy                                                                                                      
1     -0.063454  -0.058557      10.0       9.92 -1.553682 -0.063454  1.452172       7.0      10.0      14.0

注意事项与最佳实践

  • ✅ 性能优势:agg() 内部会对每个分组只遍历一次数据,比多次 groupby().quantile() 更高效;
  • ⚠️ 命名冲突:确保生成的列名(如 "bell_q10")不与内置方法名(如 "quantile")重复;
  • ? 扩展性:可轻松扩展至其他参数化统计(如 std(ddof=0)、rolling(3).mean()),只需调整函数工厂;
  • ? 兼容性:该方案完全兼容 Pandas 1.4+,且支持 agg() 的所有输入格式(元组、字典、列表);
  • ? 进阶技巧:若需保留原始分位数索引(如 q10, q50),可改用 lambda s: s.quantile(quants),但此时需额外 stack() 或 unstack() 处理层级,牺牲了列命名的直观性。

综上,函数工厂是连接“参数化聚合”与“声明式 agg()”的优雅桥梁——它既保持了代码的可读性与可维护性,又充分发挥了 Pandas 向量化计算的性能潜力。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

VibeKnow
VibeKnow Hot

一款AI视频创作工具,主要用于全球首个AI知识视频创作平台,文档、文章、网页,一键生成视频,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

320

2025.12.04

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

252

2026.01.31

Python数据分析与Pandas高级实战
Python数据分析与Pandas高级实战

本专题围绕 Python 数据分析展开,系统讲解 Pandas 的高级用法,包括数据清洗、透视表、时间序列分析以及多表合并与分组操作。通过实战案例,帮助开发者掌握高效处理与分析数据的方法,提高数据处理效率与分析能力。

611

2026.04.13

Gradle插件开发入门教程
Gradle插件开发入门教程

本专题介绍Gradle插件开发的基本流程,涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法,帮助你理解插件如何组织构建逻辑,减少多个项目之间的重复配置。

0

2026.10.22

Gradle Wrapper配置教程
Gradle Wrapper配置教程

本专题介绍Gradle Wrapper的基本作用,涵盖文件组成、生成方法、版本配置和任务调用,帮助你理解项目如何使用指定的Gradle版本,减少不同开发环境带来的构建差异。

0

2026.10.22

Golangci-lint检查器使用教程
Golangci-lint检查器使用教程

本专题整理Golangci-lint常用Linters的用途与配置方法,覆盖错误处理、无效代码、安全、复杂度、命名和依赖检查,帮助项目合理选规则。

0

2026.10.22

Gradle怎么构建Java项目
Gradle怎么构建Java项目

本专题介绍Gradle Java项目构建方法,涵盖Java插件配置、依赖声明、源码编译、测试执行和打包检查,帮助你理解各阶段的任务关系,逐步完成项目构建。

0

2026.10.22

PHP时间戳漏洞修复教程
PHP时间戳漏洞修复教程

本专题汇总PHP常见时间戳漏洞,包括2038年溢出、时区漂移、时间戳伪造、重放攻击、时间盲注与日志审计失效等,并给出升级64位环境、使用 DateTimeImmutable、统一UTC、严格超时校验、预处理绑定、hash_equals 比对等修复方案,帮助开发者快速排查和加固时间相关代码。

0

2026.10.22

Golangci-lint配置文件与规则设置
Golangci-lint配置文件与规则设置

本专题聚焦Golangci-lint YAML配置文件,讲清运行参数、规则启停、目录排除、问题过滤及严重级别设置,便于团队统一检查标准。

0

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn