讲师中心 微信公众号
AI工具推荐 视频效率加速

如何将 DataFrame 中成对列值展开为两列组合

胖枫小哥_8852

胖枫小哥_8852

发布时间:2026-07-05 17:03:19

|

457人浏览过

|

来源于php中文网

原创

本文介绍使用 pandas 的 groupby + itertools.combinations 高效生成组内所有两两组合,并将原始列(如 b_m、b_n)分别拆分为对应的新列对(b_m1/b_m2、b_n1/b_n2),自动过滤单行组,适用于特征工程与配对分析场景。

本文介绍使用 pandas 的 groupby + itertools.combinations 高效生成组内所有两两组合,并将原始列(如 b_m、b_n)分别拆分为对应的新列对(b_m1/b_m2、b_n1/b_n2),自动过滤单行组,适用于特征工程与配对分析场景。

在数据分析中,常需将同一分组下的多个观测两两配对,用于计算相似性、构建边关系或生成交互特征。例如,给定按 Group 分组的 DataFrame,要求对每组内 B_m 和 B_n 列的所有元素生成所有无序二元组合(即 itertools.combinations(..., r=2)),并将每对值分别存入新列 B_m1/B_m2 和 B_n1/B_n2,同时保留其他分组键列(如 A_x, A_y)。单行组会被自动排除,多行组则完整展开所有唯一组合。

以下是推荐的高效实现方案(避免显式循环,充分利用 pandas 向量化与分组操作):

import pandas as pd
from itertools import combinations

# 构造示例数据
df = pd.DataFrame(
    data=[
        [0, 4, 7, -1, 0.9],
        [0, 4, 7, 0, 0.3],
        [0, 4, 7, 1, 0.2],
        [1, 3, 3, 1, 0.5],
        [1, 3, 3, 0, 0.2],
        [2, 1, 8, 0, 0.6],
    ],
    columns=['Group', 'A_x', 'A_y', 'B_m', 'B_n'],
)

# 定义需展开的列名及分组列
cols_to_expand = ['B_m', 'B_n']
group_cols = list(df.columns.difference(cols_to_expand, sort=False))

# 核心逻辑:按 group_cols 分组,对每列应用 combinations,重命名并拼接
g = df.groupby(group_cols, sort=False)

result = pd.concat([
    g[col].apply(lambda x: pd.DataFrame(list(combinations(x, r=2))))
       .rename(columns=lambda i: f'{col}{i+1}')
    for col in cols_to_expand
], axis=1).reset_index(group_cols)

print(result)

输出结果:

   Group  A_x  A_y  B_m1  B_m2  B_n1  B_n2
0      0    4    7  -1.0   0.0   0.9   0.3
1      0    4    7  -1.0   1.0   0.9   0.2
2      0    4    7   0.0   1.0   0.3   0.2
3      1    3    3   1.0   0.0   0.5   0.2

✅ 关键优势说明:

  • 自动去单行组:combinations(x, 2) 对长度 < 2 的序列返回空迭代器,pd.DataFrame([]) 生成空 DataFrame,后续 concat 自然跳过;
  • 严格保持组内结构:groupby(..., sort=False) 保留原始顺序,reset_index(group_cols) 确保分组键列正确还原;
  • 列名自动映射:rename(columns=lambda i: f'{col}{i+1}') 将组合索引 0→1, 1→2 映射为 B_m1, B_m2 等;
  • 可扩展性强:只需修改 cols_to_expand 列表即可支持任意多列同步展开。

⚠️ 注意事项:

  • 若原始数据含缺失值(NaN),combinations 会将其视作普通值参与组合;如需剔除,建议预处理:df.dropna(subset=cols_to_expand);
  • 组合数随组大小呈 O(n²) 增长,对超大组(如 n > 1000)可能内存压力显著,此时建议加 if len(x) >= 2: 判断或改用生成器分批处理;
  • 列名冲突风险:确保 cols_to_expand 中列名不含数字后缀,避免重命名冲突(如 B_m1 已存在)。

该方法简洁、健壮且符合 pandas 惯用范式,是处理“组内两两配对展开”任务的标准实践。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

320

2025.12.04

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

232

2026.01.31

Python数据分析与Pandas高级实战
Python数据分析与Pandas高级实战

本专题围绕 Python 数据分析展开,系统讲解 Pandas 的高级用法,包括数据清洗、透视表、时间序列分析以及多表合并与分组操作。通过实战案例,帮助开发者掌握高效处理与分析数据的方法,提高数据处理效率与分析能力。

451

2026.04.13

Kratos框架HTTP与gRPC服务开发教程
Kratos框架HTTP与gRPC服务开发教程

本专题围绕Kratos框架双协议服务开发,涵盖HTTP路由与处理器编写、参数获取、gRPC服务实现与客户端调用、metadata上下文传递、encoding编解码注册、统一响应封装、超时控制与流式响应实现方法。

0

2026.10.10

Kratos框架Protobuf接口定义与代码生成合集
Kratos框架Protobuf接口定义与代码生成合集

本专题讲解Kratos框架接口定义体系,涵盖proto编写规范、proto add/client/server生成命令、http注解路由、validate校验、OpenAPI文档生成、跨服务proto复用与兼容性设计。

0

2026.10.10

C++虚函数怎么定义和调用
C++虚函数怎么定义和调用

C++虚函数是实现运行时多态的重要机制。本专题从virtual关键字的基本用法入手,介绍基类与派生类之间的函数重写、基类指针调用派生类方法,以及动态绑定的执行过程,帮助初学者掌握虚函数的核心语法。

0

2026.10.10

C++类与对象的封装方法教程
C++类与对象的封装方法教程

C++封装是面向对象编程的核心特性之一,通过类将数据与操作数据的函数组织在一起,并利用访问权限控制外部访问。本专题介绍类的定义、成员变量、成员函数以及public、private和protected的使用方法,帮助初学者掌握封装的基本原理。

0

2026.10.10

C++构造函数定义与调用方法
C++构造函数定义与调用方法

C++构造函数用于初始化类对象,是面向对象编程的重要基础。本专题从构造函数的定义、声明和调用入手,介绍默认构造函数、带参数构造函数、拷贝构造函数及成员初始化列表,帮助初学者掌握对象创建与初始化的基本方法。

0

2026.10.10

Kratos框架零基础入门教程
Kratos框架零基础入门教程

本专题整理Kratos框架入门内容,涵盖Go环境准备、kratos CLI安装升级、new命令创建项目、目录结构分层说明、服务启动与双协议端口、依赖下载报错排查,帮助开发者快速跑通第一个Kratos框架微服务应用。

0

2026.10.10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn