讲师中心 微信公众号
AI工具推荐 视频效率加速

如何基于字符串包含条件合并两个 DataFrame

千瑶姑娘_1372

千瑶姑娘_1372

发布时间:2026-10-17 12:34:37

|

644人浏览过

|

来源于php中文网

原创

如何基于字符串包含条件合并两个 DataFrame

本文介绍在 pandas 中实现非精确列匹配的 dataframe 合并方法:通过先按公共字段(如 deliveryperiod)左连接,再利用行级逻辑筛选 service 字段是否包含 vintage 值,最终补零并清理冗余列。

本文介绍在 pandas 中实现非精确列匹配的 dataframe 合并方法:通过先按公共字段(如 deliveryperiod)左连接,再利用行级逻辑筛选 service 字段是否包含 vintage 值,最终补零并清理冗余列。

在实际数据分析中,常遇到两表关键字段不完全一致但存在语义关联的情况——例如本例中 df1['Vintage'](如 "Vintage 2025")需匹配 df2['Service'](如 "ICE - Vintage 2025")中的子字符串,同时 DeliveryPeriod 必须严格相等。此时标准 pd.merge() 无法直接满足条件,需分步处理。

解决思路:先连接,后过滤,再修正

  1. 基础左连接(Left Join)
    以 DeliveryPeriod 为键进行合并,保留 df1 全部记录,并引入 df2 的 Service 和 FloatPrice 列:
import pandas as pd

df_merge = df1.merge(df2, on='DeliveryPeriod', how='left')
  1. 构建匹配掩码(Mask)
    使用 apply(axis=1) 对每行判断:Vintage 是否为字符串且是否被 Service 包含。注意需处理 Vintage 为 None 或 NaN 的情况(如 df1 第四行),避免 TypeError:
mask = df_merge.apply(
    lambda row: 
        pd.notna(row['Vintage']) and 
        isinstance(row['Vintage'], str) and 
        row['Vintage'] in row['Service'],
    axis=1
)
  1. 修正 FloatPrice:不匹配项设为 0.00
    将未命中匹配的行 FloatPrice 置为 0.00(符合示例输出要求),并删除临时列 Service:
df_merge.loc[~mask, 'FloatPrice'] = 0.00
df_merge = df_merge.drop(columns=['Service'])

完整可运行代码

import pandas as pd
import numpy as np

# 构造示例数据
df1 = pd.DataFrame({
    'BA': ['A', 'B', 'B', 'C'],
    'Product': ['foo', 'foo', 'foo', 'bar'],
    'FixedPrice': [10.00, 11.00, 12.00, 2.00],
    'Vintage': ['Vintage 2025', 'Vintage 2025', 'Vintage 2024', None],
    'DeliveryPeriod': ['Mar25', 'Dec25', 'Sep25', 'Nov25']
})

df2 = pd.DataFrame({
    'Service': ['ICE - Vintage 2025', 'ICE - Vintage 2025', 
                'ICE - Vintage 2024', 'ICE - Vintage 2023'],
    'DeliveryPeriod': ['Mar25', 'Dec25', 'Sep25', 'Nov25'],
    'FloatPrice': [5.00, 4.00, 6.00, 1.00]
})

# 执行条件合并
df_merge = df1.merge(df2, on='DeliveryPeriod', how='left')
mask = df_merge.apply(
    lambda row: pd.notna(row['Vintage']) and 
                isinstance(row['Vintage'], str) and 
                row['Vintage'] in row['Service'],
    axis=1
)
df_merge.loc[~mask, 'FloatPrice'] = 0.00
df_merge = df_merge.drop(columns=['Service'])

print(df_merge)

注意事项与优化建议

  • ✅ 空值安全:显式检查 pd.notna() 和 isinstance(..., str) 避免 NaN in 'str' 报错;
  • ⚠️ 性能提示:apply(axis=1) 是逐行操作,在大数据集上较慢;若需更高性能,可考虑预处理 df2,提取 Vintage 子串并构造映射字典(如 {'Mar25': {'Vintage 2025': 5.0}}),再用 map() 实现向量化查找;
  • ? 扩展性:若 Vintage 格式不统一(如含空格、大小写差异),建议提前对 Vintage 和 Service 统一清洗(如 .str.strip().str.upper());
  • ? 结果验证:最后一行 Vintage=None → FloatPrice=0.00,符合业务逻辑中“无对应服务则浮动价为零”的约定。

该方法兼顾清晰性与实用性,是处理“模糊键匹配”类合并任务的经典范式。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

320

2025.12.04

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

252

2026.01.31

Python数据分析与Pandas高级实战
Python数据分析与Pandas高级实战

本专题围绕 Python 数据分析展开,系统讲解 Pandas 的高级用法,包括数据清洗、透视表、时间序列分析以及多表合并与分组操作。通过实战案例,帮助开发者掌握高效处理与分析数据的方法,提高数据处理效率与分析能力。

531

2026.04.13

OpenJDK JVM参数怎么调优
OpenJDK JVM参数怎么调优

Java应用运行缓慢,如何调整JVM参数?本专题介绍OpenJDK JVM性能调优的基本流程,涵盖性能指标确认、运行数据采集、内存配置和垃圾回收分析,帮助你先定位瓶颈,再通过对照测试验证效果,避免直接套用参数而影响应用稳定性。

0

2026.10.16

OpenJDK怎么配置Java开发环境
OpenJDK怎么配置Java开发环境

怎样用OpenJDK搭建开发环境?本专题介绍版本选择、下载安装、环境变量配置和编译运行验证,帮助你理清JDK的作用及基本配置流程,并通过简单程序检查环境是否可用,为后续项目开发做好准备。

0

2026.10.16

OpenJDK怎么部署Java应用
OpenJDK怎么部署Java应用

Java项目开发完成后,怎样部署到目标环境并正常运行?本专题介绍OpenJDK应用部署流程,涵盖运行环境准备、版本兼容检查、应用打包、启动参数配置和日志查看,帮助你理清部署前后的操作顺序,减少环境差异造成的运行问题。

0

2026.10.16

Revel框架模板渲染与表单验证
Revel框架模板渲染与表单验证

本专题围绕Revel框架视图层开发,介绍模板语法、变量输出、布局复用、表单提交、参数绑定与验证规则,帮助开发者完成安全规范的页面交互。

0

2026.10.16

Revel框架MVC路由与控制器
Revel框架MVC路由与控制器

本专题聚焦Revel框架MVC核心机制,讲解路由定义、控制器Action、参数绑定、请求响应和反向路由,并结合常见场景梳理接口请求处理流程。

0

2026.10.16

Revel框架入门与安装配置
Revel框架入门与安装配置

本专题从Revel框架环境搭建讲起,系统介绍命令行工具安装、项目创建、目录结构、配置文件及热代码重载,帮助开发者快速完成首个Go Web应用。

0

2026.10.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn