0

0

Pandas 中基于数字集合实现姓名组间精准匹配的完整教程

心靈之曲

心靈之曲

发布时间:2026-02-26 11:13:01

|

774人浏览过

|

来源于php中文网

原创

Pandas 中基于数字集合实现姓名组间精准匹配的完整教程

本文介绍如何利用 Pandas 的 explode() 与 merge() 实现两组姓名(name_b/name_s)按其关联数字集合(number_b/number_s)进行笛卡尔式交叉匹配,高效生成所有可能的数值对齐结果。

本文介绍如何利用 pandas 的 `explode()` 与 `merge()` 实现两组姓名(`name_b`/`name_s`)按其关联数字集合(`number_b`/`number_s`)进行笛卡尔式交叉匹配,高效生成所有可能的数值对齐结果。

在实际数据清洗与实体对齐任务中,常遇到一类结构化但非严格一一对应的匹配需求:例如,name_b 列每个值关联一个数字集合(如 {1, 2, 3}),name_s 列同理;目标并非全集匹配,而是找出所有「共享相同数字」的 (name_b, name_s) 组合,并保留原始上下文(如 Entity)。这种场景常见于供应商名录比对、产品别名映射或跨系统 ID 关联等业务中。

核心思路是将集合“展开”为行级原子记录,再通过数值键合并——这正是 pandas.explode() 的典型用武之地。需注意:输入中的 number_b 和 number_s 必须为可迭代对象(如 set、list 或 tuple),若当前为字符串(如 "{1, 2, 3}"),需先用 ast.literal_eval 安全转换。

Descript
Descript

一个多功能的音频和视频编辑引擎

下载

以下为完整、健壮的实现步骤:

✅ 步骤 1:准备并验证数据类型

import pandas as pd
import ast

# 若 number_b / number_s 是字符串形式的集合,先转换(关键预处理!)
for col in ["number_b", "number_s"]:
    if df[col].dtype == "object" and not df[col].apply(lambda x: isinstance(x, (set, list, tuple))).all():
        df[col] = df[col].apply(lambda x: ast.literal_eval(str(x)) if pd.notna(x) else set())

✅ 步骤 2:分别展开两组数字集合

# 展开 name_b 关联的数字,并保留 Entity 上下文
df_b = (df[["Entity", "name_b", "number_b"]]
        .explode("number_b")
        .dropna(subset=["number_b"])  # 过滤空集合或 NaN
        .rename(columns={"number_b": "number"}))

# 展开 name_s 关联的数字(无需 Entity)
df_s = (df[["name_s", "number_s"]]
        .explode("number_s")
        .dropna(subset=["number_s"])
        .rename(columns={"number_s": "number"}))

✅ 步骤 3:外连接匹配,保留全部组合

# 基于 'number' 列执行 outer join —— 确保无遗漏(如 GCP Zyla 的 4/7 仍保留,name_s 为 NaN)
result = pd.merge(df_b, df_s, on="number", how="outer")

# 按需求排序(可选):保持与示例一致的逻辑顺序
result = result.sort_values(["Entity", "number", "name_b"]).reset_index(drop=True)

# 将缺失的 name_s 显式替换为 '-'(符合示例输出风格)
result["name_s"] = result["name_s"].fillna("-")

⚠️ 注意事项与最佳实践

  • 空值处理:explode() 对 NaN 或空集合(set())会生成 NaN 行,务必用 dropna(subset=[...]) 清理,避免无效匹配;
  • 性能提示:若集合规模极大(单个字段含数百数字),explode() 可能显著增加行数,建议提前评估膨胀比例;
  • 语义一致性:本方法匹配的是「数字交集」而非「名称相似度」,如需结合模糊匹配(如 fuzzywuzzy),应在 explode 后对 name_b/name_s 添加额外过滤条件;
  • 输出对齐:最终列序可按需调整:result[["Entity", "number", "name_b", "name_s"]]。

运行后,你将得到完全符合预期的 12 行结果——每一行代表一个由共同数字支撑的 name_b 与 name_s 的有效关联,同时完整保留原始实体标识与数值依据。这种方法简洁、可读性强,且完全向量化,是 Pandas 处理此类“一对多→多对多”映射问题的标准范式。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

76

2025.12.04

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

9

2026.01.31

数据类型有哪几种
数据类型有哪几种

数据类型有整型、浮点型、字符型、字符串型、布尔型、数组、结构体和枚举等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

311

2023.10.31

php数据类型
php数据类型

本专题整合了php数据类型相关内容,阅读专题下面的文章了解更多详细内容。

223

2025.10.31

c语言 数据类型
c语言 数据类型

本专题整合了c语言数据类型相关内容,阅读专题下面的文章了解更多详细内容。

97

2026.02.12

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

638

2023.08.03

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

218

2023.09.04

java基础知识汇总
java基础知识汇总

java基础知识有Java的历史和特点、Java的开发环境、Java的基本数据类型、变量和常量、运算符和表达式、控制语句、数组和字符串等等知识点。想要知道更多关于java基础知识的朋友,请阅读本专题下面的的有关文章,欢迎大家来php中文网学习。

1560

2023.10.24

batoto漫画官网入口与网页版访问指南
batoto漫画官网入口与网页版访问指南

本专题系统整理batoto漫画官方网站最新可用入口,涵盖最新官网地址、网页版登录页面及防走失访问方式说明,帮助用户快速找到batoto漫画官方平台,稳定在线阅读各类漫画内容。

331

2026.02.25

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号