0

0

Pandas高效定位与偏移行选择:基于关键词及相对位置筛选数据

心靈之曲

心靈之曲

发布时间:2026-01-22 23:44:01

|

938人浏览过

|

来源于php中文网

原创

Pandas高效定位与偏移行选择:基于关键词及相对位置筛选数据

本文介绍如何在不显式循环的前提下,使用 isin()、shift() 和布尔逻辑组合,精准选取 dataframe 中匹配关键词的行及其指定偏移量(如 +2 行)的记录,适用于多关键词、多偏移规则的批量筛选场景。

在 Pandas 数据处理中,直接用 for 循环遍历行并手动计算索引(如 df[df[0]=='cobra'].index[0] + 2)不仅低效、易出错,还违背向量化原则。更优解是利用布尔索引与时间序列/位移操作思想——将“查找某值”转化为布尔 Series,再通过 shift() 将其整体平移,从而自然表达“某值所在行的下 N 行”。

核心思路如下:

  • 对每个查询规则(如 'viper' 在原位置、'cobra' 在 +2 行),生成一个布尔 Series;
  • 使用 df[0].isin(values) 标记所有匹配关键词的行;
  • 调用 .shift(k, fill_value=False) 将该布尔序列向上(负 k)或向下(正 k)移动 k 行(k=2 表示“匹配行下方第 2 行”);
  • 用 np.logical_or.reduce() 合并所有偏移后的布尔序列,得到最终筛选掩码;
  • 一次性完成布尔索引:df[mask]。

以下为完整可运行示例:

import pandas as pd
import numpy as np

# 构造原始数据
data = {0: ['a', 'viper', 'b', 'c', 'cobra', 'd', 'e', 'f'],
        1: [20, 52, 59, 67, 11, 40, 10, 60]}
df = pd.DataFrame(data)

# 定义查询规则:{偏移量: [关键词列表]}
query = {
    0: ['viper', 'cobra'],  # 原位置匹配
    2: ['cobra']            # 匹配行下方第 2 行(即 cobra 行索引 + 2)
}

# 构建复合布尔掩码
mask = np.logical_or.reduce([
    df[0].isin(values).shift(offset, fill_value=False)
    for offset, values in query.items()
])

# 应用筛选
result = df[mask].reset_index(drop=True)
print(result)

输出:

XFUN
XFUN

小方智能包装设计平台

下载
       0   1
0  viper  52
1  cobra  11
2      e  10

关键优势

  • 完全向量化:无 Python 循环,性能随数据量增长仍稳定;
  • 灵活扩展:新增规则只需在 query 字典中添加 {offset: [words]};
  • 安全鲁棒:fill_value=False 确保越界位置不产生 NaN 干扰逻辑运算;
  • 可读性强:语义贴近自然语言描述(如“cobra+2”直接对应 shift(2))。

⚠️ 注意事项

  • shift() 默认向下移动(即 shift(2) 将 True 值从索引 i 移至 i+2),符合“目标行在匹配行下方”的直觉;若需上方行,使用负偏移(如 shift(-1) 表示上一行);
  • 多个关键词共用同一偏移量时,isin() 自动支持列表,无需分别构造;
  • 若存在重复关键词(如多个 'cobra'),每处都会触发对应偏移行的选取,符合预期行为。

综上,该方法将“基于内容定位 + 相对行偏移”的需求,优雅地转化为 Pandas 原生的布尔序列操作,是替代手动索引迭代的标准实践。

相关专题

更多
python开发工具
python开发工具

php中文网为大家提供各种python开发工具,好的开发工具,可帮助开发者攻克编程学习中的基础障碍,理解每一行源代码在程序执行时在计算机中的过程。php中文网还为大家带来python相关课程以及相关文章等内容,供大家免费下载使用。

772

2023.06.15

python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

661

2023.07.20

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

764

2023.07.25

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

679

2023.07.31

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

1365

2023.08.03

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

569

2023.08.04

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

579

2023.08.04

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

730

2023.08.11

菜鸟裹裹入口以及教程汇总
菜鸟裹裹入口以及教程汇总

本专题整合了菜鸟裹裹入口地址及教程分享,阅读专题下面的文章了解更多详细内容。

0

2026.01.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 13.5万人学习

Django 教程
Django 教程

共28课时 | 3.4万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号