0

0

计算每个用户在指定日期前3个月内的累计出现次数(向量化实现)

碧海醫心

碧海醫心

发布时间:2026-01-29 09:05:13

|

521人浏览过

|

来源于php中文网

原创

计算每个用户在指定日期前3个月内的累计出现次数(向量化实现)

本文介绍如何使用 pandas 的向量化操作高效统计每个用户在各自日期前3个月内的累计出现次数,避免低效的 apply 或循环,适用于大规模数据场景。

在时间序列分析中,常需按用户(或分组键)统计“截至当前日期、过去 N 个月内的累计频次”。一个典型误区是误以为 cumcount() 能直接表达“滑动窗口内计数”——实际上,cumcount() 统计的是组内从首行到当前行的累计序号,它隐含的前提是:数据已按时间升序排列,且所有历史记录均落在当前行的“3个月窗口内”。

但注意:本题目标输出中的 N_Past_3_Months 列实际并非真正的滚动窗口计数,而是对每个用户按时间顺序的全局累计序号(+1)。观察预期结果可发现:

  • Alice 的四条记录日期严格递增,且每条都比前一条晚于3个月?不,2023-01-01 → 2023-02-01 仅隔1个月,却仍计为2;
  • 同时,Date_3_Months_Ago 列只是 Date - 3M 的简单偏移,并未用于过滤;
  • 最终 N_Past_3_Months 值恰好等于该用户在排序后的位置索引 +1(即 cumcount() + 1)。

这说明:题目真实需求是“每个用户按时间先后顺序的序号”,而非动态滑动窗口计数。若需真正满足“仅统计 Date ∈ (Date−3M, Date] 区间内的同名记录数”,则必须使用 rolling 或 searchsorted 等高级向量化技巧。但根据答案与输出一致性,此处采用的是更轻量、完全向量化的方案:

✅ 正确向量化步骤(适用于累计序号型需求)

import pandas as pd
from pandas import DateOffset

# 原始数据
df = pd.DataFrame({
    'Name': ['Alice', 'Alice', 'Bob', 'Alice', 'Bob', 'Alice'],
    'Date': ['2023-01-01', '2023-02-01', '2023-02-15', '2023-03-01', '2023-03-20', '2023-04-01']
})

# 关键三步:类型转换 → 排序 → 向量计算
df['Date'] = pd.to_datetime(df['Date'])
df = df.sort_values(['Name', 'Date']).reset_index(drop=True)  # 必须按 Name+Date 升序!

df['Date_3_Months_Ago'] = df['Date'] - DateOffset(months=3)
df['N_Past_3_Months'] = df.groupby('Name').cumcount() + 1

print(df)

输出:

一点PPT
一点PPT

一句话生成专业PPT,AI自动排版配图

下载
    Name       Date Date_3_Months_Ago  N_Past_3_Months
0  Alice 2023-01-01        2022-10-01                1
1  Alice 2023-02-01        2022-11-01                2
2  Alice 2023-03-01        2022-12-01                3
3  Alice 2023-04-01        2023-01-01                4
4    Bob 2023-02-15        2022-11-15                1
5    Bob 2023-03-20        2022-12-20                2

⚠️ 重要注意事项

  • 排序是前提:cumcount() 依赖行序,必须先 sort_values(['Name', 'Date']),否则结果无意义;
  • DateOffset 的边界行为:DateOffset(months=3) 智能处理月末日期(如 2023-01-31 - 3M → 2022-10-31),比简单减90天更准确;
  • 非滚动窗口:此解法 不检查 历史记录是否真在3个月内,仅做序号映射。若需严格滚动窗口(例如剔除超期记录),应改用如下模式:
# ✨ 真正的滚动窗口计数(推荐用于大数据,O(n log n))
df['Date_int'] = df['Date'].astype('int64')  # 转纳秒级整数便于二分查找
def count_in_window(group):
    dates = group['Date_int'].values
    counts = []
    for i, d in enumerate(dates):
        window_start = d - 3 * 30 * 24 * 3600 * 10**9  # 近似3个月(纳秒)
        # 更精确可用 pd.offsets.MonthBegin(3),但需配合 searchsorted
        left = np.searchsorted(dates, window_start, side='left')
        counts.append(i - left + 1)
    return pd.Series(counts)
df['N_Rolling_3M'] = df.sort_values(['Name','Date']).groupby('Name').apply(count_in_window).explode().astype(int).values

但该方案复杂度更高,且 DateOffset 不支持直接向量化滚动窗口。因此,请先确认业务语义:是“累计序号”还是“动态窗口频次” —— 二者算法与性能差异巨大。

✅ 总结

对于本题所示数据与预期输出,groupby(...).cumcount() + 1 是最简洁、零循环、全向量化的最优解。它内存友好、执行迅速,完美适配百万级用户-时间数据。牢记:向量化效能的前提,是精准理解指标定义;盲目套用“窗口”逻辑反而会引入错误或性能瓶颈

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

WorkBuddy
WorkBuddy

腾讯云推出的AI原生桌面智能体工作台

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

82

2025.12.04

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

34

2026.01.31

页面置换算法
页面置换算法

页面置换算法是操作系统中用来决定在内存中哪些页面应该被换出以便为新的页面提供空间的算法。本专题为大家提供页面置换算法的相关文章,大家可以免费体验。

508

2023.08.14

Python WebSocket实时通信与异步服务开发实践
Python WebSocket实时通信与异步服务开发实践

本专题聚焦 Python 在实时通信场景中的开发实践,系统讲解 WebSocket 协议原理、长连接管理、消息推送机制以及异步服务架构设计。内容包括客户端与服务端通信实现、连接稳定性优化、消息队列集成及高并发处理策略。通过完整案例,帮助开发者构建高效稳定的实时通信系统,适用于聊天应用、实时数据推送等场景。

5

2026.03.18

Java Spring Security权限控制与认证机制实战
Java Spring Security权限控制与认证机制实战

本专题围绕 Java 后端安全体系建设展开,重点讲解 Spring Security 在权限控制与认证机制中的应用实践。内容涵盖用户认证流程、权限模型设计、JWT 鉴权方案、OAuth2 集成以及接口安全防护策略。通过实际项目案例,帮助开发者构建安全可靠的后端认证体系,提升系统安全性与可扩展能力。

21

2026.03.18

抖漫入口地址合集
抖漫入口地址合集

本专题整合了抖漫入口地址相关合集,阅读专题下面的文章了解更多详细地址。

137

2026.03.17

多环境下的 Nginx 安装、结构与运维实战
多环境下的 Nginx 安装、结构与运维实战

本专题聚焦多环境下Nginx实战,详解开发、测试及生产环境的差异化安装策略与目录结构规划。深入剖析配置模块化设计、灰度发布流程及跨环境同步机制。结合监控告警、故障排查与自动化运维工具,提供全链路管理方案,助力团队构建灵活、高可用的Nginx服务体系,从容应对复杂业务场景挑战。

14

2026.03.17

PS 批量添加图片
PS 批量添加图片

本专题整合了PS批量添加图片教程合集,阅读专题下面的文章了解更多详细操作。

14

2026.03.17

Nginx 基础架构:从安装配置到系统化管理
Nginx 基础架构:从安装配置到系统化管理

本专题深入解析Nginx基础架构,涵盖从源码编译与包管理安装,到核心配置文件优化及虚拟主机部署。进一步探讨日志轮转、性能调优、高可用集群构建及自动化运维策略,助力管理员实现从单一服务搭建到企业级系统化管理的全面升级,确保Web服务高效、稳定运行。

7

2026.03.17

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Go 教程
Go 教程

共32课时 | 6.4万人学习

Go语言实战之 GraphQL
Go语言实战之 GraphQL

共10课时 | 0.9万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号