0

0

如何将 Pandas DataFrame 从长格式高效转换为宽格式

花韻仙語

花韻仙語

发布时间:2026-02-23 21:42:21

|

477人浏览过

|

来源于php中文网

原创

如何将 Pandas DataFrame 从长格式高效转换为宽格式

本文详解使用 pivot() 实现按指定列(如 order)将长格式 DataFrame 转换为宽格式的方法,支持多值列(quant/price)对齐、层级列重排序,并妥善处理不等长分组导致的缺失值。

本文详解使用 `pivot()` 实现按指定列(如 order)将长格式 dataframe 转换为宽格式的方法,支持多值列(quant/price)对齐、层级列重排序,并妥善处理不等长分组导致的缺失值。

在数据分析中,常需将“长格式”(long format)数据重塑为“宽格式”(wide format),尤其当同一主键(如 order)对应多条记录,且需横向展开多个指标(如 quant 和 price)时。Pandas 提供了强大而灵活的 DataFrame.pivot() 方法,专为此类结构化重塑设计。

以问题中的 Case 1 为例,原始 DataFrame 每个 order 出现两次,start-end 时间区间成对出现,目标是将 order 变为列头,同时保留 quant 和 price 作为子列。关键在于:
✅ 使用复合索引 ['start', 'end'] 作为行标识;
✅ 将 order 设为列变量(columns);
✅ 自动对多值列(quant, price)生成 MultiIndex 列;
✅ 后续通过 swaplevel() 和 sort_index() 规范列顺序,使 order 成为外层、指标为内层,提升可读性。

以下是完整可执行代码:

import pandas as pd

# 构造 Case 1 示例数据
df = pd.DataFrame({
    'order': ['1', '1', '2', '2', '3', '3'],
    'start': pd.to_datetime(['2023-04-01 04:00:00+0000', '2023-05-01 04:00:00+0000',
                             '2023-04-01 04:00:00+0000', '2023-05-01 04:00:00+0000',
                             '2023-04-01 04:00:00+0000', '2023-05-01 04:00:00+0000'], utc=True),
    'end': pd.to_datetime(['2023-05-01 04:00:00+0000', '2023-06-01 04:00:00+0000',
                           '2023-05-01 04:00:00+0000', '2023-06-01 04:00:00+0000',
                           '2023-05-01 04:00:00+0000', '2023-06-01 04:00:00+0000'], utc=True),
    'quant': [10, 10, 20, 30, 40, 50],
    'price': [44, 44, 5, 6, 8, 8]
})

# 执行 pivot 转换
out = (df.pivot(index=['start', 'end'], columns='order')
         .sort_index(axis=1, level=1, sort_remaining=False)  # 按 order 数值顺序排序列
         .swaplevel(axis=1)  # 将 order 提升为外层列索引,quant/price 为内层
         .sort_index(axis=1)  # 最终按列名字典序整理(可选)
      )

print(out)

输出结果为标准宽格式 MultiIndex DataFrame:

SophNet
SophNet

专业的AI开发工具平台,让AI集成变得简单高效。

下载
order                                                   1           2           3      
                                                    quant price quant price quant price
start                     end                                                          
2023-04-01 04:00:00+00:00 2023-05-01 04:00:00+00:00    10    44    20     5    40     8
2023-05-01 04:00:00+00:00 2023-06-01 04:00:00+00:00    10    44    30     6    50     8

对于 Case 2(order == '3' 出现 4 次,而其他 order 仅 2 次),pivot() 会自动用 NaN 填充缺失位置,无需额外干预——这正是其健壮性的体现。例如新增两行后,order 1 和 order 2 对应的第 3、4 组 quant/price 将自然显示为 NaN,完全符合预期。

⚠️ 注意事项:

  • pivot() 要求 index + columns 的组合必须唯一,否则会报 ValueError: Index contains duplicate entries。若存在重复(如相同 start+end+order 多次出现),请先用 groupby().agg() 聚合(如取均值/首值)。
  • 若需更复杂的聚合逻辑(如每个 order 内按时间排序后取 top-N),应改用 pivot_table() 并指定 aggfunc。
  • 列层级顺序可通过 swaplevel() 和 reorder_levels() 精细控制;sort_index(axis=1) 可确保列名有序展示。
  • 最终结果若需扁平化列名(如 '1_quant'),可用 out.columns = ['_'.join(map(str, col)) for col in out.columns]。

掌握 pivot() 不仅能高效完成长宽转换,更是构建透视分析、特征工程宽表的基础能力。建议结合 reset_index()、droplevel() 等方法进一步定制输出结构,适配下游建模或报表需求。

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

76

2025.12.04

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

9

2026.01.31

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

866

2023.07.31

python中的format是什么意思
python中的format是什么意思

python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

452

2024.06.27

golang map内存释放
golang map内存释放

本专题整合了golang map内存相关教程,阅读专题下面的文章了解更多相关内容。

77

2025.09.05

golang map相关教程
golang map相关教程

本专题整合了golang map相关教程,阅读专题下面的文章了解更多详细内容。

36

2025.11.16

golang map原理
golang map原理

本专题整合了golang map相关内容,阅读专题下面的文章了解更多详细内容。

67

2025.11.17

java判断map相关教程
java判断map相关教程

本专题整合了java判断map相关教程,阅读专题下面的文章了解更多详细内容。

46

2025.11.27

pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法
pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法

本专题系统整理pixiv网页版官网入口及登录访问方式,涵盖官网登录页面直达路径、在线阅读入口及快速进入方法说明,帮助用户高效找到pixiv官方网站,实现便捷、安全的网页端浏览与账号登录体验。

1127

2026.02.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号