0

0

Python实现Excel数据的探索和清洗

舞夢輝影

舞夢輝影

发布时间:2025-11-20 22:18:05

|

504人浏览过

|

来源于php中文网

原创

使用Pandas读取并清洗Excel数据:先用read_excel加载数据,通过head、info、describe等方法探索数据,检查缺失值与唯一值;接着处理缺失值、去重、修正数据类型、处理异常值、标准化文本;最后用to_excel保存清洗后数据。掌握这些步骤可高效完成数据预处理,为分析打下基础。

python实现excel数据的探索和清洗

用Python处理Excel数据时,探索和清洗是关键步骤。Pandas库配合openpyxl或xlrd能高效完成读取、分析和清理工作。下面介绍常用操作,帮助你快速上手数据预处理。

读取Excel数据

使用pandas的read_excel函数加载Excel文件,确保已安装依赖:

pip install pandas openpyxl

代码示例如下:

  • 读取默认sheet:df = pd.read_excel("data.xlsx")
  • 指定sheet名称或索引:df = pd.read_excel("data.xlsx", sheet_name="Sheet1")
  • 跳过行或设置列名:可加参数skiprows、header等灵活控制输入结构

数据探索(Exploratory Data Analysis)

加载后先了解数据整体情况:

立即学习Python免费学习笔记(深入)”;

PathFinder
PathFinder

AI驱动的销售漏斗分析工具

下载
  • 查看前几行:df.head()
  • 基本信息:df.info() 查看字段类型和非空数量
  • 统计描述:df.describe() 获取数值型字段的均值、标准差等
  • 检查缺失值:df.isnull().sum() 按列统计空值数量
  • 唯一值数量:df.nunique() 判断分类变量是否合理

常见数据清洗操作

根据探索结果进行清洗:

  • 处理缺失值:可用df.dropna()删除含空行,或df.fillna()填充。例如用均值填数值列:df['age'].fillna(df['age'].mean(), inplace=True)
  • 去除重复数据:df.drop_duplicates(inplace=True)
  • 修正数据类型:如将日期列转为datetime:df['date'] = pd.to_datetime(df['date'])
  • 处理异常值:通过条件筛选或IQR方法识别并处理离群点
  • 标准化文本数据:去除空格、统一大小写:df['name'] = df['name'].str.strip().str.upper()

保存清洗后数据

完成清洗后导出为新Excel文件:

  • df.to_excel("cleaned_data.xlsx", index=False) # 不保存行索引
  • 支持多个sheet:with pd.ExcelWriter(...) 可写入多表

基本上就这些。掌握这些流程后,大部分Excel数据都能快速完成初步清洗和准备,为后续分析打基础。不复杂但容易忽略细节,比如类型转换和空值判断要结合业务理解。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

WorkBuddy
WorkBuddy

腾讯云推出的AI原生桌面智能体工作台

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

80

2025.12.04

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

32

2026.01.31

pip安装使用方法
pip安装使用方法

安装步骤:1、确保Python已经正确安装在您的计算机上;2、下载“get-pip.py”脚本;3、按下Win + R键,然后输入cmd并按下Enter键来打开命令行窗口;4、在命令行窗口中,使用cd命令切换到“get-pip.py”所在的目录;5、执行安装命令;6、验证安装结果即可。大家可以访问本专题下的文章,了解pip安装使用方法的更多内容。

373

2023.10.09

更新pip版本
更新pip版本

更新pip版本方法有使用pip自身更新、使用操作系统自带的包管理工具、使用python包管理工具、手动安装最新版本。想了解更多相关的内容,请阅读专题下面的文章。

437

2024.12.20

pip设置清华源
pip设置清华源

设置方法:1、打开终端或命令提示符窗口;2、运行“touch ~/.pip/pip.conf”命令创建一个名为pip的配置文件;3、打开pip.conf文件,然后添加“[global];index-url = https://pypi.tuna.tsinghua.edu.cn/simple”内容,这将把pip的镜像源设置为清华大学的镜像源;4、保存并关闭文件即可。

803

2024.12.23

python升级pip
python升级pip

本专题整合了python升级pip相关教程,阅读下面的文章了解更多详细内容。

371

2025.07.23

数据类型有哪几种
数据类型有哪几种

数据类型有整型、浮点型、字符型、字符串型、布尔型、数组、结构体和枚举等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

338

2023.10.31

php数据类型
php数据类型

本专题整合了php数据类型相关内容,阅读专题下面的文章了解更多详细内容。

225

2025.10.31

Python异步编程与Asyncio高并发应用实践
Python异步编程与Asyncio高并发应用实践

本专题围绕 Python 异步编程模型展开,深入讲解 Asyncio 框架的核心原理与应用实践。内容包括事件循环机制、协程任务调度、异步 IO 处理以及并发任务管理策略。通过构建高并发网络请求与异步数据处理案例,帮助开发者掌握 Python 在高并发场景中的高效开发方法,并提升系统资源利用率与整体运行性能。

37

2026.03.12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Excel 教程
Excel 教程

共162课时 | 21.2万人学习

成为PHP架构师-自制PHP框架
成为PHP架构师-自制PHP框架

共28课时 | 2.6万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号