0

0

Python 字节码缓存的 .pyc 失效策略

冰川箭仙

冰川箭仙

发布时间:2026-02-22 22:28:03

|

613人浏览过

|

来源于php中文网

原创

python通过源码元数据摘要与编译器版本标识双校验决定.pyc是否重编译:检查magic number、source_hash及python版本;不匹配则丢弃旧缓存,改代码未生效可能是hash巧合碰撞或权限问题导致缓存未更新。

python 字节码缓存的 .pyc 失效策略

Python 怎么判断 .pyc 文件该不该重编译

Python 不靠文件修改时间戳做唯一判断,而是用「源码元数据摘要 + 编译器版本标识」双校验。具体来说,.pyc 文件头部会存一个 16 字节magic number(含 Python 版本主次号),后面紧跟着源文件的 mtimesize 的字节级哈希(CPython 3.7+ 改用 8 字节 source_hash)。只要源文件内容变了、Python 升了小版本(比如 3.9.7 → 3.10.0)、甚至只是用了不同构建的解释器(如 pyenv 编译版 vs 官方二进制版),.pyc 就会被丢弃。

常见错误现象:ImportError: bad magic number 就是 magic 不匹配;而明明改了代码却没生效,往往是 __pycache__ 下残留了旧 .pyc,且它的 hash 恰好和当前源码“撞车”(极小概率,但真实存在)。

  • 不要手动 touch 修改 .py 文件时间戳来“骗过”缓存——hash 校验不认这个
  • 跨 Python 版本运行时,__pycache__ 目录名含版本号(如 __pycache__/main.cpython-39.pyc),不会误用,但旧版本残留可能干扰调试
  • 使用 compileall 预编译时,加 -f 强制覆盖,否则跳过已存在的 .pyc

import 时找不到对应 .pyc 会怎样

找不到就现场编译,生成新 .pyc 并继续导入——整个过程对用户透明。但要注意:这发生在模块首次被 import 的时刻,不是脚本启动时;而且如果当前用户对 __pycache__ 目录无写权限,Python 会静默跳过写缓存(不报错),后续每次 import 都重新编译源码,拖慢启动。

使用场景:容器里只读文件系统、CI 构建环境临时目录、某些嵌入式 Python 运行时。

立即学习Python免费学习笔记(深入)”;

剪刀手
剪刀手

全自动AI剪辑神器:日剪千条AI原创视频,零非原创风险,批量高效制作引爆流量!免费体验,轻松上手!

下载
  • 检查 sys.pycache_prefix(3.12+)或 sys.path 中源码所在路径的 __pycache__ 是否可写
  • python -B 启动可完全禁用 .pyc 生成(但不会删除已有缓存)
  • importlib.util.cache_from_source() 可查某 .py 对应的 .pyc 路径,方便诊断

多环境共用同一代码目录时的 .pyc 冲突

多个 Python 解释器(不同版本、不同用户、virtualenv/conda 环境混用)写同一个 __pycache__ 目录,会导致 .pyc 文件被覆盖或权限异常,轻则缓存失效,重则触发 PermissionErrorOSError 导致 import 失败。

典型场景:团队共享 NFS 目录开发、Docker volume 挂载源码、WSL 与 Windows 双端编辑同一项目。

  • 设环境变量 PYTHONPYCACHEPREFIX=/tmp/pycache-$(python -c "import sys; print(sys.version_info[:2])"),让各环境写各自缓存根目录
  • .gitignore 里加 **/__pycache__/**/*.pyc,避免提交缓存文件
  • 不要在部署包里打包 __pycache__——生产环境应由目标机器首次运行时生成

py_compilecompileall 的参数差异影响缓存行为

这两个工具本质都是调 py_compile.compile(),但默认行为不同:py_compile 默认不写 __pycache__(除非显式传 dfile),而 compileall 默认走标准缓存路径。更关键的是,它们都支持 -d(指定 .pyc 输出目录)和 -l(不递归子目录),但忽略 sys.dont_write_bytecode 设置——即使你代码里写了 sys.dont_write_bytecode = True,命令行工具仍会写。

性能影响:批量预编译能减少首次启动延迟,但若源码频繁变更,预编译反而浪费 IO;且 compileall -j N 多进程并发时,对磁盘压力明显增大。

  • CI 打包建议用 compileall -b -f -q(生成 .pyc 到同目录、强制覆盖、安静模式)
  • py_compile.compile(source, doraise=True) 在代码中调用时,失败会抛 py_compile.PyCompileError,不是普通 Exception
  • 注意 compileall-i 参数读取文件列表时,路径必须是绝对路径或相对于当前工作目录,否则静默跳过

最易被忽略的一点:Python 从 3.8 开始,默认启用 importlib._bootstrap_external._code_to_bytecode() 的优化路径,它绕过部分校验逻辑加速加载——这意味着你在调试缓存问题时,看到的“没重编译”可能不是因为缓存命中,而是根本没走缓存校验流程。真要确认行为,得看 importlib.util.source_hash() 的输出,而不是只盯文件时间戳。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
python中print函数的用法
python中print函数的用法

python中print函数的语法是“print(value1, value2, ..., sep=' ', end=' ', file=sys.stdout, flush=False)”。本专题为大家提供print相关的文章、下载、课程内容,供大家免费下载体验。

192

2023.09.27

python print用法与作用
python print用法与作用

本专题整合了python print的用法、作用、函数功能相关内容,阅读专题下面的文章了解更多详细教程。

13

2026.02.03

windows查看端口占用情况
windows查看端口占用情况

Windows端口可以认为是计算机与外界通讯交流的出入口。逻辑意义上的端口一般是指TCP/IP协议中的端口,端口号的范围从0到65535,比如用于浏览网页服务的80端口,用于FTP服务的21端口等等。怎么查看windows端口占用情况呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

1231

2023.07.26

查看端口占用情况windows
查看端口占用情况windows

端口占用是指与端口关联的软件占用端口而使得其他应用程序无法使用这些端口,端口占用问题是计算机系统编程领域的一个常见问题,端口占用的根本原因可能是操作系统的一些错误,服务器也可能会出现端口占用问题。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

1151

2023.07.27

windows照片无法显示
windows照片无法显示

当我们尝试打开一张图片时,可能会出现一个错误提示,提示说"Windows照片查看器无法显示此图片,因为计算机上的可用内存不足",本专题为大家提供windows照片无法显示相关的文章,帮助大家解决该问题。

823

2023.08.01

windows查看端口被占用的情况
windows查看端口被占用的情况

windows查看端口被占用的情况的方法:1、使用Windows自带的资源监视器;2、使用命令提示符查看端口信息;3、使用任务管理器查看占用端口的进程。本专题为大家提供windows查看端口被占用的情况的相关的文章、下载、课程内容,供大家免费下载体验。

460

2023.08.02

windows无法访问共享电脑
windows无法访问共享电脑

在现代社会中,共享电脑是办公室和家庭的重要组成部分。然而,有时我们可能会遇到Windows无法访问共享电脑的问题。这个问题可能会导致数据无法共享,影响工作和生活的正常进行。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2361

2023.08.08

windows自动更新
windows自动更新

Windows操作系统的自动更新功能可以确保系统及时获取最新的补丁和安全更新,以提高系统的稳定性和安全性。然而,有时候我们可能希望暂时或永久地关闭Windows的自动更新功能。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

854

2023.08.10

pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法
pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法

本专题系统整理pixiv网页版官网入口及登录访问方式,涵盖官网登录页面直达路径、在线阅读入口及快速进入方法说明,帮助用户高效找到pixiv官方网站,实现便捷、安全的网页端浏览与账号登录体验。

1030

2026.02.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 22.4万人学习

Django 教程
Django 教程

共28课时 | 4.5万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.7万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号