0

0

Python稀疏矩阵怎么存_字典坐标存储与scipy.sparse使用

P粉602998670

P粉602998670

发布时间:2026-03-11 19:37:32

|

823人浏览过

|

来源于php中文网

原创

用scipy.sparse.coo_matrix而非字典,因其底层用row/col/data三数组高效支持运算;构造需去重、转csr/csc再计算;存盘优选save_npz;切片等操作务必用csr/csc格式。

python稀疏矩阵怎么存_字典坐标存储与scipy.sparse使用

为什么用 scipy.sparse.coo_matrix 而不是手写字典?

直接存成 {(i, j): value} 看似简单,但一碰矩阵运算就卡住——加法、乘法、转置、切片全得自己重写,还容易索引越界或重复键覆盖。而 coo_matrix 底层用三个平行数组(row, col, data)组织坐标,既保留稀疏性,又对接所有 scipy.sparse 算子。

实操建议:

立即学习Python免费学习笔记(深入)”;

  • 从字典构造时,先转成三元组列表:[(i, j, v) for (i, j), v in my_dict.items()],再传给 coo_matrix
  • 别用 dict 直接赋值给 coo_matrix.data——它只认 np.ndarray,否则报 TypeError: data type not understood
  • 构造后立刻调用 .tocsr().tocsc() 再做计算,coo 格式本身不支持索引和算术运算

coo_matrix 构造后报 “duplicate entries” 怎么办?

这是最常踩的坑:同一个 (i, j) 坐标出现多次,coo_matrix 默认不合并,而是静默保留所有项,后续转 csr 时会触发警告甚至结果错乱。

实操建议:

立即学习Python免费学习笔记(深入)”;

  • 构造前用 scipy.sparse.coo_matrix((data, (row, col)), shape=(m,n)).sum_duplicates() —— 注意必须显式调用 .sum_duplicates()
  • 或者改用 scipy.sparse.dok_matrix 增量构建(适合边读边插),它自动去重累加,最后再转 coocsr
  • 检查原始数据:用 collections.Counter(zip(row, col)) 快速定位重复坐标

存硬盘时选 npz 还是 pickle

pickle 虽方便,但跨 Python 版本或机器可能反序列化失败;npz 是纯 NumPy 格式,稳定且可被其他语言(如 MATLAB、R)读取部分结构。

皮卡智能
皮卡智能

AI驱动高效视觉设计平台

下载

实操建议:

立即学习Python免费学习笔记(深入)”;

  • scipy.sparse.save_npz("mat.npz", mat) 存,scipy.sparse.load_npz("mat.npz") 读——它自动保存格式信息(如 csr 还是 coo
  • 别手动存 mat.row/mat.col/mat.datanp.savez,丢失了 shape 和格式标识,加载后得自己重建对象
  • 如果要压缩体积,npz 默认已用 zlib 压缩;pickleprotocol=5 + compress_pickle 才勉强追平,但牺牲兼容性

csr_matrix 做行切片比 coo 快多少?

coo_matrix[0, :] 是 O(nnz) 操作(遍历全部非零元),而 csr_matrix[0, :] 是 O(nnz_per_row),快一个数量级以上——尤其在宽矩阵(列数远大于行数)中差异明显。

实操建议:

立即学习Python免费学习笔记(深入)”;

  • 只要涉及任何切片、按行/列聚合、矩阵乘法,构造完立刻转 .tocsr()(行优先)或 .tocsc()(列优先)
  • 别在循环里反复调用 .toarray()——哪怕只取一行,也会把整个稀疏结构转成稠密 np.ndarray,内存爆炸
  • 验证格式:打印 type(mat),别只看变量名,mat 可能还是 coo 却误以为已优化

稀疏矩阵的“稀疏性”不是靠存储方式决定的,而是靠后续操作是否真正跳过零——格式选错,再多非零元也白搭。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
fprintf在matlab中的用法
fprintf在matlab中的用法

fprintf是MATLAB中用于格式化输出的函数。fprintf的基本语法为“fprintf(fileID, format, A)”,其中,fileID是一个标识符,用于指定要写入的文件,如果要将数据写入到命令窗口中,则可以使用1作为fileID的值,format是一个字符串,用于指定输出的格式,A是要输出的数据。

503

2023.09.28

数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

1133

2023.10.12

Matlab中length函数的用法
Matlab中length函数的用法

在Matlab中,length函数用于返回向量、数组或字符串中的元素个数。想了解更多length函数的相关内容,可以阅读本专题下面的文章。

332

2023.11.22

Matlab中axis函数用法
Matlab中axis函数用法

在Matlab中,axis函数用于控制坐标轴的范围和比例。想了解更多axis函数的相关内容,可以阅读本专题下面的文章。

783

2023.11.23

subplot在matlab中的用法
subplot在matlab中的用法

subplot在matlab中用于在同一个图窗中创建多个子图。通过指定子图的行数、列数和当前绘图位置,可以在每个子图中绘制不同的图形。想了解更多subplot在matlab中的用法,可以访问下面的文章。

150

2023.11.27

scilab和matlab的区别
scilab和matlab的区别

scilab和matlab的区别:1、注释符号;2、预设变量的表示;3、操作符的用法;4、矩阵的定义与调用;5、程序的编辑与执行;6、数据类型;7、函数库;8、图形界面;9、社区支持与生态系统;10、跨平台兼容性;11、价格。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

193

2023.12.11

Matlab如何四舍五入
Matlab如何四舍五入

Matlab可以通过round函数和格式化输出函数来对数值来进行四舍五入操作。更多关于Matlab相关的问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

429

2023.12.12

Matlab中axis函数用法介绍
Matlab中axis函数用法介绍

在Matlab中,axis函数用于设置当前坐标轴的范围和刻度。想了解更多axis函数的相关内容,可以阅读本专题下面的文章。

163

2023.12.13

C# ASP.NET Core微服务架构与API网关实践
C# ASP.NET Core微服务架构与API网关实践

本专题围绕 C# 在现代后端架构中的微服务实践展开,系统讲解基于 ASP.NET Core 构建可扩展服务体系的核心方法。内容涵盖服务拆分策略、RESTful API 设计、服务间通信、API 网关统一入口管理以及服务治理机制。通过真实项目案例,帮助开发者掌握构建高可用微服务系统的关键技术,提高系统的可扩展性与维护效率。

3

2026.03.11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 22.5万人学习

Django 教程
Django 教程

共28课时 | 4.9万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.9万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号