0

0

利用NumPy高效修改二维数组的2x2分块

花韻仙語

花韻仙語

发布时间:2025-11-08 13:44:01

|

560人浏览过

|

来源于php中文网

原创

利用numpy高效修改二维数组的2x2分块

本文深入探讨了如何使用NumPy库高效地对二维数组进行2x2分块操作和修改,避免了低效的Python循环。核心方法包括利用`np.lib.stride_tricks.as_strided`创建数组视图,以及通过构建查找表(lookup table, LUT)结合高级索引来实现批量、矢量化的数据转换,显著提升了处理性能。

在处理大型二维数组时,对特定大小(例如2x2)的子块进行迭代和修改是一个常见的需求。传统的Python循环(如itertools.product)虽然直观,但在面对大规模数据时性能瓶颈显著。NumPy提供了强大的矢量化操作能力,通过巧妙地运用视图和查找表,可以实现远超循环的效率。

问题背景与传统方法局限

假设我们有一个二维网格,需要根据每个2x2子块的当前状态,将其内容修改为预定义的新状态。原始问题中提供了一个基于Python循环的示例:

import numpy as np
import itertools

# 假设 transitions 是一个查找表,将2x2块的字节表示映射到新的布尔数组
# transitions = {b'\x00\x00\x00\x00': np.array([True, True, True, True]), …}
# grid 是一个二维NumPy数组
# yshift, xshift, ny, nx 定义了迭代范围

# 传统的Python循环方式
# for y, x in itertools.product(range(yshift, ny, 2), range(xshift, nx, 2)):
#     grid[y:y+2, x:x+2].flat = transitions[grid[y:y+2, x:x+2].tobytes()]

这种方法的问题在于,每次迭代都会创建一个新的2x2切片,并可能涉及数据复制,同时Python循环本身的开销也很大。为了提升效率,我们需要转向NumPy的矢量化特性。

利用 np.lib.stride_tricks.as_strided 创建分块视图

NumPy的np.lib.stride_tricks.as_strided函数是一个非常强大的工具,它允许我们创建一个现有数组的“视图”,而无需复制数据。通过巧妙地设置shape和strides参数,我们可以将一个二维数组看作是由多个重叠或不重叠的子块组成的更高维数组。

对于一个形状为 (N, M) 的二维数组 A,要创建一个2x2分块的视图 Av,其 shape 将是 (N/2, M/2, 2, 2)。strides 参数则需要计算原始数组 A 在行和列方向上移动一个2x2块所需的字节步长,以及在块内部移动一个元素所需的字节步长。

import numpy as np

# 示例:创建一个10x10的0/1随机数组
A = np.random.randint(0, 2, (10, 10))
print("原始数组 A:\n", A)

# 计算步长
# A.strides[0] 是行步长(移动一行所需的字节数)
# A.strides[1] 是列步长(移动一列所需的字节数)
# 对于2x2块,外部视图的行步长是 A.strides[0]*2
# 外部视图的列步长是 A.strides[1]*2
# 内部2x2块的行步长是 A.strides[0]
# 内部2x2块的列步长是 A.strides[1]
Av = np.lib.stride_tricks.as_strided(A, 
                                     shape=(A.shape[0]//2, A.shape[1]//2, 2, 2), 
                                     strides=(A.strides[0]*2, A.strides[1]*2, A.strides[0], A.strides[1]))

print("\nAv 的形状:", Av.shape) # (5, 5, 2, 2)
print("Av 是 A 的视图吗?", np.shares_memory(A, Av)) # True

现在,Av 是一个 (5, 5, 2, 2) 形状的视图,可以被看作是 A 中 5x5 个 2x2 子块的集合。对 Av 的任何修改都会直接反映到 A 上,因为它们共享内存。

基于查找表(LUT)的矢量化修改

有了分块视图 Av,我们就可以利用查找表进行高效的矢量化修改。

方法一:多维查找表

这种方法为每个2x2块的四个元素(假设为布尔值或0/1整数)创建一个多维索引,然后映射到对应的输出2x2块。

newasp框架2.3.0
newasp框架2.3.0

newasp框架是一个基于 Classic Asp Vbscript Api 框架。全面支持64位,无需修改应用池32位启用,效率更高。 更新日志: 8月2号 - v2.2.9 修复Str.ToString对GetRows二维数组的解析问题 7月26号 - v2.2.8 修复IIS在前端自定义信息头提交下的跨域访问问题 修复路由对跨域OPTIONS发起提交导致的访问问题 修改web.confi

下载
# 创建一个多维查找表 lut
# lut 的形状 (2,2,2,2, 2,2) 意味着:
# 前四个维度对应2x2块的四个布尔值 (0或1)
# 后两个维度是替换后的2x2结果块
lut = np.zeros((2, 2, 2, 2, 2, 2), dtype=A.dtype)

# 填充查找表(根据实际转换规则)
# 例如,如果块是 [[0,0],[0,0]],替换为 [[1,1],[1,1]]
lut[0, 0, 0, 0] = [[1, 1], [1, 1]]
# 如果块是 [[0,0],[0,1]],替换为 [[1,1],[1,0]]
lut[0, 0, 0, 1] = [[1, 1], [1, 0]]
# 如果块是 [[0,0],[1,0]],替换为 [[1,1],[0,1]]
lut[0, 0, 1, 0] = [[1, 1], [0, 1]]
# 更多规则...
lut[1, 1, 0, 0] = [[1, 1], [1, 1]] # 示例规则

# 使用高级索引进行赋值
# Av[...,0,0] 提取所有2x2块的左上角元素
# Av[...,0,1] 提取所有2x2块的右上角元素
# 依此类推
Av[:] = lut[Av[..., 0, 0], Av[..., 0, 1], Av[..., 1, 0], Av[..., 1, 1]]

print("\n修改后的数组 A (方法一):\n", A)

这种方法的优点是直观,直接将2x2块的每个元素作为查找表的索引。缺点是如果2x2块中的元素数量增加,查找表的维度会迅速增长,导致创建和填充变得复杂。

方法二:扁平化索引查找表

为了简化查找表的索引,我们可以将每个2x2块的布尔(或0/1)状态转换为一个单一的整数索引。对于2x2块,共有 $2^4 = 16$ 种可能的组合,因此我们可以将它们映射到0-15的整数。

例如,一个2x2块 [[a, b], [c, d]] 可以通过加权和 a*8 + b*4 + c*2 + d*1 转换为一个0-15的索引。

# 创建一个扁平化索引的查找表 lut2
# lut2 的形状 (16, 2, 2) 意味着:
# 第一个维度是0-15的索引
# 后两个维度是替换后的2x2结果块
lut2 = np.zeros((16, 2, 2), dtype=A.dtype)

# 填充查找表(根据实际转换规则)
# 索引 0 (0000b) 对应 [[0,0],[0,0]]
lut2[0] = [[1, 1], [1, 1]]
# 索引 1 (0001b) 对应 [[0,0],[0,1]]
lut2[1] = [[1, 1], [1, 0]]
# 索引 2 (0010b) 对应 [[0,0],[1,0]]
lut2[2] = [[1, 1], [0, 1]]
# 索引 12 (1100b) 对应 [[1,1],[0,0]]
lut2[12] = [[1, 1], [1, 1]] # 示例规则

# 重新生成一个随机数组 A 进行演示
A_new = np.random.randint(0, 2, (10, 10))
Av_new = np.lib.stride_tricks.as_strided(A_new, 
                                        shape=(A_new.shape[0]//2, A_new.shape[1]//2, 2, 2), 
                                        strides=(A_new.strides[0]*2, A_new.strides[1]*2, A_new.strides[0], A_new.strides[1]))

# 计算每个2x2块的扁平化索引
# [[8,4],[2,1]] 是权重矩阵
idx = (Av_new * [[8, 4], [2, 1]]).sum(axis=(2, 3))

# 使用扁平化索引进行赋值
Av_new[:] = lut2[idx]

print("\n修改后的数组 A (方法二):\n", A_new)

这种方法通过将每个2x2块的状态编码为一个整数,极大地简化了查找表的索引方式,使得代码更简洁,并且在处理具有更多状态的块时也更具扩展性。

局部修改分块

上述方法默认对整个数组进行分块操作。如果只需要修改数组的某个特定区域,我们可以对 Av 视图进行切片操作,然后进行赋值。

例如,只修改 Av 的 (2,2) 到 (4,4) 范围内的块:

# 假设 A 和 lut2 已经定义
# 重新生成一个随机数组 A 进行演示
A_partial = np.random.randint(0, 2, (10, 10))
Av_partial = np.lib.stride_tricks.as_strided(A_partial, 
                                             shape=(A_partial.shape[0]//2, A_partial.shape[1]//2, 2, 2), 
                                             strides=(A_partial.strides[0]*2, A_partial.strides[1]*2, A_partial.strides[0], A_partial.strides[1]))

# 计算局部区域的索引
idx_partial = (Av_partial[2:4, 2:4] * [[8, 4], [2, 1]]).sum(axis=(2, 3))

# 对 Av 的局部区域进行赋值
Av_partial[2:4, 2:4] = lut2[idx_partial]

print("\n局部修改后的数组 A (2:4, 2:4 块):\n", A_partial)

注意事项与总结

  1. as_strided 的风险: np.lib.stride_tricks.as_strided 是一个底层函数,使用不当可能导致内存访问错误。务必确保 shape 和 strides 参数设置正确,以避免越界访问。在大多数情况下,它是一个创建视图的强大工具,但需要谨慎使用。
  2. 数据类型: 本文示例假设数组元素是布尔值或0/1整数。如果数组包含其他类型的数据,需要调整查找表的索引转换逻辑和查找表本身的 dtype。
  3. 性能优势: 这种基于 as_strided 和查找表的方法,将Python循环的开销转移到了NumPy的C实现中,通过矢量化操作显著提升了性能,尤其适用于大型数组。
  4. 内存效率: as_strided 创建的是视图,不涉及数据复制,因此在内存使用上非常高效。查找表虽然会占用额外内存,但对于固定大小的块(如2x2),其大小是固定的且通常很小。

通过结合 np.lib.stride_tricks.as_strided 创建分块视图和预计算的查找表,我们可以高效、矢量化地对NumPy二维数组的2x2分块进行修改,从而在处理图像、模拟网格或其他基于块的数据结构时获得显著的性能提升。

相关专题

更多
python开发工具
python开发工具

php中文网为大家提供各种python开发工具,好的开发工具,可帮助开发者攻克编程学习中的基础障碍,理解每一行源代码在程序执行时在计算机中的过程。php中文网还为大家带来python相关课程以及相关文章等内容,供大家免费下载使用。

772

2023.06.15

python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

661

2023.07.20

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

765

2023.07.25

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

679

2023.07.31

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

1385

2023.08.03

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

570

2023.08.04

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

579

2023.08.04

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

730

2023.08.11

C++ 高级模板编程与元编程
C++ 高级模板编程与元编程

本专题深入讲解 C++ 中的高级模板编程与元编程技术,涵盖模板特化、SFINAE、模板递归、类型萃取、编译时常量与计算、C++17 的折叠表达式与变长模板参数等。通过多个实际示例,帮助开发者掌握 如何利用 C++ 模板机制编写高效、可扩展的通用代码,并提升代码的灵活性与性能。

10

2026.01.23

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

相关下载

更多

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 14.4万人学习

Django 教程
Django 教程

共28课时 | 3.4万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号