
本文深入探讨了如何使用NumPy库高效地对二维数组进行2x2分块操作和修改,避免了低效的Python循环。核心方法包括利用`np.lib.stride_tricks.as_strided`创建数组视图,以及通过构建查找表(lookup table, LUT)结合高级索引来实现批量、矢量化的数据转换,显著提升了处理性能。
在处理大型二维数组时,对特定大小(例如2x2)的子块进行迭代和修改是一个常见的需求。传统的Python循环(如itertools.product)虽然直观,但在面对大规模数据时性能瓶颈显著。NumPy提供了强大的矢量化操作能力,通过巧妙地运用视图和查找表,可以实现远超循环的效率。
假设我们有一个二维网格,需要根据每个2x2子块的当前状态,将其内容修改为预定义的新状态。原始问题中提供了一个基于Python循环的示例:
import numpy as np
import itertools
# 假设 transitions 是一个查找表,将2x2块的字节表示映射到新的布尔数组
# transitions = {b'\x00\x00\x00\x00': np.array([True, True, True, True]), …}
# grid 是一个二维NumPy数组
# yshift, xshift, ny, nx 定义了迭代范围
# 传统的Python循环方式
# for y, x in itertools.product(range(yshift, ny, 2), range(xshift, nx, 2)):
# grid[y:y+2, x:x+2].flat = transitions[grid[y:y+2, x:x+2].tobytes()]这种方法的问题在于,每次迭代都会创建一个新的2x2切片,并可能涉及数据复制,同时Python循环本身的开销也很大。为了提升效率,我们需要转向NumPy的矢量化特性。
NumPy的np.lib.stride_tricks.as_strided函数是一个非常强大的工具,它允许我们创建一个现有数组的“视图”,而无需复制数据。通过巧妙地设置shape和strides参数,我们可以将一个二维数组看作是由多个重叠或不重叠的子块组成的更高维数组。
对于一个形状为 (N, M) 的二维数组 A,要创建一个2x2分块的视图 Av,其 shape 将是 (N/2, M/2, 2, 2)。strides 参数则需要计算原始数组 A 在行和列方向上移动一个2x2块所需的字节步长,以及在块内部移动一个元素所需的字节步长。
import numpy as np
# 示例:创建一个10x10的0/1随机数组
A = np.random.randint(0, 2, (10, 10))
print("原始数组 A:\n", A)
# 计算步长
# A.strides[0] 是行步长(移动一行所需的字节数)
# A.strides[1] 是列步长(移动一列所需的字节数)
# 对于2x2块,外部视图的行步长是 A.strides[0]*2
# 外部视图的列步长是 A.strides[1]*2
# 内部2x2块的行步长是 A.strides[0]
# 内部2x2块的列步长是 A.strides[1]
Av = np.lib.stride_tricks.as_strided(A,
shape=(A.shape[0]//2, A.shape[1]//2, 2, 2),
strides=(A.strides[0]*2, A.strides[1]*2, A.strides[0], A.strides[1]))
print("\nAv 的形状:", Av.shape) # (5, 5, 2, 2)
print("Av 是 A 的视图吗?", np.shares_memory(A, Av)) # True现在,Av 是一个 (5, 5, 2, 2) 形状的视图,可以被看作是 A 中 5x5 个 2x2 子块的集合。对 Av 的任何修改都会直接反映到 A 上,因为它们共享内存。
有了分块视图 Av,我们就可以利用查找表进行高效的矢量化修改。
这种方法为每个2x2块的四个元素(假设为布尔值或0/1整数)创建一个多维索引,然后映射到对应的输出2x2块。
# 创建一个多维查找表 lut
# lut 的形状 (2,2,2,2, 2,2) 意味着:
# 前四个维度对应2x2块的四个布尔值 (0或1)
# 后两个维度是替换后的2x2结果块
lut = np.zeros((2, 2, 2, 2, 2, 2), dtype=A.dtype)
# 填充查找表(根据实际转换规则)
# 例如,如果块是 [[0,0],[0,0]],替换为 [[1,1],[1,1]]
lut[0, 0, 0, 0] = [[1, 1], [1, 1]]
# 如果块是 [[0,0],[0,1]],替换为 [[1,1],[1,0]]
lut[0, 0, 0, 1] = [[1, 1], [1, 0]]
# 如果块是 [[0,0],[1,0]],替换为 [[1,1],[0,1]]
lut[0, 0, 1, 0] = [[1, 1], [0, 1]]
# 更多规则...
lut[1, 1, 0, 0] = [[1, 1], [1, 1]] # 示例规则
# 使用高级索引进行赋值
# Av[...,0,0] 提取所有2x2块的左上角元素
# Av[...,0,1] 提取所有2x2块的右上角元素
# 依此类推
Av[:] = lut[Av[..., 0, 0], Av[..., 0, 1], Av[..., 1, 0], Av[..., 1, 1]]
print("\n修改后的数组 A (方法一):\n", A)这种方法的优点是直观,直接将2x2块的每个元素作为查找表的索引。缺点是如果2x2块中的元素数量增加,查找表的维度会迅速增长,导致创建和填充变得复杂。
为了简化查找表的索引,我们可以将每个2x2块的布尔(或0/1)状态转换为一个单一的整数索引。对于2x2块,共有 $2^4 = 16$ 种可能的组合,因此我们可以将它们映射到0-15的整数。
例如,一个2x2块 [[a, b], [c, d]] 可以通过加权和 a*8 + b*4 + c*2 + d*1 转换为一个0-15的索引。
# 创建一个扁平化索引的查找表 lut2
# lut2 的形状 (16, 2, 2) 意味着:
# 第一个维度是0-15的索引
# 后两个维度是替换后的2x2结果块
lut2 = np.zeros((16, 2, 2), dtype=A.dtype)
# 填充查找表(根据实际转换规则)
# 索引 0 (0000b) 对应 [[0,0],[0,0]]
lut2[0] = [[1, 1], [1, 1]]
# 索引 1 (0001b) 对应 [[0,0],[0,1]]
lut2[1] = [[1, 1], [1, 0]]
# 索引 2 (0010b) 对应 [[0,0],[1,0]]
lut2[2] = [[1, 1], [0, 1]]
# 索引 12 (1100b) 对应 [[1,1],[0,0]]
lut2[12] = [[1, 1], [1, 1]] # 示例规则
# 重新生成一个随机数组 A 进行演示
A_new = np.random.randint(0, 2, (10, 10))
Av_new = np.lib.stride_tricks.as_strided(A_new,
shape=(A_new.shape[0]//2, A_new.shape[1]//2, 2, 2),
strides=(A_new.strides[0]*2, A_new.strides[1]*2, A_new.strides[0], A_new.strides[1]))
# 计算每个2x2块的扁平化索引
# [[8,4],[2,1]] 是权重矩阵
idx = (Av_new * [[8, 4], [2, 1]]).sum(axis=(2, 3))
# 使用扁平化索引进行赋值
Av_new[:] = lut2[idx]
print("\n修改后的数组 A (方法二):\n", A_new)这种方法通过将每个2x2块的状态编码为一个整数,极大地简化了查找表的索引方式,使得代码更简洁,并且在处理具有更多状态的块时也更具扩展性。
上述方法默认对整个数组进行分块操作。如果只需要修改数组的某个特定区域,我们可以对 Av 视图进行切片操作,然后进行赋值。
例如,只修改 Av 的 (2,2) 到 (4,4) 范围内的块:
# 假设 A 和 lut2 已经定义
# 重新生成一个随机数组 A 进行演示
A_partial = np.random.randint(0, 2, (10, 10))
Av_partial = np.lib.stride_tricks.as_strided(A_partial,
shape=(A_partial.shape[0]//2, A_partial.shape[1]//2, 2, 2),
strides=(A_partial.strides[0]*2, A_partial.strides[1]*2, A_partial.strides[0], A_partial.strides[1]))
# 计算局部区域的索引
idx_partial = (Av_partial[2:4, 2:4] * [[8, 4], [2, 1]]).sum(axis=(2, 3))
# 对 Av 的局部区域进行赋值
Av_partial[2:4, 2:4] = lut2[idx_partial]
print("\n局部修改后的数组 A (2:4, 2:4 块):\n", A_partial)通过结合 np.lib.stride_tricks.as_strided 创建分块视图和预计算的查找表,我们可以高效、矢量化地对NumPy二维数组的2x2分块进行修改,从而在处理图像、模拟网格或其他基于块的数据结构时获得显著的性能提升。
以上就是利用NumPy高效修改二维数组的2x2分块的详细内容,更多请关注php中文网其它相关文章!
每个人都需要一台速度更快、更稳定的 PC。随着时间的推移,垃圾文件、旧注册表数据和不必要的后台进程会占用资源并降低性能。幸运的是,许多工具可以让 Windows 保持平稳运行。
Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号