0

0

NumPy数组非重叠滑动窗口的高效构建方法

碧海醫心

碧海醫心

发布时间:2025-09-12 14:07:01

|

680人浏览过

|

来源于php中文网

原创

NumPy数组非重叠滑动窗口的高效构建方法

本文深入探讨了在NumPy中创建非重叠滑动窗口的多种高效方法,包括利用reshape进行简单重塑、结合sliding_window_view进行切片,以及通过理解as_strided的原理进行底层操作。通过详细的代码示例和原理分析,旨在帮助读者根据具体需求选择最合适的策略,从而优化数据处理流程。

在数据分析和机器学习任务中,将一维数组分割成固定大小的、互不重叠的子数组(即非重叠滑动窗口)是一项常见操作,尤其是在时间序列分析或异常检测等领域。numpy库提供了多种灵活且高效的方式来实现这一目标。本文将详细介绍三种主要方法:简单的reshape、结合sliding_window_view进行切片,以及更底层的as_strided。

1. 利用 reshape 进行简单重塑

当原始数组的长度能够被窗口大小完美整除时,reshape方法是最直接、最简洁的解决方案。它将一维数组直接重塑为二维数组,其中每个行代表一个非重叠的窗口。

示例代码:

import numpy as np

# 原始一维数组
x = np.arange(1, 7)
print(f"原始数组: {x}")

# 窗口大小为3,数组长度可被3整除
window_size = 3
if len(x) % window_size == 0:
    result_reshape = x.reshape(-1, window_size)
    print(f"使用 reshape 创建的非重叠窗口:\n{result_reshape}")
else:
    print("数组长度无法被窗口大小整除,reshape不适用。")

输出:

原始数组: [1 2 3 4 5 6]
使用 reshape 创建的非重叠窗口:
[[1 2 3]
 [4 5 6]]

注意事项:reshape方法要求数组的元素总数必须与新形状的元素总数相匹配。如果无法完美整除,此方法将报错。

2. 结合 sliding_window_view 进行切片

np.lib.stride_tricks.sliding_window_view 是NumPy提供的一个强大工具,用于创建滑动窗口视图。默认情况下,它会生成所有可能的、高度重叠的滑动窗口。为了获得非重叠窗口,我们可以在其输出结果上进行步长切片。

示例代码:

import numpy as np

x = np.arange(1, 7)
window_size = 3

# 1. 生成所有重叠的滑动窗口
all_windows = np.lib.stride_tricks.sliding_window_view(x, window_size)
print(f"使用 sliding_window_view 生成的重叠窗口:\n{all_windows}")

# 2. 从重叠窗口中切片出非重叠部分
# 每隔 window_size 个窗口取一个,即可实现非重叠
non_overlapping_windows = all_windows[::window_size]
print(f"通过切片获得的非重叠窗口:\n{non_overlapping_windows}")

输出:

使用 sliding_window_view 生成的重叠窗口:
[[1 2 3]
 [2 3 4]
 [3 4 5]
 [4 5 6]]
通过切片获得的非重叠窗口:
[[1 2 3]
 [4 5 6]]

优点:

  • sliding_window_view 封装了复杂的步幅计算,使用起来更直观。
  • 即使数组长度不能被窗口大小完美整除,它也能生成所有可能的窗口,之后可以灵活地进行切片处理。

3. 利用 as_strided 进行底层控制

np.lib.stride_tricks.as_strided 是NumPy中实现视图操作的底层函数。它允许用户直接指定新数组的形状(shape)和步幅(strides),从而创建任意复杂的视图。理解strides是使用as_strided的关键。

理解 strides:strides是一个元组,表示在每个维度上移动一个元素需要跳过的字节数。

  • 对于一个NumPy数组 arr,arr.strides 会返回其步幅。
  • 例如,一个 int32 类型的数组,如果 arr.strides 是 (4,),表示在第一个维度上移动一个元素需要跳过4个字节(即一个 int32 元素的大小)。

为了创建非重叠窗口,我们需要计算正确的shape和strides。

计算 shape 和 strides: 假设我们有一个一维数组 x,元素类型为 dtype,窗口大小为 window_size。

  • 新数组的行数 (窗口数量): num_windows = len(x) // window_size

    Whimsical
    Whimsical

    Whimsical推出的AI思维导图工具

    下载
  • 新数组的列数 (窗口大小): window_size

  • 因此,新数组的 shape 为: (num_windows, window_size)

  • 原始数组的元素字节大小: itemsize = x.itemsize (例如,np.int32 为 4 字节)

  • 新数组第一个维度(行)的步幅: 要从一个窗口的起始位置跳到下一个非重叠窗口的起始位置,需要跳过 window_size 个原始数组元素。所以步幅是 window_size * itemsize。

  • 新数组第二个维度(列)的步幅: 在一个窗口内部,要从一个元素跳到下一个元素,只需跳过一个原始数组元素。所以步幅是 itemsize。

  • 因此,新数组的 strides 为: (window_size * itemsize, itemsize)

示例代码:

import numpy as np

x = np.arange(1, 7)
window_size = 3

# 获取原始数组的元素字节大小
item_size = x.itemsize
print(f"原始数组元素字节大小: {item_size}") # 例如,int32是4字节

# 计算新数组的 shape
num_windows = len(x) // window_size
new_shape = (num_windows, window_size)

# 计算新数组的 strides
# 行步幅: 从一个窗口的开头到下一个窗口的开头,跳过 window_size 个元素
row_stride = window_size * item_size
# 列步幅: 在一个窗口内,从一个元素到下一个元素,跳过 1 个元素
col_stride = item_size
new_strides = (row_stride, col_stride)

print(f"计算出的新 shape: {new_shape}")
print(f"计算出的新 strides: {new_strides}")

# 使用 as_strided 创建非重叠窗口视图
non_overlapping_as_strided = np.lib.stride_tricks.as_strided(x, shape=new_shape, strides=new_strides)
print(f"使用 as_strided 创建的非重叠窗口:\n{non_overlapping_as_strided}")

# 比较 as_strided 和 sliding_window_view 默认行为的 strides
# full_overlap_strides = np.lib.stride_tricks.as_strided(x, shape=(len(x) - window_size + 1, window_size), strides=(item_size, item_size))
# print(f"等价于 sliding_window_view 默认行为的 as_strided (重叠):\n{full_overlap_strides}")

输出:

原始数组元素字节大小: 4
计算出的新 shape: (2, 3)
计算出的新 strides: (12, 4)
使用 as_strided 创建的非重叠窗口:
[[1 2 3]
 [4 5 6]]

注意事项:

  • as_strided非常强大,但也伴随着风险。如果shape或strides计算错误,可能会导致访问到数组边界之外的内存,引发段错误或返回不确定的值。
  • 它创建的是一个视图,而不是数据的副本。这意味着修改视图会同时修改原始数组。
  • 通常情况下,如果reshape或sliding_window_view能满足需求,优先使用它们,因为它们更安全、更易于理解。

总结

下表总结了三种方法的特点:

方法 优点 缺点 适用场景
reshape 最简洁、高效 严格要求数组长度能被窗口大小整除 数组长度可完美整除,追求代码简洁
sliding_window_view + 切片 灵活,封装了步幅计算,易于理解 需额外切片步骤,可能先生成大量中间窗口 数组长度不确定,或需要更灵活的窗口处理
as_strided 极致的灵活性和性能,底层控制 复杂,易出错,需手动计算步幅,存在内存安全风险 对性能有极高要求,或需实现非常规的视图操作

在大多数实际应用中,推荐优先考虑使用 reshape(如果适用)或 sliding_window_view 结合切片的方法。as_strided 虽功能强大,但其复杂性和潜在风险使其更适合对NumPy内部机制有深入理解的高级用户,或在性能成为瓶颈且其他方法无法满足需求时使用。

相关专题

更多
go语言 数组和切片
go语言 数组和切片

本专题整合了go语言数组和切片的区别与含义,阅读专题下面的文章了解更多详细内容。

46

2025.09.03

go语言 数组和切片
go语言 数组和切片

本专题整合了go语言数组和切片的区别与含义,阅读专题下面的文章了解更多详细内容。

46

2025.09.03

数据分析的方法
数据分析的方法

数据分析的方法有:对比分析法,分组分析法,预测分析法,漏斗分析法,AB测试分析法,象限分析法,公式拆解法,可行域分析法,二八分析法,假设性分析法。php中文网为大家带来了数据分析的相关知识、以及相关文章等内容。

466

2023.07.04

数据分析方法有哪几种
数据分析方法有哪几种

数据分析方法有:1、描述性统计分析;2、探索性数据分析;3、假设检验;4、回归分析;5、聚类分析。本专题为大家提供数据分析方法的相关的文章、下载、课程内容,供大家免费下载体验。

279

2023.08.07

网站建设功能有哪些
网站建设功能有哪些

网站建设功能包括信息发布、内容管理、用户管理、搜索引擎优化、网站安全、数据分析、网站推广、响应式设计、社交媒体整合和电子商务等功能。这些功能可以帮助网站管理员创建一个具有吸引力、可用性和商业价值的网站,实现网站的目标。

727

2023.10.16

数据分析网站推荐
数据分析网站推荐

数据分析网站推荐:1、商业数据分析论坛;2、人大经济论坛-计量经济学与统计区;3、中国统计论坛;4、数据挖掘学习交流论坛;5、数据分析论坛;6、网站数据分析;7、数据分析;8、数据挖掘研究院;9、S-PLUS、R统计论坛。想了解更多数据分析的相关内容,可以阅读本专题下面的文章。

508

2024.03.13

Python 数据分析处理
Python 数据分析处理

本专题聚焦 Python 在数据分析领域的应用,系统讲解 Pandas、NumPy 的数据清洗、处理、分析与统计方法,并结合数据可视化、销售分析、科研数据处理等实战案例,帮助学员掌握使用 Python 高效进行数据分析与决策支持的核心技能。

71

2025.09.08

Python 数据分析与可视化
Python 数据分析与可视化

本专题聚焦 Python 在数据分析与可视化领域的核心应用,系统讲解数据清洗、数据统计、Pandas 数据操作、NumPy 数组处理、Matplotlib 与 Seaborn 可视化技巧等内容。通过实战案例(如销售数据分析、用户行为可视化、趋势图与热力图绘制),帮助学习者掌握 从原始数据到可视化报告的完整分析能力。

55

2025.10.14

PHP WebSocket 实时通信开发
PHP WebSocket 实时通信开发

本专题系统讲解 PHP 在实时通信与长连接场景中的应用实践,涵盖 WebSocket 协议原理、服务端连接管理、消息推送机制、心跳检测、断线重连以及与前端的实时交互实现。通过聊天系统、实时通知等案例,帮助开发者掌握 使用 PHP 构建实时通信与推送服务的完整开发流程,适用于即时消息与高互动性应用场景。

11

2026.01.19

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL 教程
PostgreSQL 教程

共48课时 | 7.4万人学习

Excel 教程
Excel 教程

共162课时 | 12.4万人学习

PHP基础入门课程
PHP基础入门课程

共33课时 | 2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号