如何用Python实现数据平滑?移动平均处理

星夢妙者
发布: 2025-07-14 14:29:02
原创
717人浏览过

移动平均是一种常用的数据平滑方法,通过计算连续数据点的平均值来减少噪声并突出趋势。python中可用numpy和pandas实现,如使用np.convolve或pd.series.rolling().mean()进行简单移动平均(sma),以及pd.series.ewm().mean()进行指数移动平均(ema)。窗口大小的选择需根据数据周期性、实际效果及领域知识调整,过小则平滑不足,过大则可能丢失特征。移动平均的变种包括:1. sma所有点权重相同;2. 加权移动平均(wma)为不同点分配不同权重;3. ema权重呈指数衰减,更关注近期数据。其他平滑方法还有:savitzky-golay滤波器、小波变换、卡尔曼滤波和loess,各自适用于不同场景,如保留局部特征、系统状态估计或未知分布数据。

如何用Python实现数据平滑?移动平均处理

数据平滑,简单来说,就是减少数据中的噪声,让趋势更明显。Python有很多库可以做到这一点,移动平均是其中一种比较简单且常用的方法。

如何用Python实现数据平滑?移动平均处理

移动平均处理,就是用一系列连续数据点的平均值来代替原始数据点。这能有效过滤掉短期波动,突出长期趋势。

解决方案:

立即学习Python免费学习笔记(深入)”;

如何用Python实现数据平滑?移动平均处理
import pandas as pd
import numpy as np
import matplotlib.pyplot as plt

def moving_average(data, window_size):
  """
  计算移动平均。

  Args:
    data: 原始数据,列表或NumPy数组。
    window_size: 窗口大小,即用于计算平均值的连续数据点数量。

  Returns:
    移动平均后的数据,列表。如果窗口大小大于数据长度,返回空列表。
  """
  if window_size > len(data):
    return [] # 处理窗口过大的情况

  # 使用NumPy进行优化
  data_as_array = np.asarray(data)
  window = np.ones(window_size) / window_size
  smoothed_data = np.convolve(data_as_array, window, mode='valid')
  return smoothed_data.tolist()


# 示例数据
data = [1, 2, 3, 4, 5, 4, 3, 2, 1, 2, 3, 4, 5]

# 设置窗口大小
window_size = 3

# 计算移动平均
smoothed_data = moving_average(data, window_size)

# 打印结果
print("原始数据:", data)
print("移动平均后的数据:", smoothed_data)

# 可视化
plt.plot(data, label='Original Data')
plt.plot(smoothed_data, label='Moving Average (Window Size = {})'.format(window_size))
plt.legend()
plt.xlabel('Data Point Index')
plt.ylabel('Value')
plt.title('Moving Average Smoothing')
plt.show()


# 使用Pandas实现更灵活的移动平均

# 创建Pandas Series
data_series = pd.Series(data)

# 计算简单移动平均 (SMA)
window_size_pandas = 3
sma = data_series.rolling(window=window_size_pandas).mean()
sma = sma.dropna() # 删除NaN值,因为前几个数据点无法计算均值

print("\nPandas SMA:", sma.tolist())

# 计算指数移动平均 (EMA)
ema = data_series.ewm(span=window_size_pandas, adjust=False).mean() # adjust=False 更稳定
print("Pandas EMA:", ema.tolist())


# Pandas可视化
plt.figure(figsize=(10, 6))
plt.plot(data, label='Original Data')
plt.plot(sma, label='SMA (Window Size = {})'.format(window_size_pandas))
plt.plot(ema, label='EMA (Span = {})'.format(window_size_pandas))
plt.legend()
plt.xlabel('Data Point Index')
plt.ylabel('Value')
plt.title('Pandas Moving Average Smoothing')
plt.show()
登录后复制

移动平均的窗口大小如何选择?

窗口大小的选择至关重要。太小,平滑效果不明显;太大,可能会过度平滑,丢失重要特征。 一般来说,可以根据数据的周期性来选择窗口大小。例如,如果数据存在明显的季节性,可以尝试将窗口大小设置为季节周期长度。 也可以通过尝试不同的窗口大小,观察平滑效果,然后选择一个合适的。 还可以结合领域知识来判断。

美图AI开放平台
美图AI开放平台

美图推出的AI人脸图像处理平台

美图AI开放平台 53
查看详情 美图AI开放平台
如何用Python实现数据平滑?移动平均处理

移动平均有哪些变种?它们有什么区别

移动平均有很多变种,常见的有:

  • 简单移动平均 (SMA):所有数据点的权重相同。上面代码示例已经展示。
  • 加权移动平均 (WMA):数据点的权重不同,通常越靠近当前时间点的数据权重越高。
  • 指数移动平均 (EMA):也是一种加权移动平均,但权重呈指数衰减。EMA 对最近的数据点更敏感,反应速度更快。Pandas的ewm函数可以实现EMA。

SMA简单易懂,但对所有数据点一视同仁,可能无法很好地反映趋势变化。WMA和EMA则更加灵活,可以根据实际需求调整权重,更好地捕捉趋势。EMA的计算效率通常比WMA更高。

除了移动平均,还有哪些其他数据平滑方法?

除了移动平均,还有很多其他数据平滑方法,例如:

  • Savitzky-Golay 滤波器:这是一种基于多项式拟合的滤波器,可以在平滑数据的同时,保留数据的局部特征。SciPy库提供了savgol_filter函数来实现Savitzky-Golay滤波。
  • 小波变换:小波变换可以将数据分解成不同频率的成分,然后可以对不同频率的成分进行处理,从而实现数据平滑。PyWavelets库提供了小波变换的功能。
  • 卡尔曼滤波:卡尔曼滤波是一种递归的滤波算法,可以用于估计系统的状态。卡尔曼滤波需要建立系统的状态空间模型,并假设噪声服从高斯分布。
  • LOESS (Locally Estimated Scatterplot Smoothing):LOESS是一种非参数的回归方法,它通过局部加权回归来平滑数据。 statsmodels库提供了LOESS的实现。

选择哪种平滑方法取决于数据的特点和具体需求。如果数据噪声较大,且对平滑效果要求较高,可以考虑使用Savitzky-Golay滤波器或小波变换。如果需要对系统状态进行估计,可以考虑使用卡尔曼滤波。如果数据分布未知,可以考虑使用LOESS。

以上就是如何用Python实现数据平滑?移动平均处理的详细内容,更多请关注php中文网其它相关文章!

最佳 Windows 性能的顶级免费优化软件
最佳 Windows 性能的顶级免费优化软件

每个人都需要一台速度更快、更稳定的 PC。随着时间的推移,垃圾文件、旧注册表数据和不必要的后台进程会占用资源并降低性能。幸运的是,许多工具可以让 Windows 保持平稳运行。

下载
来源:php中文网
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn
最新问题
开源免费商场系统广告
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新 English
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号