使用 Pandas 填充缺失日期和时间序列

花韻仙語
发布: 2025-10-12 13:16:42
原创
701人浏览过

使用 pandas 填充缺失日期和时间序列

本文档旨在指导读者如何使用 Pandas 库有效地填充 DataFrame 中缺失的日期和时间序列。通过将日期时间列设置为索引,并利用 `asfreq` 函数,可以轻松地插入缺失的日期或时间,并用指定的值填充其他列,从而完整地呈现时间序列数据。

Pandas 提供了强大的时间序列分析功能。在处理时间序列数据时,经常会遇到数据缺失的情况,例如某些日期或时间点的数据不存在。为了进行准确的分析和建模,需要填充这些缺失的数据。本文将介绍如何使用 Pandas 的 asfreq 函数来填充 DataFrame 中缺失的日期和时间,并提供适用于不同时间间隔的示例。

准备工作

首先,确保你已经安装了 Pandas 库。如果没有安装,可以使用以下命令进行安装:

pip install pandas
登录后复制

基本方法:使用 asfreq 填充缺失日期

核心思路是将包含日期或时间的列设置为 DataFrame 的索引,然后使用 asfreq 函数重新采样时间序列,填充缺失的日期或时间。

以下是基本步骤:

  1. 将日期/时间列转换为 datetime 类型: 确保日期/时间列是 Pandas 可以识别的 datetime 类型。
  2. 将日期/时间列设置为索引: 使用 set_index 函数将日期/时间列设置为 DataFrame 的索引。
  3. 使用 asfreq 填充缺失值: 使用 asfreq 函数重新采样时间序列,并使用 fill_value 参数指定填充缺失值的数值。
  4. 重置索引(可选): 如果需要,可以使用 reset_index 函数将日期/时间索引重新转换为列。

示例:填充缺失日期

假设我们有以下 DataFrame,其中缺少了 2000-01-08 和 2000-01-09 的数据:

import pandas as pd

data = {'dt_object': ['2000-01-03', '2000-01-04', '2000-01-05', '2000-01-06', '2000-01-07', '2000-01-10', '2000-01-11', '2000-01-12'],
        'high': [27.490000, 27.448000, 27.597000, 27.597000, 27.174000, 28.090000, 29.250000, 28.850000]}
df = pd.DataFrame(data)

print(df)
登录后复制

输出:

序列猴子开放平台
序列猴子开放平台

具有长序列、多模态、单模型、大数据等特点的超大规模语言模型

序列猴子开放平台 0
查看详情 序列猴子开放平台
   dt_object    high
0  2000-01-03  27.490
1  2000-01-04  27.448
2  2000-01-05  27.597
3  2000-01-06  27.597
4  2000-01-07  27.174
5  2000-01-10  28.090
6  2000-01-11  29.250
7  2000-01-12  28.850
登录后复制

现在,我们使用 asfreq 填充缺失的日期,并将 high 列的值设置为 0:

df['dt_object'] = pd.to_datetime(df['dt_object'])
out = df.set_index('dt_object').asfreq('D', fill_value=0).reset_index()
print(out)
登录后复制

输出:

   dt_object    high
0 2000-01-03  27.490
1 2000-01-04  27.448
2 2000-01-05  27.597
3 2000-01-06  27.597
4 2000-01-07  27.174
5 2000-01-08   0.000
6 2000-01-09   0.000
7 2000-01-10  28.090
8 2000-01-11  29.250
9 2000-01-12  28.850
登录后复制

可以看到,缺失的 2000-01-08 和 2000-01-09 的数据已经被填充,并且 high 列的值为 0。

示例:填充缺失的 15 分钟间隔

假设我们有以下 DataFrame,其中缺少了某些 15 分钟间隔的数据:

import pandas as pd

data = {'dt_object': ['2023-12-13 00:00:00', '2023-12-13 00:15:00', '2023-12-13 00:45:00', '2023-12-13 01:15:00'],
        'high': [90.1216, 90.1308, 90.2750, 90.3023]}
df = pd.DataFrame(data)

print(df)
登录后复制

输出:

           dt_object     high
0  2023-12-13 00:00:00  90.1216
1  2023-12-13 00:15:00  90.1308
2  2023-12-13 00:45:00  90.2750
3  2023-12-13 01:15:00  90.3023
登录后复制

现在,我们使用 asfreq 填充缺失的 15 分钟间隔,并将 high 列的值设置为 0:

df['dt_object'] = pd.to_datetime(df['dt_object'])
out = df.set_index('dt_object').asfreq('15Min', fill_value=0).reset_index()
print(out)
登录后复制

输出(部分):

              dt_object   high
0   2023-12-13 00:00:00  90.1216
1   2023-12-13 00:15:00  90.1308
2   2023-12-13 00:30:00   0.0000
3   2023-12-13 00:45:00  90.2750
4   2023-12-13 01:00:00   0.0000
5   2023-12-13 01:15:00  90.3023
登录后复制

可以看到,缺失的 15 分钟间隔的数据已经被填充,并且 high 列的值为 0。

asfreq 函数的参数

asfreq 函数的常用参数包括:

  • freq: 表示频率的字符串或 DateOffset 对象。例如,'D' 表示天,'H' 表示小时,'15Min' 表示 15 分钟。
  • fill_value: 用于填充缺失值的值。

注意事项

  • 确保日期/时间列已经转换为 datetime 类型,否则 asfreq 函数可能无法正常工作。
  • fill_value 参数可以设置为任何合适的值,例如 0,NaN,或者其他根据实际情况选择的值。
  • 如果需要更复杂的填充策略,例如使用插值法填充缺失值,可以考虑使用 interpolate 函数。

总结

本文介绍了如何使用 Pandas 的 asfreq 函数填充 DataFrame 中缺失的日期和时间序列。通过将日期/时间列设置为索引,并使用 asfreq 函数重新采样时间序列,可以轻松地插入缺失的日期或时间,并使用指定的值填充其他列。这种方法适用于各种时间间隔,例如天、小时、分钟等,可以帮助你更好地处理时间序列数据。

以上就是使用 Pandas 填充缺失日期和时间序列的详细内容,更多请关注php中文网其它相关文章!

相关标签:
最佳 Windows 性能的顶级免费优化软件
最佳 Windows 性能的顶级免费优化软件

每个人都需要一台速度更快、更稳定的 PC。随着时间的推移,垃圾文件、旧注册表数据和不必要的后台进程会占用资源并降低性能。幸运的是,许多工具可以让 Windows 保持平稳运行。

下载
来源:php中文网
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn
最新问题
热门推荐
开源免费商场系统广告
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 意见反馈 讲师合作 广告合作 最新更新 English
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号