1

我有一个非常不规则的时间序列。两条记录之间的时间差可以是 1 秒或 10 天。

我想每 1 小时重新采样一次数据,但前提是顺序记录少于 1 小时。

如何在不产生太多循环的情况下解决这个问题?

在上面的示例中,我只想重新采样第 5-6 行(增量差异为 10 秒)和第 6-7 行(增量差异为 50 分钟)。其他人应该保持原样。

tmp=vals[['datumtijd','filter data']]

     datumtijd           filter data
0   1970-11-01 00:00:00        129.0
1   1970-12-01 00:00:00        143.0
2   1971-01-05 00:00:00        151.0
3   1971-02-01 00:00:00        151.0
4   1971-03-01 00:00:00        163.0
5   1971-03-01 00:00:10        163.0
6   1971-03-01 00:00:20        163.0
7   1971-03-01 00:01:10        163.0
8   1971-03-01 00:04:10        163.0
..         ...          ...
244 1981-08-19 00:00:00        102.0
245 1981-09-02 00:00:00         98.0
246 1981-09-17 00:00:00         92.0
247 1981-10-01 00:00:00         89.0
248 1981-10-19 00:00:00         92.0
4

1 回答 1

1

groupby您可以通过在时间戳的小时层上使用来明确一点:

grouped = df.groupby(df['datumtijd'].dt.floor('1H')).mean()

这是明确地寻找每个现有数据点的小时并对匹配的数据点进行分组。

但是您也可以只进行重新采样,然后过滤掉空数据,因为pandas仍然可以很快地做到这一点:

resampled = df.resample('1H', on='datumtijd').mean().dropna()

无论哪种情况,您都会得到以下信息(请注意,我更改了最后一个时间戳,以便控制台显示小时数):

                     filter data
datumtijd                       
1970-11-01 00:00:00        129.0
1970-12-01 00:00:00        143.0
1971-01-05 00:00:00        151.0
1971-02-01 00:00:00        151.0
1971-03-01 00:00:00        163.0
1981-08-19 00:00:00        102.0
1981-09-02 00:00:00         98.0
1981-09-17 00:00:00         92.0
1981-10-01 00:00:00         89.0
1981-10-19 03:00:00         92.0

一个快速的澄清也是。在您的示例中,第 5-8 行都出现在同一小时内,因此它们都组合在一起(小时:分钟:秒)!。

另外,请参阅此相关帖子

于 2021-01-19T17:20:34.443 回答