2

我正在尝试获取具有 NaN 值的数据的 10 天聚合。如果 10 天的持续时间中有一个 NaN 值，那么 10 天的总和应该返回一个 nan 值。

当我应用下面的代码时，pandas 将 NaN 视为零并返回剩余天数的总和。

dateRange = pd.date_range(start_date, periods=len(data), freq='D')
# Creating a data frame so that the timeseries can handle numpy array.
df = pd.DataFrame(data)
base_Series = pd.DataFrame(list(df.values), index=dateRange)
# Converting to aggregated series
agg_series = base_Series.resample('10D', how='sum')
agg_data = agg_series.values

样本数据：

2011-06-01  46.520536
2011-06-02   8.988311
2011-06-03   0.133823
2011-06-04   0.274521
2011-06-05   1.283360
2011-06-06   2.556313
2011-06-07   0.027461
2011-06-08   0.001584
2011-06-09   0.079193
2011-06-10   2.389549
2011-06-11        NaN
2011-06-12   0.195844
2011-06-13   0.058720
2011-06-14   6.570925
2011-06-15   0.015107
2011-06-16   0.031066
2011-06-17   0.073008
2011-06-18   0.072198
2011-06-19   0.044534
2011-06-20   0.240080

输出：

2011-06-01  62.254651
2011-06-11   7.301481
4

3 回答 3

5

这使用numpy sum，如果总和中存在nan，它将返回nan

In [35]: s = Series(randn(100),index=date_range('20130101',periods=100))

In [36]: s.iloc[11] = np.nan

In [37]: s.resample('10D',how=lambda x: x.values.sum())
Out[37]: 
2013-01-01    6.910729
2013-01-11         NaN
2013-01-21   -1.592541
2013-01-31   -2.013012
2013-02-10    1.129273
2013-02-20   -2.054807
2013-03-02    4.669622
2013-03-12    3.489225
2013-03-22    0.390786
2013-04-01   -0.005655
dtype: float64
于 2013-08-29T19:53:27.233 回答
0

为了过滤掉那些有任何 NaN 的日子，我建议你这样做

noNaN_days_only = s.groupby(lambda x: x.date).filter(lambda x: ~x.isnull().any()

哪里s是DataFrame

于 2013-08-29T20:37:09.557 回答
0

只需应用一个 agg 函数：

agg_series = base_Series.resample('10D').agg(lambda x: np.nan if np.isnan(x).all() else np.sum(x) )
于 2021-12-16T18:56:22.243 回答