1

可能重复:
使用先前的非 NA 值填充向量中的 NA?

是否有一种惯用的方法可以在 R 向量中“向下”复制单元格值?通过“向下复制”,我的意思是用最接近的先前非 NA 值替换 NA。

虽然我可以使用 for 循环非常简单地做到这一点,但它运行得非常慢。任何有关如何矢量化的建议将不胜感激。

# Test code
# Set up test data
len <- 1000000
data <- rep(c(1, rep(NA, 9)), len %/% 10) * rep(1:(len %/% 10), each=10)
head(data, n=25)
tail(data, n=25)

# Time naive method
system.time({
  data.clean <- data;
  for (i in 2:length(data.clean)){
    if(is.na(data.clean[i])) data.clean[i] <- data.clean[i-1]
  }
})

# Print results
head(data.clean, n=25)
tail(data.clean, n=25)

试运行结果:

> # Set up test data
> len <- 1000000
> data <- rep(c(1, rep(NA, 9)), len %/% 10) * rep(1:(len %/% 10), each=10)
> head(data, n=25)
 [1]  1 NA NA NA NA NA NA NA NA NA  2 NA NA NA NA NA NA NA NA NA  3 NA NA NA NA
> tail(data, n=25)
 [1]     NA     NA     NA     NA     NA  99999     NA     NA     NA     NA
[11]     NA     NA     NA     NA     NA 100000     NA     NA     NA     NA
[21]     NA     NA     NA     NA     NA
> 
> # Time naive method
> system.time({
+   data.clean <- data;
+   for (i in 2:length(data.clean)){
+     if(is.na(data.clean[i])) data.clean[i] <- data.clean[i-1]
+   }
+ })
   user  system elapsed 
   3.09    0.00    3.09 
> 
> # Print results
> head(data.clean, n=25)
 [1] 1 1 1 1 1 1 1 1 1 1 2 2 2 2 2 2 2 2 2 2 3 3 3 3 3
> tail(data.clean, n=25)
 [1]  99998  99998  99998  99998  99998  99999  99999  99999  99999  99999
[11]  99999  99999  99999  99999  99999 100000 100000 100000 100000 100000
[21] 100000 100000 100000 100000 100000
> 
4

2 回答 2

5

我不知道惯用语,但在这里我们识别非 NA 值 ( idx),以及最后一个非 NA 值的索引 ( cumsum(idx))

f1 <- function(x) {
    idx <- !is.na(x)
    x[idx][cumsum(idx)]
}

这似乎比na.locf示例数据快 6 倍。它会像默认情况下一样放弃领先的 NA na.locf,所以

f2 <- function(x, na.rm=TRUE) {
    idx <- !is.na(x)
    cidx <- cumsum(idx)
    if (!na.rm)
        cidx[cidx==0] <- NA_integer_
    x[idx][cidx]
}

这似乎增加了大约 30% 的时间na.rm=FALSE。大概na.locf还有其他优点,捕获更多的极端情况并允许填充而不是向下填充(cumsum无论如何,这在世界上是一个有趣的练习)。同样清楚的是,我们至少对可能的大数据进行了五次分配—— idx(实际上,我们计算is.na()它是补码)、、、cumsum(idx)x[idx]——x[idx][cumsum(idx)]因此还有进一步改进的空间,例如,在 C

于 2013-01-22T05:40:43.360 回答
2

利用zoo::na.locf

将代码包装在函数中f(包括data.clean最后返回):

library(rbenchmark)
library(zoo)

identical(f(data), na.locf(data))
## [1] TRUE

benchmark(f(data), na.locf(data), replications=10, columns=c("test", "elapsed", "relative"))
##            test elapsed relative
## 1       f(data)  21.460   14.471
## 2 na.locf(data)   1.483    1.000
于 2013-01-22T00:48:22.500 回答