9

我在 R 中工作,并且有一个带有数字向量的数据框 dd_2006。当我第一次导入数据时,我需要从我的三个变量中删除 $、小数点和一些空格:SumOfCost、SumOfCases 和 SumOfUnits。为此,我使用了str_replace_all. 但是,一旦我使用str_replace_all,向量就会转换为字符。所以我使用 as.numeric(var) 将向量转换为数字,但是引入了 NA,即使在运行 as.numeric 代码之前运行下面的代码时,向量中也没有 NA。

sum(is.na(dd_2006$SumOfCost))
[1] 0
sum(is.na(dd_2006$SumOfCases))
[1] 0
sum(is.na(dd_2006$SumOfUnits))
[1] 0

这是我导入后的代码,从向量中删除 $ 开始。在str(dd_2006)输出中,为了空间,我删除了一些变量,所以str_replace_all下面代码中的列 #s 与我在此处发布的输出不匹配(但它们在原始代码中匹配):

library("stringr")
dd_2006$SumOfCost <- str_sub(dd_2006$SumOfCost, 2, ) #2=the first # after the $

#Removes decimal pt, zero's after, and commas
dd_2006[ ,9] <- str_replace_all(dd_2006[ ,9], ".00", "")
dd_2006[,9] <- str_replace_all(dd_2006[,9], ",", "")

dd_2006[ ,10] <- str_replace_all(dd_2006[ ,10], ".00", "")
dd_2006[ ,10] <- str_replace_all(dd_2006[,10], ",", "")

dd_2006[ ,11] <- str_replace_all(dd_2006[ ,11], ".00", "")
dd_2006[,11] <- str_replace_all(dd_2006[,11], ",", "")

str(dd_2006)
'data.frame':   12604 obs. of  14 variables:
 $ CMHSP                     : Factor w/ 46 levels "Allegan","AuSable Valley",..: 1 1 1
 $ FY                        : Factor w/ 1 level "2006": 1 1 1 1 1 1 1 1 1 1 ...
 $ Population                : Factor w/ 1 level "DD": 1 1 1 1 1 1 1 1 1 1 ...
 $ SumOfCases                : chr  "0" "1" "0" "0" ...
 $ SumOfUnits                : chr  "0" "365" "0" "0" ...
 $ SumOfCost                 : chr  "0" "96416" "0" "0" ...

我在这里找到了对我的类似问题的回复,使用以下代码:

# create dummy data.frame
d <- data.frame(char = letters[1:5], 
                fake_char = as.character(1:5), 
                fac = factor(1:5), 
                char_fac = factor(letters[1:5]), 
                num = 1:5, stringsAsFactors = FALSE)

让我们看一下data.frame

> d
  char fake_char fac char_fac num
1    a         1   1        a   1
2    b         2   2        b   2
3    c         3   3        c   3
4    d         4   4        d   4
5    e         5   5        e   5

让我们运行:

> sapply(d, mode)
       char   fake_char         fac    char_fac         num 
"character" "character"   "numeric"   "numeric"   "numeric" 
> sapply(d, class)
       char   fake_char         fac    char_fac         num 
"character" "character"    "factor"    "factor"   "integer" 

现在你可能会问自己“哪里有异常?” 好吧,我在 R 中遇到了一些非常奇怪的东西,这不是最令人困惑的事情,但它会让你感到困惑,尤其是如果你在上床睡觉之前阅读了这篇文章。

这里是:前两列是字符。我故意称第二个 fake_char。找出这个字符变量与 Dirk 在他的回复中创建的字符变量的相似性。它实际上是一个转换为字符的数值向量。第三和第四列是因子,最后一列是“纯”数字。

如果您使用转换函数,您可以将 fake_char 转换为数字,但不能将 char 变量本身。

> transform(d, char = as.numeric(char))
  char fake_char fac char_fac num
1   NA         1   1        a   1
2   NA         2   2        b   2
3   NA         3   3        c   3
4   NA         4   4        d   4
5   NA         5   5        e   5
Warning message:
In eval(expr, envir, enclos) : NAs introduced by coercion
but if you do same thing on fake_char and char_fac, you'll be lucky, and get away with no NA's:

转换(d,fake_char = as.numeric(fake_char),char_fac = as.numeric(char_fac))

  char fake_char fac char_fac num
1    a         1   1        1   1
2    b         2   2        2   2
3    c         3   3        3   3
4    d         4   4        4   4
5    e         5   5        5   5

所以我在我的脚本中尝试了上面的代码,但仍然想出了 NA(没有关于强制的警告消息)。

#changing sumofcases, cost, and units to numeric
dd_2006_1 <- transform(dd_2006, SumOfCases = as.numeric(SumOfCases), SumOfUnits = as.numeric(SumOfUnits), SumOfCost = as.numeric(SumOfCost))

> sum(is.na(dd_2006_1$SumOfCost))
[1] 12
> sum(is.na(dd_2006_1$SumOfCases))
[1] 7
> sum(is.na(dd_2006_1$SumOfUnits))
[1] 11

我还使用table(dd_2006$SumOfCases)etc. 来查看观察结果,看看我在观察结果中是否遗漏了任何字符,但没有。关于为什么会出现 NA 以及如何摆脱它们的任何想法?

4

3 回答 3

14

正如 Anando 指出的那样,问题出在您的数据中,如果没有可重复的示例,我们无法真正帮助您。也就是说,这是一个代码片段,可帮助您确定数据中导致问题的记录:

test = as.character(c(1,2,3,4,'M'))
v = as.numeric(test) # NAs intorduced by coercion
ix.na = is.na(v)
which(ix.na) # row index of our problem = 5
test[ix.na]  # shows the problematic record, "M"

与其猜测为什么要引入 NA,不如提取导致问题的记录并直接/单独解决它们,直到 NA 消失。

更新:看起来问题出在您对str_replace_all. 我不知道stringr图书馆,但我认为你可以像这样完成同样的事情gsub

v2 = c("1.00","2.00","3.00")
gsub("\\.00", "", v2)

[1] "1" "2" "3"

我不完全确定这会完成什么:

sum(as.numeric(v2)!=as.numeric(gsub("\\.00", "", v2))) # Illustrate that vectors are equivalent.

[1] 0

除非这为您实现了某些特定目的,否则我建议您完全从您的预处理中删除这一步,因为它似乎没有必要并且似乎会给您带来问题。

于 2013-07-11T16:24:24.403 回答
5

如果您还想将字符转换为数字,则首先将其转换为因子(使用 as.factor)并保存/覆盖现有变量。接下来将此因子变量转换为数字(使用 as.numeric)。您不会以这种方式创建 NA,并且能够将您拥有的数据集转换为数字。

于 2016-02-10T22:53:34.617 回答
0

一个简单的解决方案是让retype猜测每一列的新数据类型

library(dplyr)
library(hablar)

dd_2006 %>% retype()
于 2018-11-01T15:03:12.310 回答