从您的问题中很难完全理解该RevoScaleR
软件包在残差方面提供了什么以及您需要哪些残差。此外,关于残差的术语存在相当多的混淆,例如这里和这里的例子。
尽管如此,一些观点/观察可能会对您有所帮助。
在线性回归中,“原始”与“偏差”残差相同
至少我从运行玩具回归glm
和预测结果中得到的结果是:
df <- mtcars
modl <- glm(formula = mpg ~ wt + qsec + am, data = mtcars)
y_hat <- predict(modl)
接下来,计算“原始”残差(预测结果减去实际结果)以及偏差残差:
y <- as.vector(df[["mpg"]])
res_raw <- y - y_hat
res_dev <- residuals(modl, type = "deviance")
这两个是相同的:
identical(res_raw, res_dev)
[1] TRUE
我想一旦你进入二元结果等,它就会更加复杂。
计算标准化偏差残差的公式
glm
使用该rstandard
方法计算标准化偏差残差。
res_std <- rstandard(modl)
查看getAnywhere(rstandard.glm)
告诉您如何根据偏差残差手动计算标准化残差:
function (model, infl = influence(model, do.coef = FALSE), type = c("deviance",
"pearson"), ...)
{
type <- match.arg(type)
res <- switch(type, pearson = infl$pear.res, infl$dev.res)
res <- res/sqrt(summary(model)$dispersion * (1 - infl$hat)) # this is the key line
res[is.infinite(res)] <- NaN
res
}
因此,在我的示例中,您将通过运行手动计算标准化残差res/sqrt(summary(modl)$dispersion * (1 - influence(modl)$hat))
。所以你需要两件事:hat
和dispersion
。我假设RevoScaleR
提供了色散参数。如果无法获得帽子值RevoScaleR
,influence(modl)$hat
则必须从头开始:
X <- as.matrix(df[, c("wt", "qsec", "am")]) # Gets the X variables
X <- cbind(rep(1, nrow(df)), X) # adds column for the constant
hat <- diag(X %*% solve(t(X) %*% X) %*% t(X)) # formula for hat values
现在计算您的标准化偏差残差:
res_man <- res_raw/sqrt(summary(modl)$dispersion * (1 - hat))
与派生的相同rstandard
:
head(res_man)
Mazda RX4 Mazda RX4 Wag Datsun 710 Hornet 4 Drive Hornet Sportabout Valiant
-0.6254171 -0.4941877 -1.4885771 0.2297471 0.7217423 -1.1790097
head(res_std)
Mazda RX4 Mazda RX4 Wag Datsun 710 Hornet 4 Drive Hornet Sportabout Valiant
-0.6254171 -0.4941877 -1.4885771 0.2297471 0.7217423 -1.1790097