5

我想将 data.frame 转换为 ff 对象，as.ffdf 如此处所述

df.apr=as.data.frame(df.apr) # from data.table to data.frame
cols=df.apr[1,] 
cols=sapply(cols,class)
df_apr=as.ffdf(df.apr,vmode=cols)

给出一个错误：

Error in ff(initdata = initdata, length = length, levels = levels, ordered = ordered,
: vmode 'numeric' not implemented

如果没有 'vmode' 参数，则会给出以下错误：

Error in ff(initdata = initdata, length = length, levels = levels, ordered = ordered, 
: vmode 'character' not implemented

写到一张桌子上然后直接读入 ff 作品但是：

write.table(df.apr,file='df_apr.txt',sep='\t',row.names=F)
df.apr.ff=read.table.ffdf(file='df_apr.txt',header=F,VERBOSE=T)

但这很耗时[而且很笨拙]。有没有更好的办法？

4

1 回答 1

9

如果您想知道可以在 ff 中使用的所有可能的 vmode，请在控制台中键入以下内容。

require(ff)
.vimplemented

您会看到数字和字符模式不在这些模式中。数字转换为双精度数，字符转换为因子。所以在你的问题中，你真的不需要自己指定 vmodes。只要将字符编码为因子，就可以在 data.frame 上使用 as.ffdf。所以这会起作用。

df.apr=as.data.frame(df.apr, stringsAsFactors=TRUE)
df_apr=as.ffdf(df.apr)

供参考。如果您的数据来自平面文件，请考虑使用 read.table.ffdf，或者如果它来自 SQL 数据源，您可以使用 ETLUtils 包中的 read.dbi.ffdf 或 read.odbc.ffdf。如果它通过 Hive 来自 Hadoop，则可以使用 ETLUtils 包中的 read.jdbc.ffdf。

于 2013-06-24T12:13:31.997 回答