R语言怎么处理大数据集

是 否 +2 论坛币

k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群

赵安豆老师微信：zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

立即领取

感谢您参与论坛问题回答

经管之家送您两个论坛币！

+2 论坛币

对于大的数据集，R语言是怎么处理，内存没可能不断叠加的吧
例如：计算机内存只有4G，数据集有8G，而且会不断增加，这应该怎么处理，有什么包可以处理大数据集，怎么用
网上有说ff包、bigmemory包可以用，但没看到教我们怎么用

扫码加我 拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

分享0 收藏0 回帖

关键词：怎么处理 数据集 大数据 R语言 memory 计算机 而且 网上

luvtsing 发表于 2014-12-27 22:26
对于大的数据集，R语言是怎么处理，内存没可能不断叠加的吧
例如：计算机内存只有4G，数据集有8G，而且会不 ...

RHadoop

我试过的：
增加内存。。。
数据如果只有0，1或者有限几个值，可以存为raw format可以省4-8倍空间，当然需要写Rcpp代码处理，不过不难