R语言读取数据溢出求解

是 否 +2 论坛币

k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群

赵安豆老师微信：zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

立即领取

感谢您参与论坛问题回答

经管之家送您两个论坛币！

+2 论坛币

我需要读取许多个.xls文件，总共内存大概1.85GB，电脑的内存是8G
每次读取的时候，内存在700MB左右就会报错：

错误: OutOfMemoryError (Java): Java heap space

想请问一下这是什么原因呢？
如何解决这个问题呀？
谢谢！

扫码加我 拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

分享0 收藏4 回帖

关键词：读取数据 R语言 memory 电脑的内存 Error 电脑的内存 Java 如何 左右

首先正常8g内存不会出现这个问题。你看一下R里面是不是已经存了大量数据
我们可以通过ls()看work space中有什么变量。
通过object.size()看每个变量占多大内存。
通过memory.size()查看现在的work space的内存使用
通过memory.limit()查看系统规定的内存使用上限。如果你认为现在的内存上限不够用，可以通过memory.limit(newLimit)更改到一个新的上限。 注意，在32位的R中，封顶上限为4G，你无法在一个程序上使用超过4G （数位上限）。这种时候，可以考虑使用64位的版本。

对于一些很大的但无用的中间变量，养成清理的习惯：可以使用rm(object)删除变量，但是记住，rm后记得使用gc()做Garbage collection，否则内存是不会自动释放的，相当于你没做rm.

LY_2009 发表于 2016-1-19 13:47
首先正常8g内存不会出现这个问题。你看一下R里面是不是已经存了大量数据
我们可以通过ls()看work space中有 ...

嗯， 我刚刚试了一下，但是还是不行，workspace里面没有变量。不过刚刚换了一个用了read_excel 的包就可以读了。我怀疑是XLCONNECT那个包调用java的时候对大小做了限制。

wangqian151 发表于 2016-1-19 20:24
嗯， 我刚刚试了一下，但是还是不行，workspace里面没有变量。不过刚刚换了一个用了read_excel 的包就可以 ...

对，就是Java本身给设置了大小

我遇到了相似的问题，我是写文件write.csv的时候  内存溢出?求助啊。。每次只能写2000多一点文件。其中好多都是空表 不会占太大内存啊   为什么啊  

LY_2009 发表于 2016-6-20 18:11
对，就是Java本身给设置了大小

我遇到了相似的问题，我是写文件write.csv的时候  内存溢出?求助啊。。每次只能写2000多一点文件。其中好多都是空表 不会占太大内存啊   为什么啊  

ryoeng 发表于 2016-1-20 00:26
或许可以尝试一下openxlsx程序包。

我遇到了相似的问题，我是写文件write.csv的时候  内存溢出?求助啊。。每次只能写2000多一点文件。其中好多都是空表 不会占太大内存啊   为什么啊  

yanhong5252 发表于 2016-9-26 11:26
我遇到了相似的问题，我是写文件write.csv的时候  内存溢出?求助啊。。每次只能写2000多一点文件。其中好 ...

你换一个读取的函数就可以了，这个函数就是读不了比较大的文件。

楼主是不是用的包直接读.xls？ 试试直接用read.csv或者read.table 看看？