人大经济论坛 › 论坛 › 数据科学与人工智能 › 数据分析与数据科学 › R语言论坛 › 如何用R读取8G大的txt文件？

返回列表

12 下一页

发帖

楼主: guo.bailing

16291 10

[问答] 如何用R读取8G大的txt文件？ [推广有奖]

44关注
165
粉丝

区版主

已卖：275份资源

大师

30%

还不是VIP/贵宾

TA的文库 其他...

文库1

文库2

文库3

威望: 6 级
论坛币: 1336379 个
通用积分: 20289.1888
学术水平: 558 点
热心指数: 776 点
信用等级: 515 点
经验: 147031 点
帖子: 4111
精华: 24
在线时间: 10956 小时
注册时间: 2009-7-9
最后登录: 2025-11-21

楼主

guo.bailing 发表于 2015-9-2 08:03:10 |AI写论文

30论坛币

如题。

我有一个8G大小的数据集，其中变量个数13个，列与列之间用逗号分隔，需要读入到R中进行分析研究，但是常规的方法都读不了，求教高手帮忙解决，谢谢？

分享0 收藏2 回帖

关键词：txt 如何用变量个数数据集如何

相关帖子

自助者，天助之！

沙发

万人往LVR

发表于 2015-9-2 09:05:31

8G的话一般电脑内存都不够的，如果能分批处理，可以直接用read.table
read.table有两个参数可以用，skip跳过几行，nrows最大提取的行数。这样可以分批处理1:10000,10000:20000行

已有 2 人评分	论坛币	学术水平	热心指数	收起理由
crystal8832	+ 10	+ 1	+ 1	热心帮助其他会员
admin_kefu	+ 20			热心帮助其他会员

总评分: 论坛币 + 30 学术水平 + 1 热心指数 + 1 查看全部评分

藤椅

soccy 发表于 2015-9-2 10:16:15

ff package

已有 2 人评分	论坛币	学术水平	热心指数	收起理由
crystal8832	+ 10		+ 1	热心帮助其他会员
ryoeng		+ 1	+ 1	热心帮助其他会员

总评分: 论坛币 + 10 学术水平 + 1 热心指数 + 2 查看全部评分

板凳

liu7788414

发表于 2015-9-2 11:11:37

8G不算啥，关键你的内存够多吗？我用32G的内存，500G固态硬盘，64位R，data.table包，毫无压力。

已有 1 人评分	论坛币	收起理由
admin_kefu	+ 10	热心帮助其他会员

总评分: 论坛币 + 10 查看全部评分

报纸

Tony_Liu

发表于 2015-9-2 15:19:37

R直接调用内存，这点与SAS不同，所以硬盘多大是没用的，关键看内存

已有 1 人评分	论坛币	收起理由
admin_kefu	+ 10	热心帮助其他会员

总评分: 论坛币 + 10 查看全部评分

加关注串个门加好友发消息 677 关注 49粉丝禁止访问先生 ryoeng 当前离线阅读权限 0 威望 0 级论坛币 11663 个通用积分 1661.3321 学术水平 202 点热心指数 266 点信用等级 117 点经验 146224 点帖子 1324 精华 0 在线时间 1204 小时注册时间 2014-12-23 最后登录 2024-4-18 雷达卡	地板 ryoeng 发表于 2015-9-2 19:23:22 ff 程序包 (Final Fantasy?) 呵呵～提示: 作者被禁止或删除内容自动屏蔽

	回复举报