现在我有一个大的数据集

0关注
3粉丝

博士生

54%

还不是VIP/贵宾

-

0%

威望: 0 级
论坛币: 718 个
通用积分: 1.9496
学术水平: 14 点
热心指数: 19 点
信用等级: 11 点
经验: 7309 点
帖子: 210
精华: 0
在线时间: 375 小时
注册时间: 2011-10-26
最后登录: 2020-6-28

楼主

freerunning_sky

发表于 2012-2-24 17:09:12 |AI写论文

是否 +2 论坛币

k人参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群

赵安豆老师微信：zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

立即领取

感谢您参与论坛问题回答

经管之家送您两个论坛币！

+2 论坛币

数据量大概有5亿，但是连接的那个数据库经常会出点问题，全量读取经常中间会断掉。
我现在的想法是把数据集分成几块读出来

如：
data a1;
set total(firstobs=1,obs=50000000);
run;

data a2;
set total(firstobs=50000001,obs=100000000);
run;

。。。。。。。。。。。。。

但是读到后面的时候效率会很低，请问firstobs和obs结合的工作原理
大家有没有什么好的办法把这数据读出来？
谢谢！