R foreach+doparallel实现并行计算

是 否 +2 论坛币

k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群

赵安豆老师微信：zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

立即领取

感谢您参与论坛问题回答

经管之家送您两个论坛币！

+2 论坛币

当我们遇到大数据的时候，R无法读入内存，通常把一个大的csv文件分割成好几个较小csv文件，如果通过for循环，再通过rbind，需要很长的时间，这时候就可以利用foreach+doparallel来并行计算<br>
.combine用rbind，在运行过程中，要先注册集群，然后最后在关闭，在并行需要的函数，可以作为方法参数传入

扫码加我 拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

分享0 收藏0 回帖

关键词：Parallel Paralle foreach Reach 并行计算

小2强 发表于 2019-7-17 16:44
当我们遇到大数据的时候，R无法读入内存，通常把一个大的csv文件分割成好几个较小csv文件，如果通过for循环 ...

好的好的好的好的好的好的

yangming98 发表于 2019-7-17 23:01
好的好的好的好的好的好的

非常好的东西 谢谢！能不能发几条CSV的数据，学习下你写的代码啊， 我的邮箱是 notts_li@sina.com