给各位兄弟姐妹拜年了。小弟刚接触R一个月，关于R的速度和空间的愚见，请指教。

是 否 +2 论坛币

k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群

赵安豆老师微信：zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

立即领取

感谢您参与论坛问题回答

经管之家送您两个论坛币！

+2 论坛币

碰到一个大大的矩阵运算，时间和空间复杂度都是平方。使用普通的R函数解决，碰到问题：
1、普先碰到了烦人的cannot allocate vector of size 595.8Mb。我的内存是4G，也运行了memory.limit(4000)，为何到了595.8Mb就不让用了？
2、听说ff或bigmemory可以解决内存问题，在winxp下尝试了一下ff，但是用了ff很多现成的R函数就不能用了，听说是必须使用ff版的R函数才行。
3、那就牺牲时间换空间吧，总比新买些内存强啊。用了for循环较慢，又听说apply在效率上和for差不多(没试过)，被老板批效率太低。
4、又试了下Rcpp,ff,C++,Eigen,boost等的组合，发现太痛苦了，程序逻辑倒不算复杂，多种语言(库)的糅合，最痛苦的就是数据类型(数据结构)的转换让人眼花。


高手们能否给兄弟指条路，到底用哪种语言或技术才能获得时间和空间都略加满意的结果，,matlab是不是比R强些?非得把兄弟往map/reduce上逼吗？

扫码加我 拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

分享0 收藏0 回帖

关键词：兄弟姐妹 请指教 memory reduce MATLAB cannot reduce 空间 程序 技术

加内存吧，比白菜还便宜。

R不是很适合处理大数据，毕竟它是在内存内处理的

houyunhuang 发表于 2015-2-3 10:29
R不是很适合处理大数据，毕竟它是在内存内处理的

请问哪一种适合大数据？不知道该学哪一种语言，因为想学数据分析，主要用于金融大数据

可以试试Python啊，现在两大数据分析流派R和Python，我是准备JPR都搞的，Java+Python+R。