[其他学者] Gino Chin老师 (Python,R,SAS,数据分析与建模) 在线访谈问答汇总 [推广有奖]

11楼

锐意求索

发表于 2016-12-11 18:17:32

回复坛友karst：没必要研究大数据的基本内涵，实践中你会发现，几G就不能塞到内存里了，也不能几秒钟算出汇总了。但是通过hadoop几PT都可以，这就是明显的区别。算法复杂了就不能用单线程的算法进行机器学习了，必须考虑多线程计算。数据量变大，就需要底层技术、算法随之改变，才能发挥出大量数据的更多价值。这里就有大量工程和研究可做。比如机器学习，可以批量发现复杂规律，这与传统统计、计量方法先先入为主设定基本模型再用数据验证的规律发现方式完全不同，需要截然不同的算法来实现。而这些都是实践驱动的，不是靠研究马克思主义那样从书本到书本“研究”出来的。所以没必要研究大数据的基本内涵。至于你说大数据的原始内涵，这是根本不存在的，怎么研究？你现在去找大数据创始人，能找到吗？有谁被公认为大数据定义之王？研究这个有什么学术意义和实践意义？

12楼

锐意求索

发表于 2016-12-11 18:17:44

回复坛友karst：没必要研究大数据的基本内涵，实践中你会发现，几G就不能塞到内存里了，也不能几秒钟算出汇总了。但是通过hadoop几T都可以，这就是明显的区别。算法复杂了就不能用单线程的算法进行机器学习了，必须考虑多线程计算。数据量变大，就需要底层技术、算法随之改变，才能发挥出大量数据的更多价值。这里就有大量工程和研究可做。比如机器学习，可以批量发现复杂规律，这与传统统计、计量方法先先入为主设定基本模型再用数据验证的规律发现方式完全不同，需要截然不同的算法来实现。而这些都是实践驱动的，不是靠研究马克思主义那样从书本到书本“研究”出来的。所以没必要研究大数据的基本内涵。至于你说大数据的原始内涵，这是根本不存在的，怎么研究？你现在去找大数据创始人，能找到吗？有谁被公认为大数据定义之王？研究这个有什么学术意义和实践意义？