发帖
雷达卡
CDA数据分析师：数据科学、人工智能从业者的在线大学。
数据科学（Python/R/Julia）数据分析、机器学习、深度学习 Q群：874447702
数据又称黑暗数据，是指人脑无法处理的海量数据聚合成的信息资产，在民生、IT、金融、农业、通信等方面都有广泛应用。未来5年大数据行业呈井喷趋势，人才需求火爆，2018年大数据人才缺口更是高达900万。大数据的火热，不仅吸引了众多IT行业人才的青睐，还有一些零基础的同学也想尝试一下大数据行业，从而加入高薪技术行列。但是目前大多数的机构，对于大数据学习者要求必须是大专学历以上，而且大专学历还要求是计算机相关专业的，如果是本科及本科以上的，则对专业要求适当的放宽。
以后想要做大数据相关的工作，需要学习哪些技术知识？对于零基础的朋友，一开始入门可能不会太简单，需要掌握一门计算机的编程语言，因为大数据技术学习前需要一定的Java技术作为基础支持。只需要学习Java的标准版JavaSE就可以了，像Servlet、JSP、Tomcat都是JavaEE方向的技术在大数据技术里用到的并不多，只需要了解就可以了，当然Java怎么连接数据库还是要知道的，像JDBC一定要掌握。
因为大数据相关软件都是在Linux上运行的，所以Linux要学习的扎实一些，学好Linux能够帮助快速掌握大数据相关技术，能更好的理解hadoop、hive、hbase、spark等大数据软件的运行环境和网络环境配置，能少踩很多坑，学会shell就能看懂脚本这样能更容易理解和配置大数据集群。
Spark是用来弥补基于MapReduce处理数据速度上的缺点，它的特点是把数据装载到内存中计算而不是去读慢的要死进化还特别慢的硬盘。特别适合做迭代运算，所以算法工程师特别喜欢它。它是用scala编写的，Java语言或者Scala都可以操作它，因为它们都是用JVM的。
以上就是大数据要掌握的基础知识，只有掌握了这些知识，才能够找到一份好的大数据工作。大数据技术可以应用在各个领域，比如公安大数据、交通大数据、医疗大数据、就业大数据、环境大数据、图像大数据、视频大数据等等，应用范围非常广泛，大数据技术已经像空气一样渗透在生活的方方面面。大数据技术的出现将社会带入了一个高速发展的时代，这不仅是信息技术的终极目标，也是人类社会发展管理智能化的核心技术驱动力。
京公网安备 11010802022788号
