请选择 进入手机版 | 继续访问电脑版
楼主: lnh2017
4530 3

[Hadoop] Hadoop框架由哪几部分构成?hadoop入门学习 [推广有奖]

  • 0关注
  • 1粉丝

禁止发言

本科生

83%

还不是VIP/贵宾

-

威望
0
论坛币
15 个
通用积分
1.0085
学术水平
0 点
热心指数
0 点
信用等级
0 点
经验
1143 点
帖子
58
精华
0
在线时间
12 小时
注册时间
2018-1-15
最后登录
2018-6-19

lnh2017 发表于 2018-5-11 16:27:32 |显示全部楼层 |坛友微信交流群

+2 论坛币
k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群
赵安豆老师微信:zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

感谢您参与论坛问题回答

经管之家送您两个论坛币!

+2 论坛币

Hadoop是一个用Java编写的Apache开源框架,允许使用简单的编程模型跨计算机集群分布式处理大型数据集。Hadoop框架工作的应用程序在跨计算机集群提供分布式存储和计算的环境中工作。Hadoop旨在从单个服务器扩展到数千个机器,每个都提供本地计算和存储。

Hadoop框架包括以下四个模块:

HadoopCommon: 这些是其他Hadoop模块所需的Java库和实用程序。这些库提供文件系统和操作系统级抽象,并包含启动Hadoop所需的Java文件和脚本。

HadoopYARN: 这是一个用于作业调度和集群资源管理的框架。

HadoopDistributed File System (HDFS™): 分布式文件系统,提供对应用程序数据的高吞吐量访问。

HadoopMapReduce:这是基于YARN的用于并行处理大数据集的系统。

除了以上四个模块,Hadoop还包括指向可以安装在Hadoop之上或之上的附加软件包的收集,例如Apache Pig,Apache Hive,Apache HBase,Apache Spark等。


二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

关键词:hadoop入门 Hadoop Had Apache Spark distributed Hadoop框架

尘埃999 发表于 2018-6-5 19:39:18 |显示全部楼层 |坛友微信交流群
学习了 谢谢

使用道具

孤独红狐 发表于 2018-6-11 09:30:34 |显示全部楼层 |坛友微信交流群
谢谢分享

使用道具

xujingjun 发表于 2018-7-6 01:40:56 |显示全部楼层 |坛友微信交流群

使用道具

您需要登录后才可以回帖 登录 | 我要注册

本版微信群
加好友,备注cda
拉您进交流群

京ICP备16021002-2号 京B2-20170662号 京公网安备 11010802022788号 论坛法律顾问:王进律师 知识产权保护声明   免责及隐私声明

GMT+8, 2024-4-19 03:46