- 资源介绍
资源名称:centos安装配置hadoop超详细过程
内容简介:
Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统(HDFS,Hadoop Distributed Filesystem)和MapReduce(Google MapReduce的开源实现)为核心的Hadoop为用户提供了系统底层细节透明的分布式基础架构。
对于Hadoop的集群来讲,可以分成两大类角色:Master和Salve。一个HDFS集群是由一个NameNode和若干个DataNode组成的。其中NameNode作为主服务器,管理文件系统的命名空间和客户端对文件系统的访问操作;集群中的DataNode管理存储的数据。MapReduce框架是由一个单独运行在主节点上的JobTracker和运行在每个集群从节点的TaskTracker共同组成的。主节点负责调度构成一个作业的所有任务,这些任务分布在不同的从节点上。主节点监控它们的执行情况,并且重新执行之前的失败任务;从节点仅负责由主节点指派的任务。当一个Job被提交时,JobTracker接收到提交作业和配置信息之后,就会将配置信息等分发给从节点,同时调度任务并监控TaskTracker的执行。
资源截图:
猜你喜欢
-
实战大数据
2020-07-21 -
【Spark亚太研究院 共享资料】Spark官方文档中文翻译
2020-07-21 -
Hadoop硬实战
2020-07-21 -
实战Windows Azure 微软云计算平台技术详解
2020-07-21 -
华为桌面云汇总【PDF】
2020-07-21 -
MATLAB R2014a完全自学一本通2017版 pdf
2020-07-21 -
Python语法基础和常用模块使用(四)【2019千锋Linux】
2020-07-21 -
高性能Docker
2020-07-21 -
vSphere 6.0虚拟化教程
2020-07-21 -
一本书读懂大数据客户分析
2020-07-21
-
Docker进阶与实战
2020-07-21 -
高等应用数学问题的MATLAB求解(第二版) (薛定宇 陈阳泉) 中文
2020-07-21 -
Storm分布式实时计算模式
2020-07-21 -
京东区块链技术实践白皮书
2020-07-21 -
云计算专家刘鹏—云计算演讲PPT大全
2020-07-21 -
云计算大数据开发工程师 系统课程项目实战(九部分) Hadoop生态圈超多内容极
2020-07-21 -
VMware vSphere 5.1官方技术指南文档汇总
2020-07-21 -
Spark大数据商业实战三部曲:内核解密|商业案例|性能调优
2020-07-21 -
Spark技术内幕 深入解析Spark内核架构设计与实现原理
2020-07-21 -
云计算和物联网
2020-07-21
猜你在找
2. 分享目的仅供大家学习和交流,您必须在下载后24小时内删除!
3. 不得使用于非法商业用途,不得违反国家法律。否则后果自负!
4. 本站提供的源码、模板、插件等等其他资源,都不包含技术服务请大家谅解!
5. 如有链接无法下载、失效或广告,请联系管理员处理!
6. 本站资源售价只是赞助,收取费用仅维持本站的日常运营所需!
源码库 » centos安装配置hadoop超详细过程