博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
Hadoop学习:(二)hadoop的简介
阅读量:5329 次
发布时间:2019-06-14

本文共 707 字,大约阅读时间需要 2 分钟。

hadoop的版本区别:

  • 1.0.X - current stable version, 1.0 release
  • 1.1.X - current beta version, 1.1 release
  • 2.X.X - current alpha version
  • 0.23.X - simmilar to 2.X.X but missing NN HA.
  • 0.22.X - does not include security
  • 0.20.203.X - old legacy stable version
  • 0.20.X - old legacy version
    参考官方地址:

 

hadoop框架:

  Hadoop 有许多元素构成。其最底部是 Hadoop Distributed File System(HDFS),它存储 Hadoop 集群中所有存储节点上的文件。HDFS(对于本文)的上一层是 MapReduce 引擎,该引擎由 JobTrackers 和 TaskTrackers 组成。

hadoop集群搭建:

  (略)参考:

  主要学习hadoop框架以及背后的思想,编码mapreduce程序,来解决实际问题。

mapreduce过程:

  主要为六个过程:

  InputFormat

  Mapper

  Commbiner

  Partitioner

  Reducer

  OutputFormat

  学习开发的hadoop版本:1.0.4

 

  

  

 

 

转载于:https://www.cnblogs.com/liangyours/archive/2013/01/13/2858786.html

你可能感兴趣的文章
详谈js面向对象 javascript oop,持续更新
查看>>
关于这次软件以及pda终端的培训
查看>>
jQuery上传插件Uploadify 3.2在.NET下的详细例子
查看>>
如何辨别一个程序员的水平高低?是靠发量吗?
查看>>
新手村之循环!循环!循环!
查看>>
正则表达式的用法
查看>>
线程安全问题
查看>>
SSM集成activiti6.0错误集锦(一)
查看>>
个人作业
查看>>
下拉刷新
查看>>
linux的子进程调用exec( )系列函数
查看>>
MSChart的研究
查看>>
C# 索引器
查看>>
MySQLdb & pymsql
查看>>
zju 2744 回文字符 hdu 1544
查看>>
delphi 内嵌汇编例子
查看>>
【luogu P2298 Mzc和男家丁的游戏】 题解
查看>>
前端笔记-bom
查看>>
MATLAB作图方法与技巧(一)
查看>>
上海淮海中路上苹果旗舰店门口欲砸一台IMAC电脑维权
查看>>