Hadoop 1.x与Hadoop 2.x
本文共 383 字，大约阅读时间需要 1 分钟。
一、Hadoop2.0产生的背景
——Hadoop 1.0中HDFS和MapReduce在高可用、扩展性等方面存在问题
——HDFS存在的问题
·NameNode单点故障，难以应用于在线场景 HA
·NameNode压力过大，且内存受限，影扩展性 F
——MapReduce存在的问题响系统
·JobTracker访问压力大，影响系统扩展性
·难以支持除MapReduce之外的计算框架，比如Spark、Storm等
二、Hadoop 1.x与Hadoop 2.x
——Hadoop 2.x由HDFS、MapReduce和YARN三个分支构成；
·HDFS：NN Federation（联邦）、HA；
---2.X:只支持2个节点HA，3.0实现了一主多备
·MapReduce：运行在YARN上的MR；
---离线计算，基于磁盘I/O计算
·YARN：资源管理系统
转载地址：http://rekgn.baihongyu.com/
你可能感兴趣的文章
Java虚拟机几个命令行参数说明
查看>>
javac命令用法
查看>>
javac - Java 编程语言编译器
查看>>
java实现文件拷贝
查看>>
Java实现文件拷贝的4种方法
查看>>
在pb11中将C/S程序转换到B/S的步骤
查看>>
JAVA 中的IO流详解及其使用方法、例子
查看>>
PowerDesigner教程系列（一）概念数据模型
查看>>
PowerDesigner教程系列（二）概念数据模型
查看>>
从PowerDesigner概念设计模型（CDM）中的3种实体关系说起
查看>>
数据库建模工具：PowerDesigner与Rose详解教程
查看>>
C与C++在Linux下的集成问题
查看>>
ASP.NET中水晶报表的使用
查看>>
powerBuilder11做B/S结构程序
查看>>
合理利用HTML标记优化网页布局
查看>>
pb连接oracle问题
查看>>
.NET环境下水晶报表使用总结
查看>>
SQL Server 2000中查询表名
查看>>
查看 SQL Server 2000 数据表的大小并不难
查看>>
PHP命名大小写敏感规则
查看>>