zoukankan      html  css  js  c++  java
  • 03_Hadoop简单介绍以及版本信息

    一、海量数据:

    量:大、数目多,数据量到达PB、ZB级别,条目数到达几十亿条、百亿条

    1)存储:分布式,集群的概念,管理(主节点、从节点),HDFS(HadoopDistributedFileSystem)

    2)分析:分布式,并行,离线计算框架,管理(主节点、从节点),MapReduce

    ApacheHadoopLogo,一只会飞的大象

    二、Hadoop与Google的关系

      HDFS–>GFS开源文件系统

      HadoopMapReduce:核心就是对数据的排序优化

       GoogleMapReduce–>HadoopMapReduce开源的分布式并行计算框架

       BigTable-->    HBase开源的分布式数据库

      

    二、ApacheHadoop版本

    经典版本:0.20.2、1.0.0(第一个1.0.0正式版本)à1.0.3或者1.0.4(应用最多的版本)à1.1.2、1.2.1(截止2014年4月份)。

    0.23.0(跨越版本,YARN框架,第二代MapReduce框架,资源管理和任务调度的框架)。

    023.10版本,最新的,与2.x系列版本区别在于,没有HDFS的HA和Federation特性。

    2.X版本:(将1.x系列版本与0.23.0系列版本的合并)

    1)2.0.x版本:属于2.x系列版本的alpha版本

    2)2.1.x版本:属于2.x系列版本的beta版本

    3)2.2.0、2.3.0、2.4.0正式版本,可用于实际生产环境中。

  • 相关阅读:
    工具类图片处理工具类
    工具类文件上传工具类
    工具类Bean 工具类
    防止XSS攻击的过滤器
    工具类文件类型工具类
    工具类媒体类型工具类
    XSS过滤处理
    工具类HTML过滤器,用于去除XSS漏洞隐患。
    工具类转义和反转义工具类
    开机去掉atime参数 枯木
  • 原文地址:https://www.cnblogs.com/xiangyangzhu/p/5242260.html
Copyright © 2011-2022 走看看