zoukankan      html  css  js  c++  java
  • Hadoop源代码分析(二)

    下面给出了Hadoop的包的功能分析。

    Package

    Dependences

    tool

    提供一些命令行工具,如DistCparchive

    mapreduce

    HadoopMap/Reduce实现

    filecache

    提供HDFS文件的本地缓存,用于加快Map/Reduce的数据访问速度

    fs

    文件系统的抽象,可以理解为支持多种文件系统实现的统一文件访问接口

    hdfs

    HDFSHadoop的分布式文件系统实现

    ipc

    一个简单的IPC的实现,依赖于io提供的编解码功能

    参考:http://zhangyu8374.javaeye.com/blog/86306

    io

    表示层。将各种数据编码/解码,方便于在网络上传输

    net

    封装部分网络功能,如DNSsocket

    security

    用户和用户组信息

    conf

    系统的配置参数

    metrics

    系统统计数据的收集,属于网管范畴

    util

    工具类

    record

    根据DDL(数据描述语言)自动生成他们的编解码函数,目前可以提供C++Java

    http

    基于JettyHTTP Servlet,用户通过浏览器可以观察文件系统的一些状态信息和日志

    log

    提供HTTP访问日志的HTTP Servlet

  • 相关阅读:
    HTML标签
    进程&线程&协程
    04 jQuery的属性操作
    03 jQuery动画效果
    02 jQuery的选择器
    01 jQuery的介绍
    软件测试入门-测试模型(V型 W型 H型)
    软件测试概述
    软件测试基础理论
    17 案例
  • 原文地址:https://www.cnblogs.com/wycg1984/p/1690284.html
Copyright © 2011-2022 走看看