zoukankan      html  css  js  c++  java
  • HDFS01

    ==============NameNode==============

    管理文件系统的命名空间

    记录每个文件数据在各个DataNode上的位置和副本信息

    协调客户端对文件的访问

    NameNode文件解析 ----->

    VERSION 版本信息,文件系统标识符

    seen_txid 事务管理用文件

    fsimage_* 元数据文件

    fsimage_*.md5 元数据文件

    edits_* 元数据文件

    ==============DataNode==============

    负责所在物理节点的存储管理

    一次写入,多次读取(不修改)

    文件由数据块组成,典型的块大小是64MB

    数据块尽量散布到各个节点

    DataNode文件解析 ----->

    blk_<id>:HDFS的数据块,保存具体的二进制数据

    blk_<id>.meta:数据块的属性信息:版本信息、类型信息

  • 相关阅读:
    Java实现分页
    研发技能列表
    shell 函数
    养生
    再谈创新
    写代码注意事项
    排查问题方法
    简历撰写
    jenkins
    架构
  • 原文地址:https://www.cnblogs.com/xtdxs/p/7073907.html
Copyright © 2011-2022 走看看