zoukankan      html  css  js  c++  java
  • HDFS数据流——读数据流程

    HDFS读数据流程

    假设客户端请求下载文件/user/atguigu/ss.avi,HDFS读数据流程如下:

    1)客户端向namenode请求下载文件,namenode通过查询元数据,找到文件所有文件块及所在的datanode地址。

    2)挑选一台datanode(就近原则,然后随机)服务器,请求读取数据。

    3)datanode开始传输数据给客户端(从磁盘里面读取数据放入流,以packet为单位来做校验)。

    4)客户端以packet为单位接收,先在本地缓存,然后合并写入目标文件。

  • 相关阅读:
    nodejs获取服务器数据到页面
    Struts 2
    JQuery
    JDBC
    Hiberbate
    EasyUi
    JavaScript
    利用 HashSet 去过滤元素是否重复
    HTML
    MySQL
  • 原文地址:https://www.cnblogs.com/MWCloud/p/11214348.html
Copyright © 2011-2022 走看看