zoukankan      html  css  js  c++  java
  • hadoop基本文件配置

    [学习笔记]

    5)hadoop基本文件配置:
    hadoop配置文件位于:/etc/hadoop下(etc即:“etcetera”(附加物))
    core-site.xml:
    <configuration>
         <property>  
           <name>fs.defaultFS</name>  
           <value>hdfs://localhost:9000</value>  
         </property>  
    </configuration>
    注意:以上说的就是缺省的文件系统是端口是9000,协议是hdfs,所以在浏览器中是看不到效果的。而后面配置eclipse
    的hdfsLocation时,端口也是9000(必须一致)。虽然浏览器看不到,但是程序和eclipse当中可以看到hdfsLocation,即根目录下的东西。所以可以说:这里的值指的是默认的HDFS路径。浏览器中可以用http://localhost:50070 来观看。(当然根据我们所讲的namenode和datanode的知识,可知道一个hdfs的文件可能拆成很多block, 分布在集群的不同机器上)当start-dfs时,会读这里的信息。如果不启动start-dfs,eclipse中读hdfsLocation时,是读不出东西的。原因:hdfs服务器在start-dfs时听9000端口。eclipse必须配成9000,才能要向hdfs服务器要数据, 展示根目录下的东西。
    hdfs-site.xml:
    <configuration>
           <property>  

    文章转载自原文:https://blog.csdn.net/qq_44594249/article/details/94739895

  • 相关阅读:
    参数解包*args
    Gym 101142C CodeCoder vs TopForces(搜索)
    CCCC 连续因子
    CCCC 红色警报
    CCCC 正整数A+B
    POJ 3669 Meteor Shower(bfs)
    【USACO1.5】解题报告
    【USACO1.5】解题报告
    【USACO1.4】解题报告
    【USACO1.4】解题报告
  • 原文地址:https://www.cnblogs.com/haima1949/p/11424500.html
Copyright © 2011-2022 走看看