zoukankan      html  css  js  c++  java
  • hadoop基本文件配置

    [学习笔记]

    5)hadoop基本文件配置:
    hadoop配置文件位于:/etc/hadoop下(etc即:“etcetera”(附加物))
    core-site.xml:
    <configuration>
         <property>  
           <name>fs.defaultFS</name>  
           <value>hdfs://localhost:9000</value>  
         </property>  
    </configuration>
    注意:以上说的就是缺省的文件系统是端口是9000,协议是hdfs,所以在浏览器中是看不到效果的。而后面配置eclipse
    的hdfsLocation时,端口也是9000(必须一致)。虽然浏览器看不到,但是程序和eclipse当中可以看到hdfsLocation,即根目录下的东西。所以可以说:这里的值指的是默认的HDFS路径。浏览器中可以用http://localhost:50070 来观看。(当然根据我们所讲的namenode和datanode的知识,可知道一个hdfs的文件可能拆成很多block, 分布在集群的不同机器上)当start-dfs时,会读这里的信息。如果不启动start-dfs,eclipse中读hdfsLocation时,是读不出东西的。原因:hdfs服务器在start-dfs时听9000端口。eclipse必须配成9000,才能要向hdfs服务器要数据, 展示根目录下的东西。
    hdfs-site.xml:
    <configuration>
           <property>  

    文章转载自原文:https://blog.csdn.net/qq_44594249/article/details/94739895

  • 相关阅读:
    Go 接口
    Go 参数传递
    Go 结构体
    Go 指针
    使用ContentType处理大量的外键关系
    django的render的特殊用法
    restframework中的那些参数你知道吗?
    scrapy框架
    numpy如何使用
    HTML 5 audio标签
  • 原文地址:https://www.cnblogs.com/haima1949/p/11424500.html
Copyright © 2011-2022 走看看