zoukankan      html  css  js  c++  java
  • 第八章 Hadoop常见错误及解决方案

    一、防火墙没关闭、或者没有启动YARN

    #1.报错信息:
    *INFO client.RMProxy: Connecting to ResourceManager at hadoop102/192.168.10.102:8032*
    
    #2.解决方案
    1)关闭防火墙
    2)重新启动YARN
    

    二、主机名称配置错误

    重启配置正确的主机名称即可
    

    三、IP地址配置错误

    公司内部服务器直接内网地址即可,公有云开放使用公网IP。
    

    四、ssh免密没有配置好

    检查ssh免密登录,失败重新配置ssh免密。
    

    五、root用户和delopy两个用户启动集群不统一

    统一用户启动,不要随便切换root用户启动集群
    

    六、不识别主机名称

    #1.报错信息
    java.net.UnknownHostException: hadoop102: hadoop102
    
    ​    at java.net.InetAddress.getLocalHost(InetAddress.java:1475)
    
    ​    at org.apache.hadoop.mapreduce.JobSubmitter.submitJobInternal(JobSubmitter.java:146)
    
    ​    at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1290)
    
    ​    at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1287)
    
    ​    at java.security.AccessController.doPrivileged(Native Method)
    
    at javax.security.auth.Subject.doAs(Subject.java:415)
    
    #2.解决方案
    1)在/etc/hosts文件中添加192.168.10.102 hadoop102
    
    2)主机名称不要起hadoop hadoop000等特殊名称
    

    七、jps发现进程已经没有,但是重新启动集群,提示进程已经开启。

    原因是在Linux的根目录下/tmp目录中存在启动的进程临时文件,将集群相关进程删除掉,再重新启动集群。
    

    八、jps不生效

    原因:全局变量hadoop java没有生效。解决办法:需要source /etc/profile文件。
    

    九、8088端口连接不上

    [atguigu@hadoop102 ~]$ cat /etc/hosts
    注释掉如下代码
    #127.0.0.1  localhost localhost.localdomain localhost4 localhost4.localdomain4
    #::1     hadoop102
    
  • 相关阅读:
    我的2019,探索在路上
    深度学习-TensorFlow2.0笔记(一)
    机器学习笔记(二)
    机器学习笔记(一)
    SQL注入分类以及联合查询回显注入
    数据库基础概念
    SQL注入原理、常见思路之Access手工注入实战
    OWASP top 10 2017
    HTTP协议及burp基本使用
    web系统架构
  • 原文地址:https://www.cnblogs.com/jhno1/p/15222344.html
Copyright © 2011-2022 走看看