zoukankan      html  css  js  c++  java
  • windows环境下Eclipse开发MapReduce程序遇到的四个问题及解决办法

    按此文章《Hadoop集群(第7期)_Eclipse开发环境设置》进行MapReduce开发环境搭建的过程中遇到一些问题,饶了一些弯路,解决办法记录在此:

    文档目的:

    记录windows环境下Eclipse开发MapReduce程序遇到的四个问题及解决办法;

    问题一:程序运行时报JobTracker is in safe mode

    security.UserGroupInformation: PriviledgedActionException as:hadoop cause:org.apache.hadoop.ipc.RemoteException: org.apache.hadoop.mapred.SafeModeException: JobTracker is in safe mode 
        at org.apache.hadoop.mapred.JobTracker.checkSafeMode(JobTracker.java:5178)

    解决办法:

    解除安全模式,如下命令:

    bin/hadoop dfsadmin -safemode leave

    操作安全模式的参数:

    enter 进入安全模式

    leave 强制退出安全模式

    get 返回是否开启安全模式

    wait 等待,一直到安全模式结束

    问题二:程序运行时报错Input path does not exist: file

    14/06/05 13:41:06 INFO mapred.JobClient: Cleaning up the staging area hdfs://hadoop:9000/usr/local/hadoop/tmp/mapred/staging/hadoop/.staging/job_201406041924_0002
    14/06/05 13:41:06 ERROR security.UserGroupInformation: PriviledgedActionException as:hadoop cause:org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist: file:

    解决办法:创建input目录

    问题三:程序运行时报错unknown host: hadoop

    14/06/05 13:46:05 ERROR security.UserGroupInformation: PriviledgedActionException as:hadoop cause:java.net.UnknownHostException: unknown host: hadoop
    Exception in thread "main" java.net.UnknownHostException: unknown host: hadoop

    解决办法:将C:WindowsSystem32driversetchosts文件中,增加Hadoop的DNS解析

    192.168.80.100        hadoop

    问题四:程序运行时报错JobTracker is in safe mode

    14/06/05 14:13:21 ERROR security.UserGroupInformation: PriviledgedActionException as:administrator cause:org.apache.hadoop.ipc.RemoteException: org.apache.hadoop.mapred.SafeModeException: JobTracker is in safe mode

    解决办法:"右击"桌面上图标"我的电脑",选择"管理",将用户中,找到administrator,改为hadoop,注销或重启电脑。

  • 相关阅读:
    delphi 数据导出 进度条自己生成
    在存储过程中编写正确的事务处理代码(SQL Server 2000 & 2005)
    在Delphi中如何获得SQL中存储过程的返回值?
    object-c中管理文件和目录:NSFileManager使用方法
    Delphi中动态链接库(DLL)的建立和使用
    开源免费天气预报接口API以及全国所有地区代码!!(国家气象局提供)
    wince 程序无法执行的原因
    如果我写一个播放器
    busybox配置
    switch case被人忽视的一点!zt
  • 原文地址:https://www.cnblogs.com/MyXQ/p/3789004.html
Copyright © 2011-2022 走看看