zoukankan      html  css  js  c++  java
  • windows系统调试MapReduce程序

    如果使用windows开发mapreduce程序,是不能进行debug的,会报如下错误,但其实不影响最终运行结果

    DEBUG o.a.h.u.Shell - Failed to detect a valid hadoop home directory
    java.io.IOException: HADOOP_HOME or hadoop.home.dir are not set.
    ERROR o.a.h.u.Shell - Failed to locate the winutils binary in the hadoop binary path
    java.io.IOException: Could not locate executable nullinwinutils.exe in the Hadoop binaries.

    首先需要设置环境变量,类似JAVA_HOME,HADOOP_HOME,bin目录下面带有winutils.exe和hadoop.dll两个文件就可以

    bin目录放入winutils.exe和hadoop.dll两个文件, 网上下载,很多

    然后将他们两个再在C:WindowsSystem32路径下放一份,这个时候就可以在windows系统debug MR程序了

  • 相关阅读:
    git
    avalonJS
    push
    DataTables使用学习记录
    django models使用学习记录
    js操作记录
    部署网站遇到的问题
    ubuntu修改文件权限记录
    django发送邮件
    ubuntu使用记录
  • 原文地址:https://www.cnblogs.com/xhy-shine/p/10641358.html
Copyright © 2011-2022 走看看