zoukankan      html  css  js  c++  java
  • HADOOP:WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable

    HADOOP:WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable

    WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable

    参考了网上很多办法,不行。

    这个警告总觉得不爽。。

    最近部署SPARK时,顺带解决了。

    URL参考如下“

    http://www.mak-blog.com/spark-on-yarn-setup-multinode.html

     

     

    一,通常编译好的hadoop库是在lib中,如果你不想编译,可以用lib/native里面的预编译库,然后把native的库移动到lib文件夹中。

    cp hadoop-2.6.0/lib/native/* hadoop-2.6.0/lib/

    二,加入系统变量

    export HADOOP_COMMON_LIB_NATIVE_DIR=/home/administrator/work/hadoop-2.6.0/lib/native

    export HADOOP_OPTS="-Djava.library.path=/home/administrator/work/hadoop-2.6.0/lib"

    export HADOOP_ROOT_LOGGER=DEBUG,console

    终于:搞定。

  • 相关阅读:
    冲刺阶段第三天
    冲刺阶段第二天
    冲刺阶段第一天
    工作项估计
    学习进度条(7-9周)
    团队计划会议01
    第一次冲刺阶段(一)
    软件项目团队报告
    团队项目会议第一次
    团队开发项目需求简介
  • 原文地址:https://www.cnblogs.com/think90/p/6024438.html
Copyright © 2011-2022 走看看