zoukankan      html  css  js  c++  java
  • HADOOP:WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable

    HADOOP:WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable

    WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable

    参考了网上很多办法,不行。

    这个警告总觉得不爽。。

    最近部署SPARK时,顺带解决了。

    URL参考如下“

    http://www.mak-blog.com/spark-on-yarn-setup-multinode.html

     

     

    一,通常编译好的hadoop库是在lib中,如果你不想编译,可以用lib/native里面的预编译库,然后把native的库移动到lib文件夹中。

    cp hadoop-2.6.0/lib/native/* hadoop-2.6.0/lib/

    二,加入系统变量

    export HADOOP_COMMON_LIB_NATIVE_DIR=/home/administrator/work/hadoop-2.6.0/lib/native

    export HADOOP_OPTS="-Djava.library.path=/home/administrator/work/hadoop-2.6.0/lib"

    export HADOOP_ROOT_LOGGER=DEBUG,console

    终于:搞定。

  • 相关阅读:
    myDOM
    13模块
    12异常
    11面向对象
    10文件操作
    蓝桥杯心得
    生物芯片-2014国赛Java语言C组四题
    奇妙的数字-2015省赛C语言A组第三题
    方程整数解-2015省赛C语言A组第一题
    机器人数目-2015决赛Java语言C组第一题
  • 原文地址:https://www.cnblogs.com/think90/p/6024438.html
Copyright © 2011-2022 走看看