zoukankan      html  css  js  c++  java
  • mapreduce

    问:在eclipse中的写的代码如何提交作业到JobTracker中的哪?
    答:(1)在eclipse中调用的job.waitForCompletion(true)实际上执行如下方法
         connect();
      info = jobClient.submitJobInternal(conf);
     (2)在connect()方法中,实际上创建了一个JobClient对象。
        在调用该对象的构造方法时,获得了JobTracker的客户端代理对象JobSubmissionProtocol。
        JobSubmissionProtocol的实现类是JobTracker。
     (3)在jobClient.submitJobInternal(conf)方法中,调用了
      JobSubmissionProtocol.submitJob(...),
      即执行的是JobTracker.submitJob(...)。
    1.Hadoop的数据类型要求必须实现Writable接口。
    2.java基本类型与Hadoop常见基本类型的对照
     Long LongWritable
     Integer IntWritable
     Boolean BooleanWritable
     String Text
     问:java类型如何转化为hadoop基本类型?
     答:调用hadoop类型的构造方法,或者调用set()方法。
      new LongWritable(123L);
     问:hadoop基本类型如何转化为java类型?
     答:对于Text,需要调用toString()方法,其他类型调用get()方法。

  • 相关阅读:
    Linux命令大全之关机重启命令
    Linux命令大全之帮助命令及压缩命令
    Linux命令大全之搜索命令
    Linux命令大全之基本命令
    Linux安装界面简介
    Linux 的ftp服务未启用怎么办
    创建分区表
    Linux分区,格式化概念理解
    VMware简介
    Linux简介
  • 原文地址:https://www.cnblogs.com/mlj5288/p/4440369.html
Copyright © 2011-2022 走看看