zoukankan      html  css  js  c++  java
  • window eclipse 访问远程虚拟机 Hdfs

    package com.ibm.w3;

    import java.net.URI;

    import org.apache.hadoop.conf.Configuration;
    import org.apache.hadoop.fs.FSDataInputStream;
    import org.apache.hadoop.fs.FSDataOutputStream;
    import org.apache.hadoop.fs.FileSystem;
    import org.apache.hadoop.fs.Path;
    import org.apache.hadoop.io.IOUtils;

    public class Dtf {
        final public static String HDFS_PATH ="hdfs://dias:9000";
        public static final String DIR_PATH ="/d10000";
        public static final String FILE_PATH ="/d10000/f11111";
        public static void main(String[] args) throws Exception {
            // TODO Auto-generated method stub
            
            
            final FileSystem fileSystem = FileSystem.get(new URI(HDFS_PATH), new Configuration());
            
            //create folder
            
            //fileSystem.mkdirs(new Path(DIR_PATH));
            
            // upload
            //final FSDataOutputStream out=fileSystem.create(new Path(FILE_PATH));
            //FileInputStream in = new FileInputStream("C:/workplacebus/business/Important memo.txt");
            //IOUtils.copyBytes(in, out, 1024,true);
            //download
            //final FSDataInputStream in = fileSystem.open(new Path(FILE_PATH));
            //IOUtils.copyBytes(in, System.out, 1024, true);
            
            //remove files
            
            fileSystem.delete(new Path(FILE_PATH), true);
        }

    }





    ----------------------------------------

    Eclipse windows 环境配置 请 参考优秀博文 :

    http://my.oschina.net/lanzp/blog/309078?fromerr=blt5oYkF 




  • 相关阅读:
    生成8位随机字符串
    Python字符串反转
    dd备份文件系统
    多线程mtr-代码
    Sysctl命令及linux内核参数调整
    解决系统存在大量TIME_WAIT状态的连接
    tcpkill清除异常tcp连接
    graphite
    sed 中带变量的情况
    JAVA的Random类
  • 原文地址:https://www.cnblogs.com/TendToBigData/p/10501455.html
Copyright © 2011-2022 走看看