zoukankan      html  css  js  c++  java
  • Hbase Export与Import完成数据迁移

    Hbase1.0环境升级Hbase2.0环境,数据从1.0迁移到2.0

    1.Export导出Hbase表数据到本地文件系统
       hbase org.apache.hadoop.hbase.mapreduce.Export '表名' file://本地文件目录  需要导出的数据版本 需要导出数据的起始时间戳  需要导出数据的结束时间戳

    eg:hbase org.apache.hadoop.hbase.mapreduce.Export 'test' file:///var/tmp/testBak 1 1589904000000 1590076800000 

    导出的的HDFS文件路径,不加‘file://’则默认导入到hdfs目录上,通过 hadoop -ls '文件目录查看'.

    2.Import导出Hbase表数据到本地文件系统

       1>预先在新环境中创建一个与原始表结构相同的表结构,不然会报错

        2>运行Import导数据命令

          需要将导出的文件传递到新机器上,可通过SCP协议传递数据

           hbase org.apache.hadoop.hbase.mapreduce.Driver import 'testBak' file:///var/tmp/testBak

         hdfs则只需切换协议名称,也可以避免上传原始导出的数据文件

          hbase org.apache.hadoop.hbase.mapreduce.Driver import 'testBak' hdfs://IP/var/tmp/testBak

  • 相关阅读:
    Swift
    Swift
    UVa
    Go如何发送广播包
    人迹罕至的android要完全退出程序的一种方法
    备注ocp_ORACLE专题网络
    JS它DOM
    HDU 1693 Eat the Trees 插头DP
    ubuntu-14.04 系统安装mysql-5.6.21
    1941设置站点模板,一生珍藏,所有玩具
  • 原文地址:https://www.cnblogs.com/zhengzhiwei/p/13083160.html
Copyright © 2011-2022 走看看