微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

Hbase Export与Import完成数据迁移

Hbase1.0环境升级Hbase2.0环境,数据从1.0迁移到2.0

1.Export导出Hbase表数据到本地文件系统
   hbase org.apache.hadoop.hbase.mapreduce.Export '表名' file://本地文件目录  需要导出的数据版本 需要导出数据的起始时间戳  需要导出数据的结束时间戳

eg:hbase org.apache.hadoop.hbase.mapreduce.Export 'test' file:///var/tmp/testBak 1 1589904000000 1590076800000 

导出的的HDFS文件路径,不加‘file://’则默认导入到hdfs目录上,通过 hadoop -ls '文件目录查看'.

 

2.Import导出Hbase表数据到本地文件系统

   1>预先在新环境中创建一个与原始表结构相同的表结构,不然会报错

 

    2>运行Import导数据命令

      需要将导出的文件传递到新机器上,可通过SCP协议传递数据

       hbase org.apache.hadoop.hbase.mapreduce.Driver import 'testBak' file:///var/tmp/testBak

     hdfs则只需切换协议名称,也可以避免上传原始导出的数据文件

      hbase org.apache.hadoop.hbase.mapreduce.Driver import 'testBak' hdfs://IP/var/tmp/testBak

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 [email protected] 举报,一经查实,本站将立刻删除。

相关推荐