場景

? ? ? ? hbase數據遷移時我們需要統計遷移時的數據量，以確保遷移后的數據的完成，但是如果hbase表數據持續增加的話，遷移時無法統計出準確的數據量，此時我們使用快照的方式進行數據遷移，以確保遷移的數量可以和某一時間節點快照的數據量可以對應上。

快照原理

步驟

• 表快照生成，后面的是快照名稱，注意快照名稱不能包含表空間

snapshot 'nm:user','user_snapshot'

• 查看快照

hbase(main):008:0> list_snapshots SNAPSHOT TABLE + CREATION TIME user_snapshot nm:user (2019-05-30 08:53:03 +0800) 1 row(s) Took 0.0839 seconds

• ?恢復到快照時數據

? ? ? ? ?恢復后，會將數據恢復至快照時間點的數據，快照時間點之后的數據將會刪除。

restore_snaphost 'user_snapshot'

?

• 根據快照我們生成新表（后續會介紹第二種方式不用clone_snapshot一個新表，直接使用快照導出）

clone_snapshot 'user_snapshot','nm:user_snapshot'

此時可以查看表?'nm:user_snapshot' 數據量

• ExportSnapshot遷移數據
  • mappers map數量
  • bandwidth 帶寬限制

hbase org.apache.hadoop.hbase.snapshot.ExportSnapshot -snapshot user_snapshot -copy-from hdfs://h1:8082/hbase -copy-to hdfs://h2:8082/hbase --mappers 11 -bandwidth 1024

?

表遷移參考：https://blog.csdn.net/zhangshenghang/article/details/82594143

總結

以上是生活随笔為你收集整理的Hbase快照Snapshot 数据备份、恢复与迁移的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。