HBase oldWALs目录文件剧增占用磁盘空间问题
生活随笔
收集整理的這篇文章主要介紹了
HBase oldWALs目录文件剧增占用磁盘空间问题
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
出現問題原因:
當/hbase/WALs中的HLog文件被持久化到存儲文件中,且這些Hlog日志文件不再被需要時,就會被轉移到{hbase.rootdir}/oldWALs目錄下,該目錄由HMaster上的定時任務負責定期清理。
HMaster在做定期清理的時候首先會檢查zookeeper中/hbase/replication/rs下是否有對應的復制文件,如果有就放棄清理,如果沒有就清理對應的hlog。在手動清理oldWALs目錄數據的同時,如果沒有刪除對應的znode數據,就會導致HMaster不會自動清理oldWALs。
解決方案:
1、進入Zookeeper目錄下刪除有關節點
2、確保hbase-site.xml中的有添加屬性hbase.replication=false和屬性hbase.backup.enable=false,如果是true就改成false即可,然后重啟整個hbase集群。
<property><name>hbase.replication</name><value>false</value> </property><property><name>hbase.backup.enable</name><value>false</value> </property>3、接下來可以看到oldWALs目錄下占用空間已經被逐漸清理為空。
HBase | oldWALs目錄文件劇增占用磁盤空間問題
Hbase2.2.1出現驚人大坑,為什么會出現oldWALs?
總結
以上是生活随笔為你收集整理的HBase oldWALs目录文件剧增占用磁盘空间问题的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 如何删除 Windows.old 文件夹
- 下一篇: 【人工智能作业及答案】什么叫智能?什么叫