日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

【数据平台】关于Hadoop集群namenode format安全事故

發布時間:2025/4/16 编程问答 28 豆豆
生活随笔 收集整理的這篇文章主要介紹了 【数据平台】关于Hadoop集群namenode format安全事故 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

1、問題:重啟namenode后提示連接失敗,居然執行了format命令,出現了很嚴重的安全事故。

2、教訓:對于生產集群,一定要建立運維安全體系,對于高危命令要做權限控制。

3、對于備份的理解:

? ? ? 1)由于所操作的集群namenode和secondary namenode是同一臺機子,secondary只發揮在namenode當機下充當namenode的作用,而沒有獨立保存元數據結構和日志,導致無法從secondary恢復數據。

? ? ? 2)對于dfs.namenode.name.dir路徑下namenode保存的fsimage_和edits_要預先做備份,最好是設置雙路徑,以便從fsimage_和edits_中恢復。

hdfs-site.xml

<property> <name>dfs.namenode.name.dir</name><value>/data/hadoop-2.7.2/current/dfs/name</value></property><property><name>dfs.datanode.data.dir</name><value>/data/hadoop-2.7.2/current/data</value></property>core-site.xml
<property><name>hadoop.tmp.dir</name><value>/data/hadoop-2.7.2/current/tmp</value></property>

? ? ? 上面三個路徑的數據在format前要注意備份。


4、對于format前的工作,要先前上面三個路徑備份后再執行。


5、hadoop的集群有不同的情況,生產的集群和研發的集群在安全級別上有不同的管理。


6、checkpoint參考:http://www.cnblogs.com/hanyuanbo/archive/2012/07/25/2608698.html

? ??

總結

以上是生活随笔為你收集整理的【数据平台】关于Hadoop集群namenode format安全事故的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。