修改hdfs和yarn pid文件路徑

默認的pid文件是在/tmp下，/tmp目錄下有些運維會配置定期清理歷史文件，所以該pid文件也會被刪除，設置到別的目錄防止被刪除后可能引起的問題

HADOOP_PID_DIR=/data/tmp

hdfs設置

?yarn設置

運行hudi設置?

在flink中通過hudi寫parquet時候會用到hadoop-mapreduce-client-core.jar這個jar，所以需要添加$HADOOP_MAPRED_HOME/*到yarn.application.classpath配置中。

添加超級用戶

groupadd supergroup # root用戶加入supergroup組 usermod -a -G supergroup root # 同步系統的權限信息到HDFS sudo -u hdfs hdfs dfsadmin -refreshUserToGroupsMappings

將root用戶添加到hdfs超級用戶組

總結

以上是生活随笔為你收集整理的cdh安装hadoop组件后一些常用设置的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。