YARN 作業執行流程

YARN 作業執行流程：
1、用戶向 YARN 中提交應用程序，其中包括 MRAppMaster 程序，啟動 MRAppMaster 的命令，用戶程序等。
2、ResourceManager 為該程序分配第一個 Container，并與對應的 NodeManager 通訊，要求它在這個 Container 中啟動應用程序 MRAppMaster。
3、MRAppMaster 首先向 ResourceManager 注冊，這樣用戶可以直接通過 ResourceManager查看應用程序的運行狀態，然后將為各個任務申請資源，并監控它的運行狀態，直到運行結束，重復 4 到 7 的步驟。
4、MRAppMaster 采用輪詢的方式通過 RPC 協議向 ResourceManager 申請和領取資源。
5、一旦 MRAppMaster 申請到資源后，便與對應的 NodeManager 通訊，要求它啟動任務。
6、NodeManager 為任務設置好運行環境（包括環境變量、JAR 包、二進制程序等）后，將任務啟動命令寫到一個腳本中，并通過運行該腳本啟動任務。
7、各個任務通過某個 RPC 協議向 MRAppMaster 匯報自己的狀態和進度，以讓 MRAppMaster隨時掌握各個任務的運行狀態，從而可以在任務敗的時候重新啟動任務。
8、應用程序運行完成后，MRAppMaster 向 ResourceManager 注銷并關閉自己。

總結

以上是生活随笔為你收集整理的YARN 作业执行流程的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。