关于在在hue当中执行shell脚本使用oozie调度,一直出现laucher异常退出。
生活随笔
收集整理的這篇文章主要介紹了
关于在在hue当中执行shell脚本使用oozie调度,一直出现laucher异常退出。
小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.
Failing Oozie Launcher, Main class [org.apache.oozie.action.hadoop.ShellMain], exit code [1] Oozie Launcher failed, finishing Hadoop job gracefully Oozie Launcher, uploading action data to HDFS sequence file: hdfs://VM200-11:8020/user/admin/oozie-oozi/0000061-180912100001759-oozie-oozi-W/shell-03de--shell/action-data.seq Successfully reset security manager from org.apache.oozie.action.hadoop.LauncherSecurityManager@2b5b64a3 to null Oozie Launcher ends
這個(gè)就是出現(xiàn)的錯(cuò)誤,然后在hue上面查看日志發(fā)現(xiàn)沒(méi)有錯(cuò)誤信息,然后我又去yarn上面查看錯(cuò)誤信息。發(fā)現(xiàn)也沒(méi)有。這怎么辦那。然后卡了幾天時(shí)間。在集群的命令行當(dāng)中的shell腳本也是正常執(zhí)行的不報(bào)錯(cuò)。
然而今天突然之間看shell腳本發(fā)現(xiàn)自己寫的shell腳本中的for循環(huán)有問(wèn)題。真的是醉了。
這個(gè)地方多寫了一個(gè)等于號(hào),然后oozie在執(zhí)行調(diào)度的時(shí)候他還會(huì)加載一次,然后又沒(méi)有相對(duì)應(yīng)得表,然后就執(zhí)行報(bào)錯(cuò)了。真的是坑。
雖然問(wèn)題解決了,但是在整個(gè)的過(guò)程當(dāng)中還是收獲了很多東西。順便也總結(jié)一下碰到這種問(wèn)題的時(shí)候的自己的一點(diǎn)見(jiàn)解。
(1)注意如果是shell的話一定要注意空格的問(wèn)題。
(2)在執(zhí)行的過(guò)程當(dāng)中要注意權(quán)限問(wèn)題。可以使用HADOOP_USER_NAME=${wf:user()} 讓oozie找到Hadoop集群上面的用戶。
(3)一定要添加這個(gè)文件絕對(duì)路徑來(lái)加載文件。
總結(jié)
以上是生活随笔為你收集整理的关于在在hue当中执行shell脚本使用oozie调度,一直出现laucher异常退出。的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: Spring的meta标签
- 下一篇: 动态sql 返回返回值