一、Crontab -e 加入輸出Log

*/1 * * * * /qiwen_list/upload_to_hdfs.sh > /qiwen_list/mapred.log 2>&1

二、查看Log發(fā)現(xiàn)，找不到Hadoop

三、腳本中指定Hadoop完整路徑

#!/bin/sh
#upload list to hdfs

yesterday=`date --date='1 day ago' +%Y%m%d`

echo $yesterday
/home/hadoop/bin/hadoop fs -put /qiwen_list/qiwen_${yesterday}.csv /qiwen_list

?

再次執(zhí)行，問題解決。

創(chuàng)作挑戰(zhàn)賽新人創(chuàng)作獎勵來咯，堅持創(chuàng)作打卡瓜分現(xiàn)金大獎

總結(jié)

以上是生活随笔為你收集整理的Crontab中shell每分钟执行一次HDFS文件上传不执行的解决方案的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。