Crontab中shell每分鐘執行一次HDFS文件上傳不執行的解決方案

1、Crontab -e 加入輸出Logoop

*/1 * * * * /qiwen_list/upload_to_hdfs.sh > /qiwen_list/mapred.log 2>&1spa

2、查看Log發現,找不到Hadoophadoop

3、腳本中指定Hadoop完整路徑date

#!/bin/sh
#upload list to hdfscsv


yesterday=`date --date='1 day ago' +%Y%m%d`map

echo $yesterday
/home/hadoop/bin/hadoop fs -put /qiwen_list/qiwen_${yesterday}.csv /qiwen_list腳本

 

再次執行,問題解決。tab

相關文章
相關標籤/搜索