Quantcast
Channel: 旁门左道 » Hadoop
Viewing all articles
Browse latest Browse all 10

热门话题,时间及空目录的处理

$
0
0
  先查看hadoop目录的文件数,然后再决定是不是在input里面加上该目录 [dev@platformB dailyrawdata]$  hadoop fs -ls /trendingtopics |wc -l 3 计算时间的方法 [dev@platformB dailyrawdata]$ lastdate=20110619 [dev@platformB dailyrawdata]$ echo $lastdate 20110619 [dev@platformB dailyrawdata]$ echo `date --date "-d $lastdate + 1day" +"%Y%m%d" ` 20110620 [dev@platformB dailyrawdata]$ echo D9=`date --date "now -20 day" +"%Y%m%d"` D9=20110530   [dev@platformB dailyrawdata]$ D1=`date --date "now" +"%Y/%m/%d"` [dev@platformB dailyrawdata]$ echo $D1 2011/06/20 注:等号后面不能有空格,如下面: [...]

Viewing all articles
Browse latest Browse all 10

Trending Articles