HIVE获取表的大小和修改日期

 ### 获取表的大小
 hdfs dfs -du /user/hive/warehouse/database_name.db/ > 360_du
 ### 获取表的修改日期
 hdfs dfs -ls /user/hive/warehouse/database_name.db/ > 360_ls

### 7K+个表测试

### shell处理，效率低，执行时间： 7m32.664s

 ### 获取表的大小和修改日期
 cat 360_du|while read line
 do
     str=$(echo ${line}|awk -F"[ /]" '{print tolower($NF)"|"$1}')
     table=$(echo ${str}|awk -F'|' '{print $1}')
     day=$(grep -iw ${table} 360_ls|awk '{print $6}')
     echo ${str}"|"${day}
 done

### perl处理，效率超高，执行时间： 0m0.298s

 ### 获取表的大小和修改日期
 #!/usr/bin/perl
 use strict;
 my %table_du = map{my @m = split /\s+/;$m[],$m[]} `awk -F'[ /]' '{print tolower(\$NF),\$1}' 360_du`;
 my %table_ls = map{my @m = split /\s+/;$m[],$m[]} `awk '{print tolower(\$NF),\$6}' 360_ls|awk -F\/ '{print \$NF}'`;

 for (keys %table_du){
     print "$_|$table_du{$_}|$table_ls{$_}\n";
 }