HIVE获取表的大小和修改日期

### 获取表的大小
hdfs dfs -du /user/hive/warehouse/database_name.db/ > 360_du
### 获取表的修改日期
hdfs dfs -ls /user/hive/warehouse/database_name.db/ > 360_ls

### 7K+个表测试

### shell处理，效率低，执行时间： 7m32.664s

### 获取表的大小和修改日期
cat 360_du|while read line
do
    str=$(echo ${line}|awk -F"[ /]" '{print tolower($NF)"|"$1}')
    table=$(echo ${str}|awk -F'|' '{print $1}')
    day=$(grep -iw ${table} 360_ls|awk '{print $6}')
    echo ${str}"|"${day}
done

### perl处理，效率超高，执行时间： 0m0.298s

### 获取表的大小和修改日期
#!/usr/bin/perl
use strict;
my %table_du = map{my @m = split /s+/;$m[0],$m[1]} `awk -F'[ /]' '{print tolower($NF),$1}' 360_du`;
my %table_ls = map{my @m = split /s+/;$m[0],$m[1]} `awk '{print tolower($NF),$6}' 360_ls|awk -F/ '{print $NF}'`;

for (keys %table_du){
    print "$_|$table_du{$_}|$table_ls{$_}
";
}