大数据系列之：统计hive表的详细信息，生成csv统计表
大数据系列之：统计hive表的详细信息，生成csv统计表
- 一、获取源数据库、源数据库类型、hive数据库名称
- 二、获取hive数据库名、hive表名、数仓层级、空间、维护者信息
- 三、统计hive表信息
- 四、统计源库信息
- 五、合并hive表信息
- 六、生成csv统计表
- 七、完整代码
一、获取源数据库、源数据库类型、hive数据库名称
获取信息如下所示：
database_source_name,database_source_type,database_url,hive_database_name
optics_prod,mysql,jdbc:mysql://10.22.33.45:3306/admin,optics_prod
查询语句
%sql
select a.database_source_name,
a.database_source_type,
a.database_url,
b.database_name as hive_database_name
from tianchi.database_source