命令行绘制 大数据 数据血缘图

前提

你的sql都是在 *.sql这种文件中.

此方法没有针对 hive -e "..." 这种写道 *.sh中的情况.

我下面用hive sql 为例.

1 python3安装sqllineage 数据血缘绘制工具

pip3 install sqllineage

2 把你的sql放到同一个文件中

find /opt/my-hive-sql/ -name *.sql |xargs -n1 -I{} cat {} >> ./all_sql.sql

3 绘制血缘图

linux命令行执行

sqllineage -g -H sbider-dev-01  -p 60000 -f ./all_sql.sql

 复制命令行输出的链接 用浏览器打开,如上图中 http://sbider-dev-01...........

// 注意 -g表示绘图 -H表示hostname 必须用hostname,不能用ip. 可以用 sqllineage --help查看帮助信息.

 缺点 

目前只显示表名. 没有显示字段和字段的对应关系.