命令行绘制 大数据 数据血缘图

前提

你的sql都是在 *.sql这种文件中.

此方法没有针对 hive -e "..." 这种写道 *.sh中的情况.

我下面用hive sql 为例.

1 python3安装sqllineage 数据血缘绘制工具

pip3 install sqllineage

2 把你的sql放到同一个文件中

find /opt/my-hive-sql/ -name *.sql |xargs -n1 -I{} cat {} >> ./all_sql.sql

3 绘制血缘图

linux命令行执行

sqllineage -g -H sbider-dev-01  -p 60000 -f ./all_sql.sql

 复制命令行输出的链接 用浏览器打开,如上图中 http://sbider-dev-01...........

// 注意 -g表示绘图 -H表示hostname 必须用hostname,不能用ip. 可以用 sqllineage --help查看帮助信息.

 缺点 

目前只显示表名. 没有显示字段和字段的对应关系.


本文来自互联网用户投稿,文章观点仅代表作者本人,不代表本站立场,不承担相关法律责任。如若转载,请注明出处。 如若内容造成侵权/违法违规/事实不符,请点击【内容举报】进行投诉反馈!

相关文章

立即
投稿

微信公众账号

微信扫一扫加关注

返回
顶部