推荐两则基于解析SQL的表间血缘关系工具

基于大数据脚本,可以用Apache Atlas做元数据的血缘关系分析,很多金融机构仍然在使用老的遗留系统,比如老版本的Hive、数据库存储过程,如何反查表间的顺序关系、哪些是源头表,哪些是结果表,这些SQL脚本分析是一个很大工作量。为此这几天搜集了一下,发现了两款小工具。

一、sqllineage。SQL Lineage Analysis Tool powered by Python

      源码地址:https://github.com/reata/sqllineage

      安装:pip install sqllineage

      使用:sqllineage -e "select * from tabA"

                 sqllineage -f demo.sql

二、在线工具 https://sqlflow.gudusoft.com/#/

      著名的sqlparserhttp://www.sqlparser.com/index.php提供几个Live Demo工具,其中有展示血缘关系的小工具,访问地址是https://sqlflow.gudusoft.com/#/

      这个在线工具的好处,不仅可以展现表间的关系,也可以提取表的字段。

如果需要更强大的表间血缘关系,或者表的字段级别血缘分析,暂未找到更好的工具,可以交给万能的自定义开发哈。

Logo

旨在为数千万中国开发者提供一个无缝且高效的云端环境,以支持学习、使用和贡献开源项目。

更多推荐