bill-cc/metadata-hive-hook

Hive hook, obtain task information from Hive, fetch input/output tables and lineage information from HSQL.

metadata-hive-hook's Issues

字段血缘不能获取目的表的字段名

您好，以下是我执行的SQL：
insert overwrite table bi_tmp.t_tmp_000184_order
select concat(create_time,'123') -- order
from bi_tmp.t_tmp_000189_order
where order is not null
limit 1;
通过Hook得到的字段血缘信息如下：
"columnLineage":[{"expression":["concat(bi_tmp.t_tmp_000189_order.create_time,'123')"],"qualifiedName":"bi_tmp.t_tmp_000184_order.","inputs":[{"qualifiedName":"bi_tmp.t_tmp_000189_order.create_time"}],"name":""}]
可以看到qualifiedName的值为bi_tmp.t_tmp_000184_order.
没有拿到输出表的字段名
如果加入SQL中被注释掉的别名 order ，血缘信息中qualifiedName的值为bi_tmp.t_tmp_000184_order.order
但这并不一定是输出表中真正的物理字段名，只是SQL中的临时别名

请问这个问题之后会进行维护嘛，期待回复！

列级血缘支持

你好，我看列级血缘部分注释掉了，请问可以支持列级血缘吗～

自定义LineageLogger 不能 getEdges

请问作者，我copy了源代码的lineagelogger到自己的工程，但是得到的edges和vertices都是空，请问您知道什么原因吗？另外我在源代码同位置copy了lineagelogger类到mylineagelogger，也是有同样的问题，将hive.exec.post.hooks配置改为hive自己的lineagelogger就可以得到完整的edges和vertices。期待回答，多谢！