Apache Atlas元数据血缘关系(Lineage)功能研究
一、生成血缘数据血缘关系数据通过Process生成,可以在数据导入时自动生成或通过RestAPI新增Process生成。1、sqoop同步自动生成血缘数据sqoop同步MySQL数据库数据到hive,同步成功后,通过sqoop的Atlas Hook自动生成血缘数据。sqoop将MySQL数据库所有表数据同步到hive仓库命令:sqoop import-all-tables --connect jdbc:mysql://192.168.1.1:3306/testdb --username.
原创
2020-05-11 16:47:39 ·
20273 阅读 ·
8 评论