Spark Atlas连接器 用于跟踪Spark SQL / DataFrame转换并将元数据更改推送到Apache Atlas的连接器。 此连接器支持跟踪： SQL DDL，例如“创建/删除/更改数据库”，“创建/删除/更改表”。 SQL DML，例如“ CREATE TABLE tbl AS SELECT”，“ INSERT INTO ...”，“ LOAD DATA [LOCAL] INPATH”，“ INSERT OVERWRITE [LOCAL] DIRECTORY”等。 具有输入和输出的DataFrame转换 机器学习管道。 该连接器将与Hive，HDFS等其他系统关联，以跟踪Atlas中数据的生命周期。 如何建造 要使用此连接器，您将需要最新版本的Spark（Spark 2.3+），因为大多数功能仅在Spark 2.3.0+中存在。 要构建此项目，请执行： mv

Apache atlas使用说明文档

Apache Atlas 内嵌式安装包

Apache-Atlas-Jdbc-Bridge

Apache Atlas编译时间太长，编译经常报错？ 这里有一个编译成功的 apache-atlas-2.1.0-bin.tar.gz，内置Hbase和Solr, Centos7平台使用。 使用方法： 拷贝到Centos7系统下自定义的文件夹里 tar -zxvf apache-atlas-2.1.0-bin.tar.gz解压 根据自己的条件设置参数 进入 自定义的文件夹/apache-atlas-2.1.0/bin 运行 python atlas_start.py启动

apache-atlas-2.2.0-hbase-hook.tar.gz

apache-atlas-2.2.0-falcon-hook.tar.gz

apache-atlas-2.2.0-kafka-hook.tar.gz

apache-atlas-2.2.0-sqoop-hook.tar.gz

apache-atlas-2.2.0-storm-hook.tar.gz