hadoop生态圈所用到的组件，hadoop、hbase、kafka、spark、sqoop、zookeeper。远程连接服务器的Xshell和远程传送文件到服务器的Xftp。

一个Kafka的小例子，已经测试通过，适合和我一样的小白去尝试使用。代码很简单，理解起来不复杂，主要是一些参数配置千万别弄错了。

kafka最新版本3.1.0版本安装（使用zookeeper及使用kraft）两种安装及日常维护命令，kafka 3.0提出了去 [Zookeeper]后的 Kafka，即 KRaft 模式,本文对相关安装、维护、及新版本的一些更新进行说明

Kafka UI – Kafka的免费Web UI Kafka UI是一个免费的开源Web UI，用于监视和管理Apache Kafka集群。 Kafka UI是一个简单的工具，可让您观察到数据流，帮助更快地查找和排除问题并提供最佳性能。 它轻巧的仪表板使您可以轻松跟踪Kafka集群的关键指标-代理，主题，分区，生产和消费。 仅需几个简单的命令即可设置Kafka UI，从而以一种易于理解的方式可视化您的Kafka数据。 您可以在本地或在云中运行该工具。 特征 多集群管理—集中监视和管理所有集群 使用指标仪表板进行性能监控—使用轻量级仪表板跟踪关键的Kafka指标 查看Kafka经纪人—查看主题和分区分配，控制器状态 查看Kafka主题-查看分区计数，复制状态和自定义配置 查看消费者组—查看按分区停放的偏移量，合并和按分区滞后 浏览消息-使用JSON，纯文本和Avro编码浏览消息 动态

kafka+zookeeper高可用集群搭建shell使用脚本，直接在linux运行就行

运行saprk-streaming所需的jar包,spark-streaming-kafka-assembly_2.10-1.6.3.jar

Apache Kafka 官方文档中文版，Apache Kafka 官方文档中文版

flume消费kafka数据上传hdfs

kafka_2.11-0.10.1.0及使用说明

大数据笔记，包含Hadoop、Spark、Flink、Hive、Kafka、Flume、ZK...... 大数据笔记，包含Hadoop、Spark、Flink、Hive、Kafka、Flume、ZK...... 大数据笔记，包含Hadoop、Spark、Flink、Hive、Kafka、Flume、ZK...... 大数据笔记，包含Hadoop、Spark、Flink、Hive、Kafka、Flume、ZK...... 大数据笔记，包含Hadoop、Spark、Flink、Hive、Kafka、Flume、ZK...... 大数据笔记，包含Hadoop、Spark、Flink、Hive、Kafka、Flume、ZK...... 大数据笔记，包含Hadoop、Spark、Flink、Hive、Kafka、Flume、ZK...... 大数据笔记，包含Hadoop、Spark、Flink、Hive、Kafka、Flume、ZK...... 大数据笔记，包含Hadoop、Spark、Flink、Hive、Kafka、Flume、ZK...... 大数据笔记，包含Hadoop