手动的 指示 按此顺序运行pre-install.sh ， download.sh ， install.sh 。 编辑文件/opt/kafka_2.10-0.8.2.2/config/server.properties 。 在第20行中设置broker.id。 在第28行中添加您的hostname：port。 在第118行中添加Zookeeper主机的地址。 编辑文件/opt/kibana-4.1.2-linux-x64/config/kibana.yml 。 在第8行中添加Elasticsearch主机的地址。 执行命令 在节点（例如dbnode）上运行Elasticsearch。 /opt/elasticsearch-1.7.2/bin/elasticsearch 运行Kafka zookeeper，然后运行节点上的服务器（例如node0）。 /opt/kafka_2

前言 由于logstash内存占用较大,灵活性相对没那么好,ELK正在被EFK逐步替代.其中本文所讲的EFK是Elasticsearch+Fluentd+Kfka,实际上K应该是Kibana用于日志的展示,这一块不做演示,本文只讲述数据的采集流程. 前提 docker docker-compose apache kafka服务 架构 数据采集流程 数据的产生使用cadvisor采集容器的监控数据并将数据传输到Kafka. 数据的传输链路是这样: Cadvisor->Kafka->Fluentd->elasticsearch 每一个服务都可以横向扩展,添加服务到日志系统中. 配置文件 dock

日志生成器 用于创建日志文件或将Log事件发送到定义的URL的实用程序。 该工具旨在帮助设计以测试Fluentd配置。 通过使用此工具，我们可以模拟不同类型的日志文件。 该工具为其日志条目使用单独的源文件。 该文件在控制该实用程序所有方面的属性文件中标识。 完整文档位于/docs/readme.md 该代码已在Apache 2下获得许可

可安装在 Redhat 或 Centos 系统中的 Fluentd 采集工具，下载后只需将该文件上传到系统中，如果文件没有执行权限，通过命令“chmod 777 install-redhat-td-agent2.sh”即可执行。 安装时只需要执行该文件即可安装。

概述 为Fluentd重写标签过滤器。它旨在重写像 mod_rewrite 这样的标签。 当值与正则表达式匹配/不匹配时，重新发出带有重写标记的记录。 您还可以使用正则表达式按域、状态代码（例如 500 错误）、 用户代理、请求 uri、正则表达式反向引用等从 Apache 日志中更改标签。 这是一个输出插件，因为 fluentdfilter不允许标签重写。 更多详情、使用方法，请下载后阅读README.md文件

轻松上手Fluentd，结合 Rainbond 插件市场，日志收集更快捷.doc

测井作业员 基于Fluentd和Fluent位的Kubernetes日志记录运算符。 记录操作员可自动执行Kubernetes记录管道的部署和配置。 操作员在每个节点上部署和配置Fluent Bit守护程序集，以从节点文件系统收集容器和应用程序日志。 Fluent Bit查询Kubernetes API，并使用有关Pod的元数据来丰富日志，并将日志和元数据都传输到Fluentd。 Fluentd接收，过滤日志并将日志传输到多个输出。 您的日志将始终在经过身份验证和加密的通道上传输。 这个运算符是做什么用的？ 此运算符可帮助您将日志记录信息与应用程序捆绑在一起：您可以在其图表中描述应用程序的行为，其余由Logging运算符完成。 功能亮点 命名空间隔离 原生Kubernetes标签选择器 安全通信（TLS） 配置验证 多种流程支持（针对不同的转换乘以日志） 多支持（将相同的日

Fluentd.tar

Kubernetes上的弹性云 注意：Elasticstack中的命名空间已更改为logging 在此存储库中，我们将设置Elasticsearch和Kibana，然后设置Fluentd 松紧带 在本节中，我们将与Elasticsearch和Kibana一起设置elastitc运算符 在您的Kubernetes集群中部署ECK 安装自定义资源定义和操作员及其RBAC规则： kubectl apply -f elastic/all-in-one.yaml kubectl -n logging logs -f statefulset.apps/elastic-operator监视操作员日志： 部署Elasticsearch集群 应用简单的Elasticsearch集群规范，其中包含三个Elasticsearch节点： 部署kubectl apply -f elastic/elast

官方离线安装包，测试可用。使用rpm -ivh [rpm完整包名] 进行安装