前言 由于logstash内存占用较大,灵活性相对没那么好,ELK正在被EFK逐步替代.其中本文所讲的EFK是Elasticsearch+Fluentd+Kfka,实际上K应该是Kibana用于日志的展示,这一块不做演示,本文只讲述数据的采集流程. 前提 docker docker-compose apache kafka服务 架构 数据采集流程 数据的产生使用cadvisor采集容器的监控数据并将数据传输到Kafka. 数据的传输链路是这样: Cadvisor->Kafka->Fluentd->elasticsearch 每一个服务都可以横向扩展,添加服务到日志系统中. 配置文件 dock

ql3x bios QHPW qhr7 ql2x XEON 魔改 cpu qnct qtj2 qqlt qtj1 qqls E2176M E2186M E2286M ES bios 魔改 1151 cpu i9 9980HK E2124 E2134 QNCW QNCU QNCV 至强 Z370M PRO4修改 6 7代 cpu

基于SpringCloud+Oauth2+MyBatis+Elasticsearch+Docker+Kubernetes的商城系统项目源码+数据 核心功能： 平台管理端：商品管理、订单管理、会员管理、促销管理、店铺管理、运营管理、统计分析、系统设置、日志系统。 商家管理端：商品管理、订单管理、财务管理、营销管理、统计分析、系统设置、日志系统。 商城web端：商品展示、购物车、收藏、会员、订单。 在电商业务的基础集成了注册中心、配置中心、监控中心、网关等系统功能。 核心技术： 微服务框架：SpringClould 持久层框架：MybatisPlus 数据层代码生成:MyBatisGenerator 关系型数据库：Mysql 认证和授权框架: Spring Security Oauth2 缓存：Redis+MongoDB 分库分表：Sharding 负载均衡：Nginx 消息中间件：RabbitMq 搜索引擎：ElasticSearch 数据库连接池: Druid 定时任务：xxl-job 对象存储: OSS、MINIO 全局事务管理框架：Seata 应用容器引擎: Docker 可视化D

因部分用户通过github下载ik分词器网速不是特别友好，特使用csdn共享文件功能。 感谢CSDN资源下载功能。

在kettle官方提供的elasticsearch插件中是不支持写入List或者Map类型结构的数据的，如果需要支持写入List或Map数据类型需要对源码进行扩展。这次上次的资源通过修改源码的方式实现了通过密码认证访问es接口和写入list或map类型数据的功能，具体使用细节可以参考：https://blog.csdn.net/abments/article/details/128925392和

本资源包合集包括：elasticsearch-5.3.0.tar.gz、kibana-5.3.0-linux-x86_64.tar.gz、elasticsearch-head、node-v8.1.0-linux-x64.tar.gz。是安装ES集群必备的安装包。

elasticsearch-analysis-ik-7.14.0-c.zip elasticsearch-analysis-ik-7.14.0-c.zip elasticsearch-analysis-ik-7.14.0-c.zip

elasticsearch JAVA使用手册

elasticsearch-6.8.1.zip windows版本,对应的kibana6.8.1去我的下载页查看

自己在windows搭建的ElasticSearch集群，采用一主两从架构，解压直接启动，开箱即用。