1.filebeat收集需要提取的日志文件,将日志文件转存到kafka集群中,logstash处理kafka日志,格式化处理,并将日志输出到elasticsearch中,前台页面通过kibana展示日志。 2.使用kafka集群做缓存层,而不是直接将filebeat收集到的日志信息写入logstash,让整体结构更健壮,减少网络环境,导致数据丢失。filebeat负责将收集到的数据写入kafka,logstash取出数据并处理。
2021-03-31 16:02:47 2.67MB ELK FileBeat Kafka
1
针对服务器计算能力及带宽等方面的异构性导致的系统负载不均衡问题,提出了一种改进的分布式系统负载平衡策略.将模糊综合评判理论运用到服务器性能评价中,选出性能最佳的服务器,使负载均衡,提高了分布式资源的利用率.实验结果表明,运用此策略可以准确地选出最佳服务器.
1
一篇论文,介绍了分布式系统Hadoop+平台的视频转码的思想
2021-03-27 20:51:20 843KB Hadoop 视频
1
用Redis实现分布式锁 与 实现任务队列
2021-03-26 13:21:16 6KB Go开发-分布式系统
1
风门 分布式系统的信号灯。 动机 Throttle通过http界面将信号量作为服务提供。顾名思义,主要用例是通过使系统的元素首先请求许可(即获取租约)来限制系统对资源的访问。如果系统由运行在不同计算机上的多个进程或同一网络中的虚拟机组成,那么节流可能会适得其反。 Throttle的目标是易于操作,在极端情况下行为良好,并且无需持久化后端即可工作。 特征 服务器可在Windows,Linux和OS-X上构建并运行。 客户群 Python:具有阻止API的高级客户端。 Rust:具有异步API的低级客户端。 通过强制执行锁定层次结构来防止死锁。 公平(等待时间更长的同伴享有优先权) 大数量的锁不会被很多小数量的锁饿死。 抵御网络中断。 锁将过期,以防止由于网络错误或客户端崩溃而导致信号量计数泄漏。 可以使用发送到服务器的心跳来无限期延长锁定。 可观察性 普罗米修斯度量 登录到Stderr或
2021-03-21 13:12:23 80KB Rust
1
分布式系统原理与范型 完整中文版 PDF清晰扫描电子书。全书分为两部分:原理和范型。第一部分详细讨论了分布式系统的原理、概念和技术,其中包括通信、进程、命名、同步、一致性和复制、容错以及安全。第二部分给出了一些实际的分布式系统:基于对象的分布式系统、分布式文件系统、基于文档的分布式系统以及基于协作的分布式系统,介绍了一些实际系统的设计思想和实现技术。
2021-03-17 18:45:37 66.11MB 分布式 系统 原理 范型
1
·· 分布式系统系列(分布式系统·实践笔记) 深入浅层分布式基础架构是笔者重组自己,在学习与实践软件分布式架构过程中的,笔记与代码的仓库;主要包含分布式计算,分布式系统,数据存储,虚拟化,网络,操作系统等几个部分。所谓的分布式系统,其主要由网络,分布式存储与分布式计算等部分构成,分布式存储侧重于数据的读取访问和一致性等方面,而分布式计算则侧重于资源,任务的编排调度。 导航|关联导航 如果你想了解微服务/云原生等分布式系统的应用实践,可以参见;如果你想了解数据库相关,可以参见;如果你想了解虚拟化与云计算相关,可以参见;如果你想了解Linux与操作系统相关,可以参见 。 关于 版权及更多|延伸阅读 所有文章,欢迎转载,注明版权。您还可以主页浏览包含知识体系,编程语言,软件工程,模式与架构,Web与大前端,服务端开发实践与工程架构,多元化基础架构,人工智能与深度学习,产品运营与创业等多类目的书籍
2021-03-11 15:06:51 277KB 系统开源
1
简单博客 使用Zurb Foundation响应框架的简单HTML博客模板。
2021-03-09 14:06:17 1.23MB CSS
1
SistemasDistribuídos Enunciado do Projeto Sauron 帕拉esclarecimento德dúvidas,contactar ,preferencialmenteatravés做。
2021-03-08 20:05:32 125KB
1
分布式系统-原理与范型(第2版) 分布式系统-原理与范型(第2版) 分布式系统-原理与范型(第2版) 分布式系统-原理与范型(第2版)
2021-03-06 19:41:20 54.46MB 分布式系统
1