由于Spark基于内存计算的特性，集群的任何资源都可以成为Spark程序的瓶颈:CPU，网络带宽，或者内存。通常，如果内存容得下数据，瓶颈会是网络带宽。不过有时你同样需要做些优化，例如将RDD以序列化到磁盘，来降低内存占用。
本教程通过源码引导读者深入理解Spark的集群部署的内部机制、Spark内部调度的机制、Executor的内部机制、Shuffle的内部机制，进而讲述Tungsten的内部机制，让学员知其然知其所以然。教程的后部分，是任何Spark应用者都很好关注的Spark性能调优的内容。
2021-07-04 23:26:11
6.07MB
1
以实战为索引，手把手进行教学，逐步深入的讲解docker应用，包括部署 docker 容器虚拟化平台、配置 docker 镜像加速地址、镜像制作和发布方法，端口映射、命名和重命名、创建实例指定主机名、资源配额控制（cpu、内存、IO）、数据映射、docker静态IP 配置及基于docker容器搭建私有云存储网盘和搭建docker镜像私有仓库及使用。
2021-06-22 11:05:20
446KB
1
【为什么学习数据结构与算法】 程序=数据结构+算法。数据结构和算法是程序的基础，没有系统地学习过数据结构和算法的程序员只能称作是coder，知道我们写的代码使用了什么数据结构，它的特征是什么。知道解决某些问题是用的何种算法才会从coder晋升为工程师。另外，大厂面试数据结构和算法也是我们绕不过去的一个门槛。这部分恰好又不是突击能够解决的知识储备，所以很有必要系统地学习一下数据结构和算法了
【推荐您学习这门课程的原因】1、图解数据结构与算法：拒绝抽象枯燥的学习，本课程采用动画演示的形式，让您在动画中掌握算法的底层原理。下面是课程中几个动画的演示效果：
2、实战2020大厂算法面试题：解析大厂算法面试题，分析其中算法原理，并动手实操，让大家通关面试最后一道题。
3、全面、系统化的课程设计：系统化讲解数据结构与算法，让你快速梳理整个算法知识体系，掌握算法的核心思想。
【主讲讲师】
孙玖祥：
8年互联网开发经验，3年教学经验；
擅长JAVA技术栈、高并发高可用伸缩式微服务架构；
曾多次参与大型银行和互联网公司核心系统的架构设计和开发；
丰富的教学和就业经验，所带毕业学员逾千
2021-06-22 11:05:19
15.32MB
1
Jenkins是一款开源?CI&CD?软件，用于自动化各种任务，包括构建、测试和部署软件。?提供超过1000个插件来满足任何项目的需要。
该课程主要讲解了以下内容：
?1. Jenkins 的安装及配置
?2. Jenkins 与多种集成工具的集成
?3. 使用传统web 页面的持续集成部署
?4. 使用脚本式管道的持续集成部署
2021-06-22 11:05:07
9.63MB
1
智慧水利是运用物联网、云计算、大数据等新一代信息通信技术，促进水利规划、工程建设、运行管理和社会服务的智慧化，提升水资源的利用效率和水旱灾害的防御能力，改善水环境和水生态，保障国家水安全和经济社会的可持续发展。
2021-06-22 09:01:52
7.08MB