kafka介绍，介绍kafka的原理，使用，案例和引用库调用，基于大数量的场景下的消息队列切换，作为内部资料培训现在拿出来分享

密码：gg 1.1 目的 本文结合轻量化数据资源平台需求文档，及数据资源平台V1.1概要设计文档为基础，旨在描述轻量化数据资源平台的使用场景、运行环境、数据源以及各模块的组成、框架设计、模块的处理流程。 本文档的预期读者为：项目经理、设计工程师、研发工程师、工程师以及数据工程师。 1.2 背景 数据资源平台提供将物联网感知设备的数据、各行业平台、第三方系统的物联网数据、业务数据进行统一汇聚；实现原始数据汇聚管理、数据治理、并基于整体数据提供数据服务的能力。数据资源平台首先面对、提供应用服务的场景为平安城市项目，该解决方案面对海量的物联网感知和用户业务数据，需要数据资源平台提供大容量的存储能力。 在面对教育、小型社区、零售等小数据量的应用场景下，数据资源平台显得不那么合适。该解决方案对用户和实际场景来说，成本过高。因此，针对小型数据场景，需要推出轻量化的数据资源平台。 密码：gg