每天都有着大量的用户关注各类新闻，特别是随着各种网络通信技术的发展，网络应用的普及使得每时每刻都有着大量的人们通过网络进行各类新闻的搜索，产生海量的日志数据。过去使用单机的方式通过 MySQL数据库对这些数据进行存储，但是积累下来的用户日志数据量达到了一定的级别，当一台电脑无法存储这么庞大的数据时，就产生了海量数据的存储问题。如果使用网络文件系统对数据进行分开存储，那么就无法对大量的实时和离线数据进行分析处理，处理结果也无法以一种更加直观的方式进行展示。
为了解决海量新闻日志数据的存储问题，在新闻业务中得到实时的用户搜索内容的排行并进行可视化显示，得到公众关注的重点，从而达到针对用户关注的重点进行推送、广告的投放、及时消除不良的用户等目的。本文在对以上需求进行调研后，通过Flume日志收集系统对各个服务器中的日志文件进行读取合并，并将数据划分成离线流数据和实时流数据两条路线。离线数据通过Hadoop集群处理、存储，通过Hive完成离线数据处理和分析，并最终通过Hue实现对用户的可视化展示。实时流数据通过Kafka消息队列临时存储，并通过Spark流处理，最终将结果存放在 MySQL数据库中，通过Java程序获取，最终通过Echarts插件在前端对实时数据进行展示。
本文讲述了系统研究的背景、目的和意义。对系统所使用到的相关技术的原理进行了介绍；对系统进行了总体的需求分析并且按照系统实现的功能划分了相关模块；在进行了需求分析后，对系统进行了具体的硬件平台构建以及各个功能模块设计实现，最终完成对用户搜索日志数据的结构化处理和可视化展示。
最后对课题工作进行了总结，并分析了未来系统中可改进的地方。
2021-03-08 17:10:09
2.08MB
1
sTM32系列芯片分为控制器模块，GPRS模块，继电器控制模块，步进电机控制模块等五
2021-03-04 11:02:27
68KB
1
校园食堂订餐系统，是将计算机、通信等现代化技术运用到传统校园食堂服务的新型校园食堂服务方式。
校园食堂订餐系统为了解决以下几个问题：一是疫情期间，学生面临着开学，食堂是学生最聚集的场所之一，食堂订餐系统可以良好的解决学生饮食期间的拥挤等问题；二是让学生健康饮食，减轻目前的大学生吃外卖和不健康食品的问题；三是方便和改善学生的伙食，让学生可以随时随地的选购菜品；四是提高食堂商家的利润，改善商家的销售额。
本文在考虑到以上的问题的基础上，利用大学期间中所学到的的专业知识，独立开发一个基于Spring Boot和vue.js的校园食堂订餐系统。论文首先进行了系统功能的总体设计，使本系统具有以下主要功能：一是具有手机端让学生可以随时随地挑选食堂商家的菜品；二是可以让学生可以提交订单、一定时间范围修改和撤销订单；三是具有线上学生一卡通支付功能；四是对菜品销售情况具有统计功能方便商家查看与统计。
本文系统后台使用Spring Boot新型轻量开发框架，采用基本的B/S的互联网架构，前台技术使用可跨Android、IOS、H5、小程序的uni-app进行开发，使用IDEA的IntelliJ IDEA 2019.3.1 x64和WebStorm 2020.1 x64开发工具实现后台与前台的编码。使用MySQL数据库存储技术进行开发。最后完成了系统测试工作和调试工作，满足了校园食堂订餐系统的要求。
最后，对课题工作进行了总结，并对未来研究工作给予了展望。
2021-03-02 21:36:25
3.32MB
1