yarn-auditlog-parser Yarn的hdfs-audit.log的日志文件解析,从ip,用户名,时间段维度对hdfs的qps量进行统计 原理介绍 此工具用于分析hdfs-audit日志文件中的hdfs请求,比如下面是一条完整的记录 2015-09-09 05:29:54,727 INFO FSNamesystem.audit: allowed=true ugi=data (auth:SIMPLE) ip=/192.128.10.15 cmd=open src=/user/data/.staging/job_1441718170682_2949/job.jar dst=null perm=null proto=rpc 解析程序主要抽取出其中的时间,ugi用户信息,ip地址信息,cmd操作命令信息,然后进行各个维度统计. 下面是几种使用方法 1.用户分时段统计 java -j
2022-01-28 10:10:05 7KB Java
1
该课题为基于matlab的教室人数统计系统。带有一个人机交互界面,输入班级人员的图片(正脸),进行肤色部分的提取,结合形态学去除干扰区域,分割人脸并且进行数数。该个体可以进行二次开发,也就是将识别到的人脸分别进行识别出张三李四王五,从而进行多人的人脸图像考勤系统,或者是门禁识别系统。本设计带有人机交互界面,适合具有C语言二级的人员进行拓展学习。
2022-01-24 14:03:56 872KB matlab c语言 开发语言 后端
1
该课题为基于Matlab人脸肤色定理的教师人数统计。输入图片,将图片上的每一个像素点全部分离成rgb三个通道。三个通道的灰度值满足一定的比例关系,则为肤色区域。再结合形态学原理去除干扰区域,从而得到精准的人脸。将得到的人脸显示在人际交互界面的axes里面。
2022-01-24 14:03:55 852KB matlab 交互 开发语言
1
冲浪分析 概述 在此项目中,我们使用Jupyter Notebook进行了瓦胡岛的天气分析,并浏览了存储在SQLite数据库中的Weather Data。我们生成了摘要,并使用Flask在网页中显示结果。我们还完成了挑战中的两个摘要统计。 挑战中完成了以下任务。 确定6月的摘要统计信息。 确定12月的摘要统计信息。 资源 数据源:hawaii.sqlite 软体:Python 3.7.6,Visual Studio Code,1.52.1 结果 表1列出了6月份的摘要统计信息,表2列出了12月份的摘要统计信息。 表1 6月份摘要统计 表2十二月汇总统计 我们的结果表明: 6月的温度观测数大于12月的温度观测数。 6月有1700次总温度观测值,12月有1517次总温度观测值。 6月的平均气温高于12月。 6月的平均气温为74.94,12月的平均气温为71.04。差异为3.9。 12月的
2021-12-29 23:04:16 359KB JupyterNotebook
1
该课题为基于Matlab人脸肤色定理的教师人数统计。输入图片,将图片上的每一个像素点全部分离成rgb三个通道。三个通道的灰度值满足一定的比例关系,则为肤色区域。再结合形态学原理去除干扰区域,从而得到精准的人脸。将得到的人脸显示在人际交互界面的axes里面。
2021-12-29 21:16:07 851KB matlab
1
交通意外 交通事故的简单统计
2021-12-23 08:33:02 13KB
1
统计代码调用方法: 直接登陆 → 管理面板 → 获取代码 → 复制获取 帐号:admin 密码:admin 登陆后及时修改 2018/8 4.3版 更新了最新的IP数据库 新增世界国家名称查询,世界各地时差查询 优化总体数据,及相关查询 代码进一步精密简洁
1
《统计思维-程序员数学之概率统计》完整源码,全部用Python代码实现
2021-12-16 13:21:05 42.41MB python 程序员数学 概率统计
1
vb成绩统计源码 参考使用!!
2021-11-27 19:17:55 768KB vb 成绩统计
1