基于Spark的交互式数据预处理系统
高质量的决策依赖于高质量的数据,数据预处理是数据挖掘至关重要的环节.传统的数据预处理系统并不能很好的适用于大数据环境,企业现阶段主要使用Hadoop/Hive对海量数据进行预处理,但普遍存在耗时长、效率低、无交互等问题.提出了一种基于Spark的交互式数据预处理系统,系统提供一套通用的数据预处理组件,并支持组件的扩展,数据以电子表格的形式展现,系统记录用户的处理过程并支持撤销重做.本文从数据模型、数据预处理操作、交互式执行引擎以及交互式前端四个方面描述了系统架构.最后使用医疗脑卒中的真实数据对系统进行验证,实验结果表明,系统能够在大数据场景下满足交互式处理需求.
文件下载
评论信息
-
-
-
.破晓. :还好还好还好2019-01-23 -
其他资源
- MMC pscad建模
- 拔河游戏机-课程设计报告
- 多页TIF转PDF【JAVA】
- C++网络编程实例文件之第十一章 防火墙的设计与实现
- 基于51单片机的MLX90614红外测温仪实验指导书（含源代码）
- 基于词林和知网的词语相似度计算python源代码--最新算法
- 数据结构课程设计——地铁建设问题（附源码）
- WinRadius破解版
- 老外写的CDMA rake 接收机 MATLAB程序，还有笔记说明
- mqtt android使用源码
- 快速K-均值(kmeans)聚类图像分割算法源代码
- AutoGreen：适用于GitHub的Auto Green-源码
- java+GUI界面的企业工资管理系统
- mybatis+spring+springmvc+easyui做的一个登陆，增删改的项目实例
- spring+springmvc+mybatis搭建的一个酒店管理系统附带mysql数据库
- 普中51单片机开发攻略--A2.pdf
- ae插件TrapcodeParticular
- 21点小游戏（黑杰克） java实现
- 校园兼职招聘程序
- 硅谷之火，禁书
- NTFS数据恢复的c++类代码
- 微机原理第四版-课后答案
- TDPlanning2.3
- 职工管理系统职工管理系统.zip
- 低通滤波器参数计算器
免责申明
【只为小站】的资源来自网友分享，仅供学习研究，请务必在下载后24小时内给予删除，不得用于其他任何用途，否则后果自负。基于互联网的特殊性，【只为小站】 无法对用户传输的作品、信息、内容的权属或合法性、合规性、真实性、科学性、完整权、有效性等进行实质审查；无论 【只为小站】 经营者是否已进行审查，用户均应自行承担因其传输的作品、信息、内容而可能或已经产生的侵权或权属纠纷等法律责任。
本站所有资源不代表本站的观点或立场，基于网友分享，根据中国法律《信息网络传播权保护条例》第二十二条之规定，若资源存在侵权或相关问题请联系本站客服人员，zhiweidada#qq.com，请把#换成@，本站将给予最大的支持与配合，做到及时反馈和处理。关于更多版权及免责申明参见 版权及免责申明
本站所有资源不代表本站的观点或立场，基于网友分享，根据中国法律《信息网络传播权保护条例》第二十二条之规定，若资源存在侵权或相关问题请联系本站客服人员，zhiweidada#qq.com，请把#换成@，本站将给予最大的支持与配合，做到及时反馈和处理。关于更多版权及免责申明参见 版权及免责申明