大数据施工的整体方案
主要内容如下：
1.当前系统分析
2.离线&在线数据收集（ETL，hadoop, hive等）
3.数据分析（R）
4.数据挖掘（机器学习算法）
5.分析结果展示
2021-10-23 22:07:33
16.64MB
1
etl-kettle-web
etl, kettle, web,
1、参考了：
2、基于该项目，将kettle的web网页版本升级为springboot工程。
3、欢迎有兴趣的小伙伴，一起讲前端改造成vue.js
4、有兴趣的也可以直接修改并提交代码，或联系qq:406419768
2021-10-22 10:40:45
4.3MB
1
该包可以启动spark的thriftserver。可以解决报错failed load org.apache.spark.sql.hive.thriftserver.HiveThriftServer2的报错。
2021-10-21 21:01:57
200.37MB
1
数据网
DataX Web是在DataX之上开发的分布式数据同步工具，提供简单易用的操作界面，减少用户使用DataX的学习成本，更改任务配置时间，避免配置过程中出错。用户可以通过页面选择数据源即可创建数据同步任务，支持RDBMS，Hive，HBase，ClickHouse，MongoDB等数据源，RDBMS数据源可批量创建数据同步任务，支持实时查看数据同步进度及日志并提供终止同步功能，集成并二次开发xxl -job可根据时间，自增主键增量同步数据。
任务“执行器”支持部署，支持执行器多字节路由策略选择，支持超时控制，失败重试，失败中断，任务依赖，执行器CPU。内存。负载的监控等等。后续提供更多的数据源支持，数据转换UDF，表结构同步，数据同步血缘等更复杂的业务场景。
架构图：
系统要求
语言：Java 8（jdk版本建议1.8.201以上） Python2.7（支持Python3需要修改
2021-10-20 11:47:29
19.53MB
1