上传者: 42134285
|
上传时间: 2022-03-14 22:25:54
|
文件大小: 3.31MB
|
文件类型: -
就业市场分析
基于大数据技术的就业市场分析
该项目通过使用公开可用的纽约市开放数据数据集进行预测,探索纽约市就业市场的高薪工作技能和薪水。 许多不同的参数和非参数模型已被证明可以在某些数据集上达到良好的精度水平。
• 项目探讨了高薪工作技能和薪水与工作经验的关系• 从开放数据集中收集数据并解析、标记化、过滤数据• 编写了在 Hadoop 中处理数据的 Map 和 reduce 函数• 在本地和 Amazon EMR 上测试和运行