mapreduce编程实例(1)-统计词频-附件资源

完整全套资源下载地址：https://download.csdn.net/download/qq_27595745/63399560 【完整课程列表】 Hadoop实验操作手册-1 共20页.pdf Hadoop实验操作手册-2 共73页.pdf 完整版 上海财经大学MEM课程 大数据与云计算技术教程 大数据处理平台和技术 1-大数据处理平台与技术概述（共63页）.pdf 完整版 上海财经大学MEM课程 大数据与云计算技术教程 大数据处理平台和技术 2-HDFS-大数据文件系统（共45页）.pdf 完整版 上海财经大学MEM课程 大数据与云计算技术教程 大数据处理平台和技术 3-MapReduce—并行计算（共69页）.pdf 完整版 上海财经大学MEM课程 大数据与云计算技术教程 大数据处理平台和技术 4-HBase—Hadoop数据库（共55页）.pdf 完整版 上海财经大学MEM课程 大数据与云计算技术教程 大数据处理平台和技术 5-Hive—数据仓库（共51页）.pdf 完整版 上海财经大学MEM课程 大数据与云计算技术教程 大数据处理平台和技术 6-Mahout --- 大数据挖掘技术（共38页）.pdf 完整版 上海财经大学MEM课程 大数据与云计算技术教程 大数据处理平台和技术 7- Hadoop其他生态系统（共29页）.pdf 完整版 上海财经大学MEM课程 大数据与云计算技术教程 大数据处理平台和技术 8-大数据案例（共49页）.pdf 完整版 上海财经大学MEM课程 大数据与云计算技术教程 大数据处理平台和技术 9- 大数据最新进展（共32页）.pdf 完整版 上海财经大学MEM课程 大数据与云计算技术教程 大数据处理平台和技术 10-大数据课程总结（共9页）.pdf

整理了MapRduce的几个入门案例，提供源数据 案例分为： 1、统计单词的个数 2、设置分区 3、统计json数据 4、统计并排序 5、mapReducer找朋友的使用

现有如下数据: A:B,C,D,F,E,O B:A,C,E,K C:F,A,D,I D:A,E,F,L E:B,C,D,M,L F:A,B,C,D,E,O,M G:A,C,D,E,F H:A,C,D,E,O I:A,O J:B,O K:A,C,D L:D,E,F M:E,F,G O:A,H,I,J 求哪些人两两之间有共同好友，及共同好友有哪些人？ 思路: 第一步:只求哪些人两两之间有某个共同好友 A:B,C,D,F,E,O for(好友列表){ context.write(“好友”,“用户”)； } A-B C A-B E A-C F … package com.bigdata.map

里面包含了该demo所要用的text文件及我自己跑出来的结果文件，还包括完整代码的Maven文件

文档倒排索引的MapReduce程序设计与实现

水果计数 通过MapReduce程序从输入文件计算“苹果”，“香蕉”和“葡萄”的出现频率。 地图缩小 MapReduce是一种编程模型和相关的实现，用于在集群上使用并行的分布式算法来处理和生成大数据集。 一个MapReduce程序包括： 映射过程：执行过滤和排序。 减少方法：执行摘要操作。 驱动程序类驱动程序类是控制程序执行的主要类。 在这里，我们创建一个Job对象，并设置程序中使用的驱动程序，映射程序和reducer类。 Mapper类MapReduce程序的任何mapper类都可以扩展抽象Mapper类。 然后，我们必须重写map函数，该函数采用键值对并引用Context变量，该变量由reduce函数处理。 Reducer类MapReduce程序的Reducer类扩展了抽象类Reducer。 该方法将在此类中重写。

mapreduce的基本介绍，让您了解mapreduce的机制

谷歌BigTable GFS MapReduce三大论文中文版

基于MapReduce的Apriori算法并行化改进，包含改进思路与代码实现。该文档提供了详细的设计思路和方法，具有一定的借鉴意义，互相学习，互相进步！