大数据是当今的一个热门话题,相信搞JAVA的我们当然不能错过了,尤其是hadoop这个大数据时代的宠儿是属于我们JAVA界的(核心是用JAVA写的)。
看到hadoop,相信一堆概念大家都听得不少了,什么MapReduce,这个就大概解释下:
Map:俗点说就是直接把数据打散,一份数据把它切分成多份小的数据进行处理,这个过程可以称之为Map。
Reduce:有打散当然要有聚合,把处理完的数据再重新合成一个,这个过程称之为Reduce。
这两个操作实际上就是hadoop的核心。hadoop可以不用eclipse插件也可以运行,但当然,对于我们初学的,有个插件肯定好很多,我们可以集中精力先让它跑起来,然后再慢慢去深入研究。
1