centos7部署单机Hadoop2.8.5

MapReduce说白了就是在处理数据时集群中所有电脑并行运算.map指拆分拆分后分发到各个datanode并进行并行计算reduce指合并将datanode计算的结果进行合并.例如利用HDFS计算123456hadoop集群有ABC三台电脑map操作将12分给电脑A34分给电脑B56分给电脑C然后三台电脑结果分别为3711reduce操作将计算3711得到最后结果21.例如利用HDFS查找表test中ID最大的hadoop集群有ABC三台电脑map操作将分别计算电脑A中id最大值电脑B中id最大值电脑C中id最大值假设三台电脑的id最大值分别为123reduce操作将计算123中最大值得到最后结果3.