mapreduce_大数据之Hadoop(MapReduce)：切片与MapTask并行度决定机制

MapTask的并行度决定Map阶段的任务处理并发度&＃xff0c;进而影响到整个Job的处理速度。
思考&＃xff1a;1G的数据&＃xff0c;启动8个MapTask&＃xff0c;可以提高集群的并发处理能力。那么1K的数据&＃xff0c;也启动8个MapTask&＃xff0c;会提高集群性能吗&＃xff1f;MapTask并行任务是否越多越好呢&＃xff1f;哪些因素影响了MapTask并行度&＃xff1f;

数据块&＃xff1a;Block是HDFS物理上把数据分成一块一块。
数据切片&＃xff1a;数据切片只是在逻辑上对输入进行分片&＃xff0c;并不会在磁盘上将其切分成片进行存储。