HadoopDBGlobalHasher的参数问题

hadoop jar hadoopdb.jar edu.yale.cs.hadoopdb.dataloader.GlobalHasher input_path output_path 10 \| 0上面的命令是将数据切分到10个分区内&＃xff0c;即集群中的10个结点&＃xff0c;最后的参数 0是指对每行记录的第一个字段进行hash&＃xff0c;可将其视作键值。

下面是edu.yale.cs.hadoopdb.dataloader.GlobalHasher类中的一段代码&＃xff0c;可以看到

该全局hasher要求输入四个参数

//输入 目录FileInputFormat.setInputPaths(conf, new Path(args[0]));// OUTPUT propertiesPath outputPath &＃61; new Path(args[1]);HDFSUtil.deletePath(outputPath);FileOutputFormat.setOutputPath(conf, outputPath);//分区数量int partNo &＃61; Integer.parseInt(args[2]);conf.setNumReduceTasks(partNo);//分界符conf.set(DELIMITER_PARAM, args[3]);//要hash的字段位置int hashFieldPos &＃61; Integer.parseInt(args[4]);conf.setInt(HASH_FIELD_POS_PARAM, hashFieldPos);