Hadoop: la clave y el valor están separados por tabulaciones en el archivo de salida. ¿cómo hacerlo separados por punto y coma?

Question

Creo que el título ya está explicando mi pregunta. Me gustaría cambiar

key (tab space) value 

en

key;value 

en todos los archivos de salida de los reductores están generando desde la salida de creadores de mapas.

No pude encontrar buena documentación sobre esto usando Google. ¿Alguien puede dar una fracción de código sobre cómo lograr esto?

Answer 1

Establecer la propiedad de configuración mapred.textoutputformat.separator a ";"

Answer 2

puede utilizar la propiedad "KEY_VALUE_SEPERATOR" de "KeyValueLineRecordReader" para especificar un separador de su elección.

Answer 3

En la falta de una mejor documentación, esto es lo que he recogido:

setTextOutputFormatSeparator(final Job job, final String separator){ 
      final Configuration conf = job.getConfiguration(); //ensure accurate config ref 

      conf.set("mapred.textoutputformat.separator", separator); //Prior to Hadoop 2 (YARN) 
      conf.set("mapreduce.textoutputformat.separator", separator); //Hadoop v2+ (YARN) 
      conf.set("mapreduce.output.textoutputformat.separator", separator); 
      conf.set("mapreduce.output.key.field.separator", separator); 
      conf.set("mapred.textoutputformat.separatorText", separator); // ? 
    }