Hadoop: chiave e valore sono separati da tabulazione nel file di output. come si fa a separare il punto e virgola?

Question

Penso che il titolo stia già spiegando la mia domanda. Vorrei cambiare

key (tab space) value 

in

key;value 

in tutti i file di output i riduttori stanno generando dall'uscita del mapper.

Non sono riuscito a trovare una buona documentazione su questo utilizzando google. Qualcuno può per favore dare una frazione di codice su come raggiungere questo obiettivo?

Answer 1

Impostare la proprietà di configurazione mapred.textoutputformat.separator a ";"

Answer 2

è possibile utilizzare proprietà "KEY_VALUE_SEPERATOR" di "KeyValueLineRecordReader" per specificare un separatore di vostra scelta.

Answer 3

In mancanza di documentazione migliore, ecco quello che ho raccolto:

setTextOutputFormatSeparator(final Job job, final String separator){ 
      final Configuration conf = job.getConfiguration(); //ensure accurate config ref 

      conf.set("mapred.textoutputformat.separator", separator); //Prior to Hadoop 2 (YARN) 
      conf.set("mapreduce.textoutputformat.separator", separator); //Hadoop v2+ (YARN) 
      conf.set("mapreduce.output.textoutputformat.separator", separator); 
      conf.set("mapreduce.output.key.field.separator", separator); 
      conf.set("mapred.textoutputformat.separatorText", separator); // ? 
    }