Posso inviare un lavoro oozie con più file di configurazione?

Question

Dal Oozie CLI voglio fare qualcosa di simile:

oozie job -oozie http://host:port/oozie -config jobConfig.properties, baseConfig.properties -submit 

Ho un sacco di diversi posti di lavoro che sto correndo in cui una parte del file .properties è identico. Mi piacerebbe essere in grado di spostare quella porzione duplicata in un singolo file baseConfig.properties e combinarla con la parte specifica del lavoro quando invio il lavoro.

Answer 1

Se il numero di proprietà override è di piccole dimensioni, si può semplicemente fare riferimento al file di configurazione di base, e quindi utilizzare la notazione -Dprop1=value per ogni proprietà che si desidera personalizzare.

altrimenti penso di avere due (forse tre) alternative (come non si può passare più opzioni di configurazione al client OOZIE corrente):

1. creare uno script che concatena i file delle proprietà specifiche di base e di posti di lavoro insieme, e l'oozie corsa con il nome del file unito
2. Utilizzando la fonte da OozieCLI come punto di partenza, scrivere una classe di estensione in grado di gestire un valore CSV per l'opzione -config, o in grado di gestire più -config istanze di argomenti
3. Sei in grado di spostare gli attributi comuni in file jobXml statici per ogni azione, quindi sarà necessario un solo file di configurazione per le effettive differenze tra le esecuzioni del lavoro.

Answer 2

ho potuto mettere i valori di default nel file di configurazione-default.xml come desribed qui: http://oozie.apache.org/docs/3.3.2/WorkflowFunctionalSpec.html#a4.1_Workflow_Job_Properties_or_Parameters

Funziona nella maggior parte dei casi.