Test di più host con lo stesso test utilizzando serverspec

Question

La sezione Suggerimenti avanzati del sito Serverspec mostra un esempio di test di host multipli con lo stesso set di test. Ho creato un mio esempio (https://gist.github.com/neilhwatson/81249ad393800a76a8ad), ma ci sono problemi.

Il primo problema è che i test si fermano al primo errore piuttosto che procedere attraverso il lotto e mantenere un conteggio. Il secondo è che l'output di errore non indica su quale host si è verificato l'errore. Cosa posso fare per risolvere questi problemi e produrre un rapporto finale per tutti gli host?

Answer 1

Per il primo numero, per impostazione predefinita, ServerSpec eseguirà tutti i test. Tuttavia, poiché si dispone di un ciclo che esegue un'attività Rake per ciascun ambiente, il primo ambiente in cui si verifica un errore causa il fallimento dell'attività e pertanto viene sollevata un'eccezione e il resto delle attività non viene eseguito.

Ho forked il tuo succo e aggiornato il Rake task to surround it with a begin/rescue.

... 
begin 
    desc "Run serverspec to #{host}" 
    RSpec::Core::RakeTask.new(host) do |t| 
    ENV['TARGET_HOST'] = host 
    t.pattern = "spec/base,cfengine3/*_spec.rb" 
    end 
rescue 
end 
... 

Per il secondo problema, non sembra ServerSpec emette quale ambiente i test sono in esecuzione. Ma dal momento che il Gist aggiornato mostra che l'host impostato nel spec_helper.rb possiamo usare quello per add an RSpec configuration che configura un after(:each) e genera solo gli errori host. Le modifiche al codice in questione sono in un fork of the gist, ma in fondo ti basta il frammento qui sotto nella tua spec_helper.rb:

RSpec.configure do |c| 
    c.after(:each) do |example| 
    if example.exception 
     puts "Failed on #{host_run_on}" 
    end 
    end 
end