Perché un test junit viene saltato a causa di un'ipotesi che l'errore non viene segnalato come saltato?

Question

Uso le assunzioni di junit per decidere se eseguire o meno un test.
Test in cui l'ipotesi non riesce sono ignored/skipped dal framework junit.

Mi chiedo perché i test saltati non vengono segnalati come "saltati"?

Si prega di dare un'occhiata all'esempio:

import static org.junit.Assert.fail; 
import org.junit.Assume; 
import org.junit.Test; 

public class AssumptionTest { 

    @Test 
    public void skipAssumptionFailureTest() { 
     Assume.assumeTrue("foo".equals("bar")); 
     fail("This should not be reached!"); 
    } 
} 

esecuzione di questo test in una risultati del progetto Maven in:

Running AssumptionTest 
Tests run: 1, Failures: 0, Errors: 0, Skipped: 0, Time elapsed: 0.015 sec 

io preferirei avere questa prova segnalato come 'saltato'. C'è qualche possibilità di ottenere questo?

(JUnit 4.8.1; Maven 2.2.1; java 1.6.0_21)

Answer 1

Non si può fare questo out-of-the-box come l'unico modo per saltare i test è con il @Ignore annotazione. Tuttavia, ho trovato un blog post che potrebbe essere proprio quello che stai cercando:

Answer 2

Spring introduce un'altra variante di un'annotazione Ignore, una che è in grado di decidere in fase di esecuzione se ignorare un test: @IfProfileValue. In combinazione con un utente fornito ProfileValueSource in un @ProfileValueSourceConfiguration, è possibile eseguire alcuni trucchi limitati.

Vedere Spring Test Documentation.

Ma non è lo stesso che essere in grado di eseguire qualche codice di test e nel mezzo del metodo di test decidere di ignorare il test, come è possibile con le ipotesi.

Answer 3

Mentre le risposte precedenti vanno bene da sole, vorrei rispondere alla domanda "PERCHÉ".

Il problema derivava dal fatto che i test falliti/ignorati erano contati. Quando sono state aggiunte ipotesi, i conteggi usuali sono stati gentilmente infilzati (l'assunzione può IGNORARE i test a metà della corsa).

I corridori di strumenti hanno avuto problemi anche con quello, causando rapporti disordinati. Vedere here for Surefire dev conversation with JUnit people e here for related Eclipse bug.

Al momento questo non è un problema in Maven, e non dovrebbe essere nei nuovi Eclipse. Io uso STS in base a eclipse.buildId = 2.9.2.201205071000-RELEASE e il problema persiste.

MODIFICA: i collegamenti di tipo di riferimento non hanno funzionato.