0

Есть следующий тест:

@Test(timeout = 15)
public void test() throws Exception {
    AesCrypt aes = new AesCrypt("password");

    String crypted = aes.encrypt("Test string");
    Assert.assertEquals("Test string", aes.decrypt(crypted));
}

По идее, он должен проваливаться, если время выполнения превысит 15ms. В тоже время, как видно на скриншоте, тест выполнялся 23ms, но всё равно считается пройденным.

Из-за чего так?

a busy cat

14
  • А что вы хотите протестировать? Попробуйте запустить тест вне IDE. 13 янв 2017 в 22:27
  • @Mikhail время выполнения. Или я неправильно понял ваш вопрос?
    – Evgeniy
    13 янв 2017 в 22:29
  • Обычно в юнит-тестах таймаут служит для предотвращения зависания тестов. Производительность юнит-тестами не проверяют. В чем цель данного теста? 13 янв 2017 в 22:32
  • @Mikhail одна из целей - как раз замерять производительность. Но почему для этого нельзя использовать JUnit?
    – Evgeniy
    13 янв 2017 в 22:34
  • JUnit - это не benchmark фреймворк. Использовать JUnit в этом качестве нельзя. Хотите измерять производительность возьмите, например jmh 13 янв 2017 в 22:38

2 ответа 2

2

Использование @Test(timeout = 15) не является потокобезопасным, использование может привести к неправильным результатом. Используйте следующий код.

public class Test {
    @Rule
    public Timeout globalTimeout= new Timeout(9);

    @org.junit.Test()
    public void test() throws InterruptedException {
        Thread.sleep(8);
    }

    @org.junit.Test()
    public void test2() throws InterruptedException {
        Thread.sleep(10);
    }

}

вывод

org.junit.runners.model.TestTimedOutException: test timed out after 9 milliseconds

at java.lang.Thread.sleep(Native Method)
at Test.test2(Test.java:22)
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)
at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
at java.lang.reflect.Method.invoke(Method.java:497)
at org.junit.runners.model.FrameworkMethod$1.runReflectiveCall(FrameworkMethod.java:50)
at org.junit.internal.runners.model.ReflectiveCallable.run(ReflectiveCallable.java:12)
at org.junit.runners.model.FrameworkMethod.invokeExplosively(FrameworkMethod.java:47)
at org.junit.internal.runners.statements.InvokeMethod.evaluate(InvokeMethod.java:17)
at org.junit.internal.runners.statements.FailOnTimeout$CallableStatement.call(FailOnTimeout.java:298)
at org.junit.internal.runners.statements.FailOnTimeout$CallableStatement.call(FailOnTimeout.java:292)
at java.util.concurrent.FutureTask.run(FutureTask.java:266)
at java.lang.Thread.run(Thread.java:745)

Такой подход позволяет отловить даже 1 миллисекунду.

Также в jUnit5 можно использовать

    assertTimeoutPreemptively(ofSeconds(15), () -> {
        // This method takes 20 seconds to run
        myMethod();
    } , () -> "myMethod() method took more than 15 seconds and was aborted.");
0

Запустите тест вне IDE и перед запуском теста выполните очистку (clean).

6
  • Можете, пожалуйста, описать как это сделать?
    – Evgeniy
    13 янв 2017 в 23:05
  • что именно описать? какую систему сборки вы используете? maven? gradle? 13 янв 2017 в 23:12
  • Как запустить тест вне IDE и как сделать очистку. Сборщик никакой не использую.
    – Evgeniy
    13 янв 2017 в 23:13
  • А какую IDE используете? И какой тип проекта выбрали? 13 янв 2017 в 23:17
  • IntelIiJ IDEA, проект Kotlin(Java)
    – Evgeniy
    13 янв 2017 в 23:19

Ваш ответ

By clicking “Отправить ответ”, you agree to our terms of service and acknowledge you have read our privacy policy.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.