Переписал тесты на Junit5 (ранее было Junit4 и там порядка, если я правильно понял нет совсем). Но всё равно Order игнорируется. В классе теперь описание задано в таком виде:
import org.junit.jupiter.api.*;
import org.openqa.selenium.By;
import org.openqa.selenium.Point;
import org.openqa.selenium.WebDriver;
import org.openqa.selenium.chrome.ChromeOptions;
import org.openqa.selenium.remote.RemoteWebDriver;
import java.net.URL;
import java.util.concurrent.TimeUnit;
@TestMethodOrder(MethodOrderer.OrderAnnotation.class)
public class UserStoryTest {
@BeforeEach
@Test
@Order(1)
@Test
@Order(2)
...
@Test
@Order(8)
@AfterEach
результат выполнения в совершенно ином порядке