좋아, 아마도 당신은 @BeforeClass 또는 그와 비슷한 것에 지정할 수있는 쉬운 속성을 원할 것이라고 알고 있지만, 구현되기를 기다려야 할 수도 있습니다. 적어도 나는 그것을 찾을 수 없었다.
다음은 추악한 것처럼 보이지만 적어도 소규모로 작업을 수행한다고 생각하지만 더 복잡한 시나리오에서 어떻게 작동하는지 볼 수 있습니다. 더 많은 시간이 걸리면 더 나은 것으로 개선 될 수 있습니다.
좋아, 그래서 당신과 비슷한 테스트 클래스를 만들었습니다.
public class RetryTest extends TestConfig {
public class RetryTest extends TestConfig {
Assertion assertion = new Assertion();
@Test( enabled = true,
groups = { "retryTest" },
retryAnalyzer = TestRetry.class,
ignoreMissingDependencies = false)
public void testStep_1() {
}
@Test( enabled = true,
groups = { "retryTest" },
retryAnalyzer = TestRetry.class,
dependsOnMethods = "testStep_1",
ignoreMissingDependencies = false)
public void testStep_2() {
if (fail) assertion.fail("This will fail the first time and not the second.");
}
@Test( enabled = true,
groups = { "retryTest" },
retryAnalyzer = TestRetry.class,
dependsOnMethods = "testStep_2",
ignoreMissingDependencies = false)
public void testStep_3() {
}
@Test( enabled = true)
public void testStep_4() {
assertion.fail("This should leave a failure in the end.");
}
}
나는 Listener이것을 다른 클래스로 확장하고 싶을 경우를 대비하여 수퍼 클래스에 있지만 테스트 클래스에서 리스너를 설정할 수도 있습니다.
@Listeners(TestListener.class)
public class TestConfig {
protected static boolean retrySuccessful = false;
protected static boolean fail = true;
}
위의 4 가지 방법 중 3 가지에는 RetryAnalyzer. 나는 testStep_4그 다음에 내가하고있는 일이 나머지 처형에 지장을 미치지 않도록하기 위해 그것을 남기지 않았습니다. 말했다는 RetryAnalyzer것입니다 실제로 재시도 (메서드 반환합니다 false,하지만 다음을 수행합니다) :
public class TestRetry implements IRetryAnalyzer {
public static TestNG retryTestNG = null;
@Override
public boolean retry(ITestResult result) {
Class[] classes = {CreateBookingTest.class};
TestNG retryTestNG = new TestNG();
retryTestNG.setDefaultTestName("RETRY TEST");
retryTestNG.setTestClasses(classes);
retryTestNG.setGroups("retryTest");
retryTestNG.addListener(new RetryAnnotationTransformer());
retryTestNG.addListener(new TestListenerRetry());
retryTestNG.run();
return false;
}
}
이것은 당신의 실행 내부에 실행을 만듭니다. 보고서를 엉망으로 만들지 않으며 완료되면 기본 실행을 계속합니다. 그러나 해당 그룹 내에서 방법을 "다시 시도"합니다.
예, 알아요 이것은 당신이 영원한 루프에서 영원히 테스트 스위트를 실행할 것이라는 것을 의미합니다. 그 이유는 RetryAnnotationTransformer. 여기에서 두 번째 테스트 실행에서 RetryAnalyzer를 제거합니다.
public class RetryAnnotationTransformer extends TestConfig implements IAnnotationTransformer {
@SuppressWarnings("rawtypes")
@Override
public void transform(ITestAnnotation annotation, Class testClass, Constructor testConstructor, Method testMethod) {
fail = false; // This is just for debugging. Will make testStep_2 pass in the second run.
annotation.setRetryAnalyzer(null);
}
}
이제 마지막 문제가 있습니다. 우리의 원래 테스트 스위트는 "재시도"실행에 대해 아무것도 모른다. 이곳이 정말 추악한 곳입니다. 무슨 일이 있었는지 리포터에게 알려줘야합니다. 그리고 이것이 여러분이 개선하도록 격려하는 부분입니다. 더 좋은 일을 할 시간이 없지만 가능한 경우 편집 할 수 있습니다.
먼저 retryTestNG 실행이 성공적인지 알아야합니다. 이 작업을 더 잘하는 방법은 백만 가지가 있지만 지금은 효과가 있습니다. 재시도 실행을 위해 리스너를 설정했습니다. TestRetry위에서 볼 수 있으며 다음과 같이 구성됩니다.
public class TestListenerRetry extends TestConfig implements ITestListener {
(...)
@Override
public void onFinish(ITestContext context) {
if (context.getFailedTests().size()==0 && context.getSkippedTests().size()==0) {
successful = true;
}
}
}
이제 수퍼 클래스에서 위에서 본 메인 스위트의 리스너는 TestConfig실행이 발생했는지와 제대로 진행되었는지 확인하고 보고서를 업데이트합니다.
public class TestListener extends TestConfig implements ITestListener , ISuiteListener {
(...)
@Override
public void onFinish(ISuite suite) {
if (TestRetry.retryTestNG != null) {
for (ITestNGMethod iTestNGMethod : suite.getMethodsByGroups().get("retryTest")) {
Collection<ISuiteResult> iSuiteResultList = suite.getResults().values();
for (ISuiteResult iSuiteResult : iSuiteResultList) {
ITestContext iTestContext = iSuiteResult.getTestContext();
List<ITestResult> unsuccessfulMethods = new ArrayList<ITestResult>();
for (ITestResult iTestResult : iTestContext.getFailedTests().getAllResults()) {
if (iTestResult.getMethod().equals(iTestNGMethod)) {
iTestContext.getFailedTests().removeResult(iTestResult);
unsuccessfulMethods.add(iTestResult);
}
}
for (ITestResult iTestResult : iTestContext.getSkippedTests().getAllResults()) {
if (iTestResult.getMethod().equals(iTestNGMethod)) {
iTestContext.getSkippedTests().removeResult(iTestResult);
unsuccessfulMethods.add(iTestResult);
}
}
for (ITestResult iTestResult : unsuccessfulMethods) {
iTestResult.setStatus(1);
iTestContext.getPassedTests().addResult(iTestResult, iTestResult.getMethod());
}
}
}
}
}
}
보고서에는 이제 3 번의 테스트 통과 (재 시도 됨)와 다른 3 가지 테스트에 포함되지 않아 실패한 테스트가 표시됩니다.
나는 그것이 당신이 찾고있는 것이 아니라는 것을 알고 있지만 TestNG에 기능을 추가 할 때까지 당신을 도와줍니다.