Итак, у меня есть набор, что-то вроде этого:
@RunWith(Suite.class)
@Suite.SuiteClasses({TestClass1.class, TestClass2.class, TestClass3.class})
public class TestSuite {
static List<ExtentTest> extentTestList = new ArrayList<>();
@ClassRule
public static ExtentWatcher extentWatcher = new ExtentWatcher() {
@Override
protected void starting(Description description) {
extentTestList.addAll(extentWatcher.getTests());
}
@Override
protected void finished(Description description) {
extentWatcher.flushReports(extentTestList);
}
};
}
Вышеприведенный код работает, но проблема в том, что он приводит к тому, что мой Watcher сообщает результаты Suite, а не отдельные тесты. Кроме того, если тест завершился неудачно, пакет по-прежнему сообщает, что передан. Мой наблюдатель выглядит примерно так:
public class ExtentWatcher extends TestWatcher {
// A little set up to give the report a date in the file name
private DateFormat dateFormat = new SimpleDateFormat("dd-MM-yyyy");
private Date date = new Date();
private String fileDate = dateFormat.format(date);
private String reportName = "./Test_Report_" + fileDate + ".html";
public ExtentReports extent;
ArrayList<ExtentTest> testList = new ArrayList<>();
public ExtentWatcher() {
extent = createReport();
}
// If test passed, watcher will record this with Extent Reports
@Override
protected void succeeded(Description description) {
ExtentTest test = extent.startTest(description.getDisplayName());
test.log(LogStatus.PASS, "Test Run Successful");
testList.add(test);
}
// Likewise in case of failure
@Override
protected void failed(Throwable e, Description description) {
ExtentTest test = extent.startTest(description.getDisplayName());
test.log(LogStatus.FAIL, "Test Failure: " + e.toString());
testList.add(test);
}
/**
* These methods do the legwork - this file is based off of an example I found @ www.kieftsoft.nl/?p=81
* Eventually we can add some screenshot logic here, but just a clean test report and version info will do
*/
private ExtentReports createReport() {
// Create the report - Extent just needs a little config
ExtentReports extent = new ExtentReports(reportName, false);
extent.config().reportName("Test Report: " + fileDate);
return extent;
}
public void flushReports(List<ExtentTest> testList) {
// This ends the test and then sends (flushes) everything to the html document
for(ExtentTest test : testList) extent.endTest(test);
extent.flush();
}
public List<ExtentTest> getTests() {
return testList;
}
}
Этот код хорошо комментируется как @Rule для отдельного теста (с отчетом для каждого теста индивидуально, не желательно), но, как указано выше, это не работает на уровне Suite, и я действительно не уверен, как чтобы он работал. Я думал, что смогу собрать список всех тестов, а в пакете закончить тесты и сбросить их, что позволит ExtentReport дать мне отчет обо всех тестах. Тем не менее, я не могу специально получить отдельные результаты тестов - я получу один тест обратно, с именем displayName() = Suite.
Как я могу отследить отдельные тесты, а затем очистить их, когда все закончится, и пусть ExtentWatcher позаботится о прохождении/сбое теста на основе теста, а не только один раз для пакета?