Модульное тестирование при помощи JUnit Андрей Дмитриев Andrei.Dmitriev@Sun.COM Sun Microsystems Декабрь 2008. - презентация

1 Модульное тестирование при помощи JUnit Андрей Дмитриев Sun Microsystems Декабрь 2008

2 2 Программа Введение. Установка. Возможности JUnit. Пример тестового случая. Автоматизация разработки в среде NetBeans. Ссылки.

3 3 Введение Что такое модульное тестирование? > Тестирование отдельных функций системы. > Как правило выполняется разработчиком модуля. > Может быть легко автоматизировано. > Закладывает основу для регрессионного тестирования приложения. JUnit – это библиотека, позволяющая проводить модульное тестирование Java приложений.

4 4 Мифы тестирования «У меня нет времени на тесты». «Тестирование – скучное и не творческое занятие». «Мой код и так отлично работает». «Это работа для отдела тестирования. У них получится лучше».

5 5 Миф 1 «У меня нет времени на тесты» Мало тестов Нестабильный код Больше ошибок Больше времени на отладку Недостаток времени Написание тестов стабилизирует код и позволяет существенно сократить время отладки.

6 6 Миф 2 «Тестирование – скучное и не творческое занятие» Многие книги по тестированию написаны сухо и излагают лишь некие теоретические основы. Однако предугадывание и предотвращение ошибок – весьма творческое и ответственное занятие. Далеко не каждый разработчик способен хорошо протестировать свой (и чужой) код. > Это очень ценный навык. Бесконечная отладка ошибок – куда менее творческое занятие, чем тестирование.

7 7 Миф 3 «Мой код и так отлично работает.» Представим себе идеального разработчика. Он: > Прочитал все нужные книги. > Попал во все возможные ловушки. > Знает все паттерны проектирования. > Помнит наизусть детали реализации каждого из 363 классов своей системы. Как Вы думаете, изменив 35-ю строчку 276 -го класса, сможет ли он точно предсказать, как это скажется на остальных 362? Что говорить об остальных, не столь совершенных разработчиках? Не легче ли использовать набор надежных автоматических тестов в подобном случае – и не держать в голове лишние подробности?

8 8 Миф 3 «Это работа для отдела тестирования. У них получится лучше» Увы, тестирование системы в целом далеко не всегда походит для обнаружения ошибок в отдельных компонентах. Даже при точном воспроизведении ошибки и ее грамотном описании требуется немало времени, чтобы найти ответственного. > Зачастую это время других разработчиков. Ошибку, обнаруженную на ранней стадии разработки куда легче исправить. Системное тестирование очень важно, но вовсе не заменяет модульное тестирование. > Корректный модульный тест часто может написать лишь автор кода.

9 9 Пример программы Пусть есть класс, реализующий несколько математических функций. public class CustomMath { public static int sum(int x, int y){ return x+y; //возвращает результат сложения двух чисел } public static int division(int x, int y){ if (y == 0) {//если делитель равен нулю throw new IllegalArgumentException("divider is 0 "); } //бросается исключение return x/y; //возвращает результат деления }}

10 10 Наблюдение Иногда требуется снабжать программу модульными тестами. Тесты неудобно хранить в самой программе. > Усложняет чтение кода. > Такие тесты сложно запускать. > Тесты не относятся к бизнес-логике приложения и должны будут быть исключены из конечного продукта. Внешняя библиотека, подключенная к проекту может существенно облегчить разработку и поддержание модульных тестов. > Для каждого языка программирования реализация отличается. > CUnit, JUnit, …

11 11 Вариант модульного тестирования 1 Некоторые проверки можно поместить в сам класс. public class CustomMath { public static void main(String[] args) { if (sum(1, 3) == 4) { //проверяем, что при сложении 1 и 3 //нам возвращается 4 System.out.println("Test1 passed."); } else {System.out.println("Test1 failed.");} try { int z = division(1, 0); System.out.println("Test3 failed."); } catch (IllegalArgumentException e){ //тест считается успешным, если при попытке деления на 0 //генерируется ожидаемое исключение System.out.println("Test3 passed."); }}

12 12 Установка JUnit Сайт проекта: > Настройка окружения: > /build/tutorials/winenvars/winenvarshome.html Библиотека может быть подключена к любой Java программе. Модуль JUnit входит во многие популярные IDE.

13 13 JUnit – внешний вид приложения Тесты можно запускать как из консоли, так и при помощи графического приложения.

14 14 Возможности JUnit //подключение библиотеки import junit.framework.*; //Тест должен быть наследником класса TestCase public class CustomMathTest extends TestCase { //тестирующие методы начинаются с префикса test public void testSum() { System.out.println("sum"); int x = 0; int y = 0; int expResult = 0; int result = CustomMath.sum(x, y); //проверка условия на совпадение assertEquals(expResult, result); fail("The test case is a prototype."); } Тест, автоматически сгенерированный для метода сложения, выглядит так :

15 15 Возможности JUnit (cont.) В конце обычно происходит сравнение фактического результата с ожидаемым. //тестирующие методы начинаются с test //Данный тест сгенерирован для метода деления public void testDivision() { System.out.println("division"); int x = 0; int y = 0; int expResult = 0; int result = CustomMath.division(x, y); //проверка условия на совпадение assertEquals(expResult, result); fail("The test case is a prototype."); }

16 16 Обработка исключений Запуск теста для метода division(x, y) выдал ошибку: Testcase: testDivision(simplemathapp.CustomMathTest): Caused an ERROR divider is null java.lang.IllegalArgumentException: divider is null at simplemathapp.CustomMath.division(CustomMath.java:42) at simplemathapp.CustomMathTest.testDivision(CustomMathTest.java:38)

17 17 Обработка исключений (cont.) Причина в том, что тест некорректно обрабатывает деление на ноль: public void testDivision() { System.out.println("division"); int x = 0; int y = 0; int expResult = 0; int result = CustomMath.division(x, y); assertEquals(expResult, result); } Вместо сравнения числовых результатов нужно ожидать исключение.

18 18 Обработка исключений (cont.) В случае исключения мы не делаем ничего. Если исключения нет – сообщаем об ошибке. public void testDivision() { int x = 0; int y = 0; int expResult = 0; try { expResult = CustomMath.division(x, y); fail("Exception expected"); } catch (IllegalArgumentException e){ System.out.println("pass"); }

19 19 Развитие Версия JUnit 4.0 доступна на сайте проекта: > использует аннотации, > отслеживает истечение времени, > возможность определять методы инициализации тестовой сюиты.

20 20 Ограничение JUnit Невозможность моделирования многопоточных ситуаций. Запуск нескольких тестов одновременно не позволяет отследить момент их завершения. Библиотеки JUnitPerf, GroboUtils обходят данное ограничение.

21 21 Выводы Наличие хорошего набора тестов важно для контроля качества программы. Разработка тестов может отнимать немного времени. Автоматизация тестов – приоритетная задача для успешного тестирования.

22 22 Автоматизация разработки тестов в среде NetBeans Модуль JUnit встроен в среду разработки. Проект состоит из одного класса и двух публичных методов. Для создания тестового покрытия требуется несколько нажатий мыши.

23 23 Генерация тестового покрытия Для классов проекта автоматически создаются тестовые случаи.

24 24 Настройка При генерации тестов можно задать : –версию JUnit, –имя класса, –набор методов для покрытия их тестами, –и др.

25 25 Созданные тесты Тесты помещаются в отдельную папку и являются частью проекта. Требуется некоторая доработка вновь созданных тестов.

26 26 Запуск тестов Выбор пункта меню «Test» запускает все тесты для выделенного класса или проекта.

27 27 Результат работы тестов Представлен в виде дерева тестовых методов и классов. Один из двух тестов завершился с ошибкой.

28 28 Причины ошибки тестов В данном случае программа обращается к полю объекта null.

29 29 Правильная обработка исключения Исключение тоже может быть ожидаемым результатом теста. Начиная с версии JUnit 4.0 можно применять аннотации.

30 30 Повторный запуск тестов Исправление ошибки в тесте прошло успешно.

31 31 Расширение тестовой базы При добавлении тестового случая нужно дополнить тест новыми инструкциями или создать новый тест.

32 32 Подход «Сначала тесты, затем код» Каждой строчке кода предшествует неработающий тест. > После написания кода тест должен пройти. Как только тест проходит, тестируемый код подвергается рефакторингу. > Затем вновь запускается тест. Разработка проходит маленькими итерациями, с чередованием написания кода и его тестирования. При интеграции кода с другими частями системы все тесты должны проходить успешно.

33 33 Преимущества подхода Каждая функция протестирована. > Если изменение «ломает» старую функциональность, падение тестов служит индикатором проблемы. Тесты документируют код, поскольку показывают, какие результаты и исключения следует ожидать от каждого модуля. Итерации разработки очень коротки (порядка 10 минут). > Несложно отследить какие изменения это повлекли. Дизайн приложения заметно упрощается. > Сложные методы сложно тестировать (и поддерживать).

34 34 Рекомендации к написанию тестов Название тестового метода. Размер теста. Ожидаемый результат. Тестовые данные. Исключения.

35 35 Название тестового метода Имя теста должно описывать: Тестируемую функциональность. Возможно, условия тестирования. НепонятноПонятно test1testAddUser testAddUserThrowExceptiontestAddUserWithoutPassword

36 36 Размер теста Тестовый метод должен быть коротким. > Иногда полезно выносить дополнительные проверки во вспомогательные методы, чтобы улучшить читаемость теста. Количество проверок (assert) должно быть минимальным. > Иначе по падению теста сложно будет найти причину ошибки. Каждый тест должен покрывать одну единицу бизнес-логики. Это может быть: > Простой метод. > Один из исходов конструкции if..else. > Один из случаев (case) блока switch. > Исключение, обрабатываемое блоком try…catch > Исключение, генерируемое (throw) в методе.

37 37 Ожидаемый результат public void testBalance1() { Account account = new account(); account.deposit(10); account.withdraw(5); account.deposit(6); int expectedBalance = 11; //правильно assertTrue(expectedBalance, account.getBalance()); } public void testBalance2() { Account account = new Account(); account.deposit(10); account.withdraw(5); account.deposit(6); int expectedBalance = ; //неправильно assertTrue(expectedBalance, account.getBalance()); } Ожидаемый результат должен быть константой. Не следует в тесте повторять тестируемую логику, подсчитывая результат.

38 38 Тестовые данные public void testIsPasswordValid() { assertTrue(user.isPasswordValid("abcdef")); //понять,правильно ли написан тест, можно лишь отыскав где создается объект user assertFalse(user.isPasswordValid("123456")); } Тестовые данные и ожидаемый результат должны быть рядом. Если в приведенном примере объект user удобнее создавать вне тестового метода (н-р чтобы избежать дублирования кода), следует использовать именованные константы.

39 39 Тестовые данные (cont.) public void testIsPasswordValid() { User user = new User("Name", "abcdef"); assertTrue(user.isPasswordValid("abcdef")); //здесь все понятно assertFalse(user.isPasswordValid("123456")); }

40 40 Тестовые данные (cont.) public void testIsPasswordValid() { assertTrue(user.isPasswordValid(CORRECT_PASSWORD)); //альтернативный вариант с использованием именованных констант assertFalse(user.isPasswordValid(WRONG_PASSWORD)); }

41 41 Исключения public void testRetrieveUser() { try { assertNotNull(manager.retrieveUser("name", "password")); } catch (WrongPasswordException e) { fail("Exception occurred: " + e.getMessage()); e.printStackTrace(); } } public void testRetrieveUser() throws WrongPasswordException { assertNotNull(manager.retrieveUser("name", "password")); }//оптимальный вариант public void testRetrieveUser() throws Exception { assertNotNull(manager.retrieveUser("name", "password")); } Если получение исключения не обозначает удачное завершение теста, рекомендуется пробрасывать его их тестового метода, а не обрабатывать блоком try…catch. Само исключение более информативно, чем сообщение. Не рекомендуется использовать общий класс (Exception), так как это затрудняет чтение и поддержку теста.

42 42 Ссылки Сайт проекта JUnit: > Страничка модуля NetBeans: > Оболочка для модульного тестирования программ на С: >

43 Q&A

44 Модульное тестирование при помощи JUnit Спасибо! Андрей Дмитриев Sun Microsystems Декабрь 2008