Тема: Компонентные тесты: как сделать жизнь вашего QA немного проще? В докладе речь пойдёт о компонентных тестах, в том числе я поделюсь лучшими практиками, которые выработала наша команда, и расскажу, как они помогают нам делать более качественный продукт. В частности поговорим о том: – что такое компонентный тест? В чем отличия между юнит-, компонентным и функциональным тестом? – для чего хороши компонентные тесты и какие проблемы они помогают нам решать? – как минимизировать стоимость поддержки компонентных тестов без экономии на их надежности.

1. Компонентные тесты: как
сделать жизнь вашего QA
немного проще?

2. Strictly ConfidentialStrictly Confidential 2
Seller
Experience
Team
Production
Buyer
Experience
Team
Alien
Experience
Team

3. Strictly ConfidentialStrictly Confidential 3
• QA как процесс
• Что такое компонентный тест?
• Примеры использования
• Минимизация стоимости поддержки
Содержание

4. Strictly ConfidentialStrictly Confidential 4
Какое место занимают компонентные тесты?
Unit tests
Component tests
E2E tests
~100%
~50%
~20%

5. Strictly ConfidentialStrictly Confidential 5
Какое место занимают компонентные тесты?
Unit tests
Component tests
E2E tests

6. Strictly ConfidentialStrictly Confidential 6
Какое место занимают компонентные тесты?
Unit tests
Component tests
E2E tests

7. Strictly ConfidentialStrictly Confidential
• Максимально стабилен
• Максимально быстр
• Ничего не знает о внешнем окружении
7
Unit test

8. Strictly ConfidentialStrictly Confidential
• Проверяет точки интеграции
• Тестирует компонент в изоляции
от глобального состояния
системы
8
Component test

9. Strictly ConfidentialStrictly Confidential
• Проверяет всю систему в целом
• Использует настоящую внешнюю среду
• Является наиболее “честной” проверкой
9
E2E test

10. Strictly ConfidentialStrictly Confidential
• Стабильность
• Скорость
• Feedback loop
10
Зачем нам такое разделение?

11. Strictly ConfidentialStrictly Confidential
• Unit - бизнес логика
• Component - пользовательские сценарии
• E2E - система целиком
11
Резюме

12. Strictly ConfidentialStrictly Confidential 12
• QA как процесс
• Что такое компонентный тест?
• Примеры использования
• Минимизация стоимости поддержки
Содержание

13. Strictly ConfidentialStrictly Confidential 13
Тестирование отдельных компонентов
программного обеспечения

14. Strictly ConfidentialStrictly Confidential 14
Проблема с Unit тестами
Бизнес логика

15. Strictly ConfidentialStrictly Confidential 15
Проблема с Unit тестами
Взаимодействие
с UI
Бизнес логика

16. Strictly ConfidentialStrictly Confidential 16
Проблема с Unit тестами
Взаимодействие
с UI
Бизнес логика
Навигация

17. Strictly ConfidentialStrictly Confidential 17
Проблема с Unit тестами
Взаимодействие
с UI
Бизнес логика
НавигацияБизнес логика

18. Strictly ConfidentialStrictly Confidential 18
Проблема с Unit тестами
Взаимодействие
с UI
Бизнес логика
НавигацияБизнес логика

19. Strictly ConfidentialStrictly Confidential 19
Who is Mr. Component test?

20. Strictly ConfidentialStrictly Confidential 20
Who is Mr. Component test?
Mocks
API
Storage
Analytics
…
Screen
Presenter
Interactor
View
Other local
dependencies

21. Strictly ConfidentialStrictly Confidential 21
• QA как процесс
• Что такое компонентный тест?
• Примеры использования
• Минимизация стоимости поддержки
Содержание

22. Strictly ConfidentialStrictly Confidential 22
Проверка состояния UI
val button = Espresso.onView(/…/)
@Test
fun button___isDisabled___byDefault() {
button.check(matches(not(isEnabled())))
}

23. Strictly ConfidentialStrictly Confidential 23
Сохранение состояния
@Test
fun button___savesEnabledState___afterRotation() {
givenBothFieldsHaveData()
toggleOrientation()
button.check(matches(isEnabled()))
}
val button = Espresso.onView(/…/)

24. Strictly ConfidentialStrictly Confidential 24
Взаимодействия с сетью
@Test
fun buttonClicked___showsToast___connectionError() {
givenBothFieldsHaveData()
Api.stub { authenticate.connectionError() }
button.perform(click())
toastDisplayedWithText("Нет соединения")
}

25. Strictly ConfidentialStrictly Confidential 25
Защита при рефакторинге

26. Strictly ConfidentialStrictly Confidential 26
Защита при рефакторинге
Awesome Screen
Some
Cool
Logic

27. Strictly ConfidentialStrictly Confidential 27
Защита при рефакторинге
Awesome Screen
Some
Cool
Logic
Not so awesome screen

28. Strictly ConfidentialStrictly Confidential 28
Защита при рефакторинге
Awesome Screen Not so awesome screen
Some
Cool
Logic

29. Strictly ConfidentialStrictly Confidential 29
• QA как процесс
• Что такое компонентный тест?
• Примеры использования
• Минимизация стоимости поддержки
Содержание

30. Strictly ConfidentialStrictly Confidential 30
Все ли так радужно?
@Test
fun button___savesEnabledState___afterRotation() {
givenBothFieldsHaveData()
toggleOrientation()
button.check(matches(isEnabled()))
}

31. Strictly ConfidentialStrictly Confidential 31
Все ли так радужно?
@Test
fun button___savesEnabledState___afterRotation() {
givenBothFieldsHaveData()
toggleOrientation()
button.check(matches(isEnabled()))
}

32. Strictly ConfidentialStrictly Confidential 32
Что может скрывать за собой обычный ввод
текста?
fun ViewInteraction.typeText(text: String) {
perform(TypeTextAction(text))
}

33. Strictly ConfidentialStrictly Confidential 33
Что может скрывать за собой обычный ввод
текста?
fun ViewInteraction.typeText(text: String) {
perform(TypeTextAction(text))
}
NoMatchingViewException

34. Strictly ConfidentialStrictly Confidential 34
Что может скрывать за собой обычный ввод
текста?
fun ViewInteraction.typeText(text: String) {
perform(
TypeTextAction(text),
ViewActions.closeSoftKeyboard()
)
}

35. Strictly ConfidentialStrictly Confidential 35
Что может скрывать за собой обычный ввод
текста?
fun ViewInteraction.typeText(text: String) {
perform(
ViewActions.scrollTo(),
TypeTextAction(text),
ViewActions.closeSoftKeyboard()
)
}

36. Strictly ConfidentialStrictly Confidential 36
Что может скрывать за собой обычный ввод
текста?
fun ViewInteraction.typeText(text: String){
Waiter.wait {
perform(
ViewActions.scrollTo(),
TypeTextAction(text),
ViewActions.closeSoftKeyboard()
)
}
}

37. Strictly ConfidentialStrictly Confidential 37
Постепенно элементы становятся сложнее, а
код менее читабельным
Espresso.onView(
Matchers.allOf(
withParent(withId(R.id.email)),
withId(R.id.input)
)
)
)

38. Strictly ConfidentialStrictly Confidential 38
PageObject
“The basic rule of thumb for a page object is that it should allow a
software client to do anything and see anything that a human can.
…
The page object should encapsulate the mechanics required to find
and manipulate the data in the GUI control itself.”
- Martin Fowler

39. Strictly ConfidentialStrictly Confidential 39
class LoginViaMail : PageObject() {
val emailField = InputViewField(withId(R.id.email))
val passwordField = InputViewField(withId(R.id.password))
val logInButton = PageObjectElement(withId(R.id.login))
}
PageObject

40. Strictly ConfidentialStrictly Confidential 40
PageObject
class LoginViaMail : PageObject() {
val emailField = InputViewField(withId(R.id.email))
val passwordField = InputViewField(withId(R.id.password))
val logInButton = PageObjectElement(withId(R.id.login))
fun givenBothFieldsHaveData() {
emailField.write(randomString())
passwordField.write(randomString())
}
}

41. Strictly ConfidentialStrictly Confidential 41
PageObjectElement
class InputViewField : PageObjectElement {
…
override fun typeText(stringToBeTyped: String) {
interaction.waitToPerform(
EspressoActions.scrollIfPossible(),
EspressoActions.safeTypeText(stringToBeTyped),
ViewActions.closeSoftKeyboard()
)
}
}

42. HomeScreen
LoginScreen
ChatScreen
InputElement
ButtonElement
TextElement
PageObject PageObjectElement

43. Strictly ConfidentialStrictly Confidential 43
Что получаем?
@Test
fun header___displayedWithTitle___headerLoaded() {
Api.stub {
getHeader.success {
name = “header name"
}
}
screenRule.start()
screen.header.checks.displayedWithText(“header name")
}

44. Strictly ConfidentialStrictly Confidential 44
Проверка должна выглядеть так, как видит ее
пользователь
@Test
fun signUpButton___opensRegistration() {
loginScreen.signUpButton.click()
Screen.ui.checks.actionBarWithTitle("Регистрация")
}

45. Strictly ConfidentialStrictly Confidential 45
Детали проверки должны быть
инкапсулированы
fun assertNotification(notificationMessage: String,
check: Checks.() -> Unit) {
val notification = PageObjectElement(
allOf(
withClassName(containsString("FrameLayout")),
withChild(
allOf(
withId(R.id.info_text),
withText(notificationMessage)
)
)
)
)
check.invoke(notification.checks)
}

46. Strictly ConfidentialStrictly Confidential 46
Тест не должен знать об Espresso

47. Strictly ConfidentialStrictly Confidential 47
Работу с глобальным состоянием приложения
уносим в Rule
abstract class SimpleRule : TestRule {
protected open fun before() {
//подготавлиеваем моки
}
protected open fun after() {
//сбрасываем состояние
}
}

48. Strictly ConfidentialStrictly Confidential 48
Тест не должен знать о специфике вашей
архитектуры
MVP
MVVM
Dagger RxBindings

49. Strictly ConfidentialStrictly Confidential 49