How to become an author
Search
Write a publication
Pull to refresh
2
Karma
0
Rating
AlekseiM @m_aleksei

Пользователь

Send message
ProfileArticlesPostsNewsComments98
Путь к автотестированию Android нативными инструментами: испробовали всё, что есть на рынке и сделали свои выводы

Привет.

1) по скроллу я написал гайд -> http://appium.io/docs/en/writing-running-appium/tutorial/swipe-tutorial/ . только немного уже устарел сам тап. правильнее уже использовать http://appium.io/docs/en/commands/interactions/actions/

2) все tap(el), setInput(el, value), getText(el)... со всех страниц ведут в 1 единственную функцию для каждого действия. например все tap ведут одну функцию. Это супер удобно. Во первых можно поправить в одном месте КАК тап делаем и везде меняется. Во вторых после ACTION действий типа тап, которые приводят к изменениям удобно добавить маленькую паузу (я использую 150ms). Это значительно повышает надежность.

3) как видно из примера оборачивание дает также название действия для Allure отчета + логирования. это все крайне полезно особенно если бегут много тестов одновременно.

пример в Allure как видно

все действия понятны любому QA

плюс в обертке мы пишем человекочитаемые ошибки типа:

т.е. это не ХЗ какой-то элемент со стактрейсом который мануальщикам ничего не говорит, а понятная ошибка.

Эти действия приводят в легкому чтению результатов тестов любым сотрудником.

Ну и видео дополняет картину.

Rating is hiddenLook
Путь к автотестированию Android нативными инструментами: испробовали всё, что есть на рынке и сделали свои выводы

Красивее я имел ввиду чтобы действия вели или на ту же страницу или на следующую. Таким образом очень удобно писать тесты не прерывая типа:

апка
  .скринТакой
  .тапКнопкиТакой
  .проверьТакойТоСкринЗагрузился
  .вПолеТакоеВвведи("какой то текст")
  .тапКнопкиТакой
  .проверьТакойТоСкринЗагрузился
  ...

по статик импорту не понял вопроса. не вижу его. вот пример всех импортов с какого-то теста:

package tests.debitcard.addSecondaryCardOrder;

import base.enums.AccountType;
import core.testrail.TestRailCase;
import core.utils.enums.Currency;
import core.utils.enums.MAccountType;
import customers.Customer;
import customers.CustomerForGenerating;
import io.qameta.allure.Epic;
import io.qameta.allure.Feature;
import io.qameta.allure.Severity;
import io.qameta.allure.SeverityLevel;
import org.testng.annotations.Test;
import tests.addAccount.BaseAddAccount;
import tests.debitcard.BaseDebitCard;
import tests.debitcard.CardQueryMethods;

а вот пример импортов с PageObject (тут только логирование из статиков):

package pages.payments;

import base.BasePage;
import base.Page;
import core.utils.logging.Logger;
import io.appium.java_client.MobileBy;
import io.appium.java_client.pagefactory.*;
import io.qameta.allure.Step;
import org.openqa.selenium.WebElement;
import org.testng.Assert;
import pages.home.HomePage;
import pages.pots.PotViewPage;

import static core.utils.logging.Logger.createAssertionLog;


public class PaymentSentPage extends BasePage {

Rating is hiddenLook
Путь к автотестированию Android нативными инструментами: испробовали всё, что есть на рынке и сделали свои выводы

Kaspresso представил удобную обертку, зато за Аппиумом поддержка всех платформ.

За что мне нравится Аппиум:

  • поддержка всех платформ. пишем тест 1 раз

  • поддержка умопомрачительных возможностей поиска элементов

  • видео тоже есть

  • у нас 900 тестов под обе платформы (iOS + Android)

  • кол-во автотестеров сейчас 1 (было 2. второй ушел на другой проект сейчас)

  • запускают тесты все мануальщики

  • ноль проблем со стабильностью. у нас больше проблема в стабильности сервера из-за наличия многих ThirdParty сервисов.

Пример поиска элементов прям с кода:

    @iOSXCUITFindAll(value = {
            @iOSXCUITBy(id = "CARDADRConfirmationView"), // new
            @iOSXCUITBy(id = "I44S4ConfirmAddressView"),
            @iOSXCUITBy(id = "ADR3ConfirmAddressOnboardingView"),
            @iOSXCUITBy(id = "I56DebitCardNotArrivedView"), // business
            @iOSXCUITBy(id = "BIZ14ChooseAddressView") // business
    })
    @iOSXCUITFindAll(value = {
            @iOSXCUITBy(id = "orderAnother"), // business
            @iOSXCUITBy(id = "bottomButton"), // business
            @iOSXCUITBy(id = "confirmButton") // old ?
    }, priority = 1)
    @AndroidFindAll(value = {
            @AndroidBy(id = "btn_base_bottom_sheet_primary"),
            @AndroidBy(id = "btn_confirm_address"), // business
            @AndroidBy(id = "btn_nux2s0s1_confirm"), // confirm address after login with EUR account only
    })
    private WebElement confirmAddressButton;

PS ах да. я бы посоветовал код писать чуть красивее типа -> (сек прям с кода...)

xxxApp()
	.onboarding().mobilePhonePage()
	.verifyAndSetCountryCode(expectedCode, country)
	.setPhone(customer.getPhone())
	.tapVerifyNumberButton()
	.tapMyNumberIsCorrect()
	.enterVerificationCode(customer.getPhone(), smsVerificationTokenOld);

где например:

    @Step("Tap 'Verify Number' button")
    public MobilePhonePage tapVerifyNumberButton() {
        Logger.log();
        Assert.assertTrue(tap(verifyNumberButton), createAssertionLog("FAILED"));
        return this;
    }

Rating is hiddenLook
Github не будь злом

Мне симпатизирует ваша точка зрения, но иного выхода как блокада ресурсов я не вижу.

Вот вы как предлагаете действовать в данном случае?

Rating is hiddenLook
Минцифры пояснило порядок предоставления сотрудникам IT-компаний льгот по ипотеке в рамках господдержки

Неправда. Мы недавно джуниора из Пакистана вытащили. Уже почти месяц у нас. Всем довольны. Толковый, быстро учится, минимальный надзор.

Сейчас конечно больше кандидатов толковых с России едет и стало временно проще.

Многие знакомые годами народ у нас в Эстонии найти не может. Слишком много стартапов у нас и бегают по кругу все подымая зарплаты и плюшки.

Rating is hiddenLook
ТОП-5 вопросов технического директора про автоматизацию

oi пропустил.

java + maven + testNG + appium + allure reporter.

Rating is hiddenLook
Не автоматизируйте test cases

А вы аппелируйте к тому, что тесты НЕ должны все все покрывать. Ибо система которая тестирует любое приложение на 100% всегда сложнее самого приложения.

Кому надо, чтобы затраты на тестирования были больше создания? Есть конечно варианты: космос, медицина, системы управления - если ваша апка к ним не относится, вы не должны покрывать все случаи. Это дорого.

Rating is hiddenLook
Не автоматизируйте test cases

Это проблема того, что девы не видят выхлопа тестов. В противном случае они сохраняют идшки, зная что могут быть причиной падений тестов.

Ну а поправить идшки в форме это вообще не проблема. Вот если меняется флоу, то сложнее. Тут все зависит как написаны тесты, поправить в 1 месте не проблема.

Вначале я сам ставил идшки в ios коде. Через пол года, когда авто тесты стали находить быстро регресии, програмисты сами стали помогать и сохранять идшки.

Сейчас у нас 870 тестов мобильных тестов под ios и столько же под android.

Представьте как обслуживать это? Так вот у нас всего 2 авто тестера на эти мобильные, апи (сейчас очень много его), веб и т.д.

Все зависит от того как написано, так и обслуживаться будет.

Rating is hiddenLook
Не автоматизируйте test cases

все верно! я видел толпы автоматчиков, работу которых никто в фирме не понимает, кроме них самих.

1) любые тесты должны быть такими, чтобы их запускали ВСЕ члены команды. Мануальщики в первую очередь, программеры во вторую, а сами автоматчики в последнюю.

2) качество описания ошибки в тесте должно быть таким, чтобы ваша жена (врач, учитель и т.д.) поняли не зная вашего продукта. Не поняли, вы показываете стактрейс или строку кода, где упало - это никому не понятно и не нужно кроме вас самих.

3) наличие видео крайне повышает комфортность и полезность (хотя вначале так не кажется пока не начнешь пользоваться). Ясно, что с АПИ так не получится, а вот web + mobile видео обязательно давно.

4) большинство регрессий должно быть найдено, до того как мануальщики пытаются скачать новый билд и запустить (грубо. понятно что скажем мобильные тесты помедленнее).

Rating is hiddenLook
Не автоматизируйте test cases

это проблема кривых рук автотестеров (чаще) и окружения (реже).

Rating is hiddenLook
Для увеличения продаж электромобилей власти Индии внедрят политику замены аккумуляторов

у крупных городах не у всех дома есть возможность ставить на зардку на ночь. замена батареи решает кучи проблем:

  • батарея меняется за 1-3 мин

  • легко заменить 50 - 70 -100 - 150 kW (как пожелаешь на станции)

  • легко утилизировать - не надо разбирать машину

  • нет проблем с гарантией на батарею

Rating is hiddenLook
Идентификаторы элементов в XCUITest

А у нас был похожий опыт!

Я начал проставлять айдишки в приложении iOS сам. Позднее девелоперы увидев помогли сделать генерацию всех айдишек автоматически если билд не релиз или не продакшн.

пример:

<XCUIElementTypeOther type="XCUIElementTypeOther" enabled="true" visible="false" x="0" y="111" width="375" height="56" name="generated_MultipleBalanceView">
<XCUIElementTypeOther type="XCUIElementTypeOther" enabled="true" visible="false" x="0" y="111" width="375" height="56" name="generated_UIStackView">
<XCUIElementTypeOther type="XCUIElementTypeOther" enabled="true" visible="false" x="95" y="111" width="185" height="56" name="generated_UIStackView">
<XCUIElementTypeOther type="XCUIElementTypeOther" enabled="true" visible="false" x="95" y="111" width="107" height="56" name="generated_AnimatingBalanceLabel">
<XCUIElementTypeStaticText type="XCUIElementTypeStaticText" enabled="true" visible="false" x="95" y="111" width="107" height="56" name="balanceLabel" label="£0,00" value="£0,00">

таким образом автоматом были доступны мне (я на аппиуме пишу) хоть какие-то ид чтобы писать не зализая в код iOS.

сейчас я уже не часто меняю сгенеренную идшку на свою (тут в примере - `balanceLabel`).

метод уже прижился в нескольких фирмах. реализация правда сделана чуть по разному.

но в обоих меняю ид (если надо) крайне удобно добавив '.id("myID")' к любому элементу:

let saveAmountLabel = Label().id("saveAmountLabel").style(.amount)

вот такой опыт.

Кстати по поводу одиноковых элементов в Аппиуме прекрасные варианты как искать типа:

    // chain: generated_UINavigationBar -> generated_UINavigationBar
    @iOSXCUITFindBys(value = {
            @iOSXCUITBy(id = "generated_UINavigationBar"),
            @iOSXCUITBy(id = "generated__UIButtonBarButton")
    })
    
    // all: X1View or X2View
    @iOSXCUITFindAll(value = {
            @iOSXCUITBy(id = "X1View"),
            @iOSXCUITBy(id = "X2View")
    })
    
    // all chain all: any X1View or X2View -> any X3View or X4View
    @iOSXCUITFindAll(value = {
            @iOSXCUITBy(id = "X1View")
            @iOSXCUITBy(id = "X2View")
    })
    @iOSXCUITFindAll(value = {
            @iOSXCUITBy(id = "X3View"),
            @iOSXCUITBy(id = "X4View")
    }, priority = 1)
    
    // classChain: get second 'generated_LinkButton' then inside first 'XCUIElementTypeStaticText'
    @iOSXCUITFindBy(iOSClassChain = "**/XCUIElementTypeButton[`name == \"generated_LinkButton\"`][2]/**/XCUIElementTypeStaticText")
    
    // predicate class 'XCUIElementTypeImage' with name contains 'cardActiveImage_'
    @iOSXCUITFindBy(iOSNsPredicate = "type == 'XCUIElementTypeImage' AND name CONTAINS[cd] 'cardActiveImage_'")
    
    // now any combination of all above :-)

Rating is hiddenLook
Тесты на прод. Наша история

Так они регулярно каждую неделю новый слепок в staging делают.

Rating is hiddenLook
Как ускорить автотесты

кстати идею подсказали! сделал ребуут телефонов джобу на 7 утра. все одной проблемой меньше.

Rating is hiddenLook
Как ускорить автотесты

есть но шарить не могу без согласия фирмы. частично как это было давно тут

сейчас уже у нас 24 тел: 12 iPhone + 12 Nokia на том же столе.

Rating is hiddenLook
Как ускорить автотесты

Мы выбрали тел Nokia. Простые тел с чистым Андроидом. Мин проблем и дешевые (150-300 Евро у нас).

Тел стоят на алюминивых подствках. Не перегреваются. На всех тел вырублена анимация. На всех установлен один гуугло эккаунт где уже синхронизируются данные тестирования (контакты например) + отрублены все сервисы как запоминания паролей, перевод и т.д.

Хотя иногда некоторые (в основном отваливаются. редко но бывает.) вышеописанные проблемы бывают.

Rating is hiddenLook
Тесты на прод. Наша история

Некоторые фирмы просто делают зеркало прода, только с обфускацией данных пользоветелей. Тоже выход.

Rating is hiddenLook
Утихомиривание стиралки в деревянном доме

Модель не указана но! Вот такое заметил: была стиралка на 6кг сломалась и поменял на 10кг. У новой вес 97.5кг. Стоит мертво. Если старая еще пыталась перемещатся, то новая как монолит. Вибрации вообще не чуствую.

Фирма - AEG.

Rating is hiddenLook
7 характеристик хороших тестов

Не знаю какие у вас требования но где я работал максимум анинимизированный прод клали на тест и уже на нем тестили.

Еще прокатывало создание счета без каких либо транзакций.

Все остальное боялись проверок.

Я говорю о больших скандинавских банках.

Rating is hiddenLook
7 характеристик хороших тестов

Это все крайне скудный набор. А я упомянул как раз про сильные ограничения. Создания пользователей, выдача карт и т.д.

Поэтому и сказал что не разгонишься.

А перевод и лирика это конечно легко и на Проде. Но этого крайне мало и не проверяет важную бизнес логику.

Rating is hiddenLook
12
3
45

Information

Rating
Does not participate
Location
Таллин, Эстония, Эстония
Registered
Activity

Your account

Sections

Information

Services

Support
© 2006–2025, Habr