Comments / Profile of m

Пользователь

Руководство по запуску автоматизации с Appium и Pytest

m_aleksei Dec 20 2023 at 15:27

только после

npm install -g appium

Appium текущий не заработает. Уже почти год как нужно ставить драйверы.

А ссылка на "Официальная документация Appium" совсем неправильная.

Аналогично Test Automation University - Mobile Testing:

Look

Detox и Appium: автоматизированный тест интерфейса в React Native

m_aleksei Dec 20 2023 at 09:13

Все правильно! Надо ждать нужный экран, а не ставить слипы. Со временем это придет. Когда тестов станет 100+. Ибо каждая секунда ожидания это уже более 100секунд.

Look

Part 1. Инструменты автоматизации тестирования

m_aleksei Dec 19 2023 at 17:40

Чтобы они там в BrowserStack бежали быстро надо их там и запускать. Иначе время пинга увеличит время выполнения теста в 3-5 раз. Так себе решение по мне. Не все фирмы по секурити пропустят так делать.

Проблема вторая - аренда скажем 25 параллельных тел в месяц это огромная сумма.

Вот мы запускаем на своей ферме:

2 макМини
14 андроид тел
12 аппл тел

Данный конфиг = 3 месяцам подписки BrowserStack.

Скорость тестов всегда зависит от апки. Где-то они длинные, где то короче. Ну логика приложений разная. Одно дело делать заказ и другое проверить настройки.

К примеру скорость наших тестов на 12 тел iPhone

220 тестов за 25 мин. Те же Андроид тесты чуть медленнее. По итогу примерно 500 тестов за 30 мин (250 iOS / 250 Android) успевают пробежать на нашем конфиге.

Look

Эволюция требований к тестировщикам: что было 5 лет назад и что ждать в будущем?

m_aleksei Nov 22 2023 at 14:55

Ну как же! А уметь применить regex запросы в поисках логах? Это все опят же - примитив для разбирающегося человека.

Look

Эволюция требований к тестировщикам: что было 5 лет назад и что ждать в будущем?

m_aleksei Nov 22 2023 at 14:53

Да там половину и знать не надо. Что там в Чалзе нужно знать, кроме как настроить, смотреть да иногда редактировать запросы/ответы? Это все из разряда - есть башка, разберешься на месте.

Look

Должен ли QA уметь писать код

m_aleksei Nov 18 2023 at 10:48

Не, тут все просто. Такой фулл КА отвечать может только за кусок функционала. Скажем заказ карт. Вот он его и тестит манульно и автотесты пишет, по образу и подобию имеющегося фреймворка. Тогда это возможно. Речь не идет о написании с нуля тест фреймворка. А только о его наполнении авто тестами.

В большинстве случаев более сложные задачи в коде отданы чистым автоматчикам.

Речь идет о больших проектах. Маленькие вполне может осилить такой фулл стак КА.

Look

Как упростить себе жизнь: удобные юнит-тесты с JUnit и AssertJ

m_aleksei Oct 16 2023 at 23:01

Таким образом, каждый тест будет независимым: даже если один упадет, то другие все равно запустятся и принесут результат. А вот объединять несколько кейсов в один не стоит, так как при первом провале проверки assert следующие не запустятся и результат их проверки будет известен только после исправления работы упавшего утверждения.

Тут все зависит:

Какая сложность и временные затраты на подготовку теста (Setup)
Возможно ли проверить что то еще без продолжения теста. Например проверяется сразу несколько параметров в ответе.
Читаемость. Будет ли сохранена читаемость теста при обьединении.
Очень часто тест состоит из тескольких частей. И часто мелкие ошибки не фатальны для продолжения теста. В таких случаях очень удобно проверять мягкими ассертами (Soft Assert поддерживаются с jUnit5 и в testNG). Которые не останавливают тест, но фейлят в самом конце. Таким образом можно ловить сразу несколько ошибок.

Look

Какую роль играет искусственный интеллект в расширении возможностей тестировщиков

m_aleksei Oct 13 2023 at 08:52

Какая чушь. ИИ стоит больше использовать в сложных ситуациях, а не при каждом случае. Тестировщик просто отупеет если все будет за него делать ИИ.

Look

Обзор библиотек для скриншот-тестирования Android проектов. Часть 1

m_aleksei Jul 24 2023 at 15:49

уж если про сравнение картинок то лучше https://opencv.org/ ничего нет. только отчеты надо самому делать.

Look

Selenoid: Запускаем Appium UI-тесты на iOS. Часть 2

m_aleksei May 27 2023 at 14:48

36 потоках около 500 UI-тестов в час

это получается 1 тест за 4 мин 20 сек. как то немало.... особенно для андроида.

Look

Мобильное тестирование, автоматизация и тестирование API: С чем нужно уметь работать тестировщику в 2021 году

m_aleksei Apr 19 2023 at 18:13

1) testNG чуть более гибкий, чем jUnit (beforeSuite, beforeTest, beforeClass, beforeMethod — очень удобно)
2) Android Studio теперь имеет удобный UI инспектор (Layout Inspector)
3) не вижу редакторов, например IntelliJ

Look

Оптимизация тестов для Continuous Integration

m_aleksei Jan 31 2023 at 19:10

Мы смогли разделить этот набор примерно на 10 других параллельных наборов

а почему просто увеличить количество параллельных тредов в наборе?

Look

5 полезных расширений Chrome для тестировщиков

m_aleksei Jan 28 2023 at 10:17

Сейчас самый важный плагин это - ChatGPT for Google!

Look

Легкая автоматизация кроссплатформенных тестов с Kotlin DSL

m_aleksei Sep 6 2022 at 19:55

интересно, а в чем у вас состояла " настроили ферму на Mac OS хосте " ?

мы просто подключили хаб на 20 портов к макМини.

Look

Легкая автоматизация кроссплатформенных тестов с Kotlin DSL

m_aleksei Aug 31 2022 at 22:44

iOS медленнее соглашусь, Android скорость такая что пытается тапать кнопку на экране, пока она еще появляется. Решается отрубанием анимации. Это кстати и для iOS помогает немного.

У нас 900+ тестов, 25 тел (12 iOS + 13 Андроид). По ночам бегают около 700 (1400 на две платформы) при релизах все. У нас много долгих тестов (например 2 платежа в тесте с заполнением кучи полей). Вообщем вполне сносно все 1800 (900 на обе платформы) бегут за 3.5 часа Андроид и немного дольше iOS.

C фермами типа browserstack заморачиваться не стали (наша ферма окупается за 3 месяца если выбирать планы с 20+ параллельными тел против самой дешевой фермы).

Look

Легкая автоматизация кроссплатформенных тестов с Kotlin DSL

m_aleksei Aug 30 2022 at 20:07

Молодцы!

У нас примерно тоже только Appium + Java + TestNG + Allure.

Из плюсов на Java можно писать умопомрачительные локаторы

@iOSXCUITFindBy(id = "PT5PlanSelectorView")
@iOSXCUITFindAll(value = {
  @iOSXCUITBy(id = "bottomButton"),
  @iOSXCUITBy(id = "otherButton")}, priority = 1)
@AndroidFindBy(id = "aftv_button_text")
private WebElement choosePlanButton;
// or
@iOSXCUITFindBy(iOSNsPredicate = "type == 'XCUIElementTypeButton' AND (label == 'Next' OR label == 'View your spending')")
@AndroidFindAll(value = {
     @AndroidBy(id = "a193_continue_button"), // old
     @AndroidBy(id = "pb_mm1") // new
})
private WebElement viewSpendingButton;

пример теста:

        login(getCustomer())
                .tapBurgerButton().isBurgerMenuPageLoaded()
                .tapMyPlanButton()
                .isMyPlanPageLoaded();

        // check plan monthly fee
        resultDB = myApp().myPlanPage().getPlanMonthlyFee();
        expectedBD = PlanFees.getMonthly(tier, false);
        getSoftAssert().assertEquals(resultDB, expectedBD, "MyPlan(): Monthly fee NOT correct");

        // check free withdrawal amount left
        resultDB = myApp().myPlanPage().getFreeATMAndTopUps(getCustomer());
        expectedBD = AtmAndCashTopUps.valueOf(tier.name()).getFreeAtmAndTopUp();
        getSoftAssert().assertEquals(resultDB, expectedBD, "Free withdrawal amount NOT correct'");

Видео всех тестов вставляем в отчет тоже.

Поделитесь для сравнения количеством тестов и скоростью выполнения. Спасибо.

Look

Блеск и нищета автоматизации тестирования расчетов в финтехе

m_aleksei Aug 24 2022 at 22:33

аааааа. ну это прямо основы математики которые в банке должен знать каждый!

ЗЫ Про Excel или расчеты на калькуляторе пару значений это вы точно сказали. Отвык народ работать руками.

Look

Блеск и нищета автоматизации тестирования расчетов в финтехе

m_aleksei Aug 24 2022 at 22:18

что то не понятно... почему сразу не использовать?

BigDecimal prc = new BigDecimal(10.75).setScale(2, RoundingMode.HALF_UP);
BigDecimal coef = new BigDecimal(365*100).setScale(0, RoundingMode.HALF_UP);

и подобно остальные переменные. тогда никаких "хвостов" не будет.

Look

AssertJ как способ значительно улучшить код ваших тестов

m_aleksei Jul 9 2022 at 21:46

Я бы порекомендовал добавлять описание ошибки. Вот у нас я автомачу мобильные тесты один, а юзают их все манульщики. И писать 2 <> 3 не совсем ясно, что такое 2 и почему 3. Ошибки должен понимать человек кто видит продукт первый раз.

И еще я не вижу мягкие ассерты, которые не останавливают тест. Это очень удобно когда тест флоу бежит до конца и накапливает сбор мелких ошибок.

Look

Путь к автотестированию Android нативными инструментами: испробовали всё, что есть на рынке и сделали свои выводы

m_aleksei Apr 22 2022 at 13:17

1) Step это от Allure - https://docs.qameta.io/allure/#_testng

2) это не НА каждый, а ПОСЛЕ каждого. нету смысла искать мгновенно элементы другой страницы

3) Аппиум аннотации типа @iOSXCUITBy, @AndroidBy и т.д. (их много) также имеют ожидания. Не помню по умолчанию, я заменяю его на свое 20сек. Ну а когда мне нужно короче (часто проверить что нету элемента) то уменьшаю и потом восстанавливаю. Пример

    @Step("Check 'Green button' loaded {sec}")
    public boolean isGreenButtonLoaded(int sec) {
        Logger.log("sec: '" + sec + "'");
        setLookTiming(sec);
        return super.isLoaded(greenButton);
    }

где isLoaded проверяет за МАКС время есть или нет + восстанавливает значение по умолчанию. Понятно что максимум искать будет только если нету.

Look

3 4 5