В этой статье я хочу поделиться недавно открытым для себя инструментарием, позволяющим создавать кроссплатформенные автотесты для приложений на QT.
Сам я занимаюсь контролем качества SCADA-системы, пользовательский интерфейс которой как раз построена на основе QT. В процессе доработки программного комплекса и добавления новых функций наша команда сталкивается с необходимостью регулярного регрессивного тестирования, так как нередко, по разным причинам, обновлённый компонент может просто перестать запускаться или начать падать в самых стандартных кейсах. Таким образом, было решено в инициативном попробовать покрыть тестами хотя бы базовые сценарии работы с наиболее критическими компонентами системы.
Когда я начал искать инструменты для решения этой задачи, то оказалось, что вариантов не так уж и много... точнее их вроде бы как и много, но большинство уже давно не поддерживается и по ним крайне мало материала. Стоит отметить, что рассматривался только accessibility-подход, когда у нас есть доступ к объектам интерфейса на прямую и мы можем получать различные свойства этих объектов (текст, картинки, подсказки и другое). Построение тестов на основе автокликеров (вроде pyautogui) не рассматривалось в связи с очень ограниченными возможностями такого подхода..
Из актуального первым во всех топах идёт Squish GUI Tester, но главной проблемой здесь безусловно является его платность, а значит и невозможность в сложившейся политической ситуации получить лицензию. Другим, более привлекательным вариантом, показался QtWebDriver - драйвер для Selenium, решение с открытым исходным кодом. Но с ним есть некоторые трудности - для его работы необходим доступ к исходникам тестируемого приложения и сборка отдельной версии (либо сборка QtWebDriver с хидерами самого приложения).
Funq
Полагаю, что вступление уже и так затянулось, поэтому перейдём к найденному решению. В ходе усиленного гуглежа всё таки нашлось кое-что подходящее для решения моей задачи - funq.
https://github.com/parkouss/funq
https://funq.readthedocs.io/en/latest/ - документация
Funq - инструмент для функционального тестирования QT-приложений с помощью python.
Преимущества:
крайне низкий порог входа ("кликнуть" по кнопке в приложении можно почти сразу)
нет необходимости модифицировать тестируемое приложение
клиент-серверная архитектура (есть возможность запускать тесты на одной машине, а выполнять на другой)
кроссплатформенность
открытый исходный код
возможность использования библиотек python (например, pytest)
простота исходников (можно довольно легко допиливать необходимый функционал)
Недостатки:
некоторые моменты недоработаны (например, нет доступа к меню "Файл")
ошибки в документации
последний коммит сделан два года назад
Установка/сборка
Для начала клонируем репозиторий, появится папка funq
git clone https://github.com/parkouss/funqТеперь устанавливаем funq с помощью менеджера пакетов pip
sudo pip3 install funq funq-serverКрайне важно сказать, что funq состоит из двух частей: клиентской и серверной, серверная в свою очередь включает в себя часть написанную на QT/C++, которая и обеспечивает доступ к объектам интерфейса. Серверная часть и тестируемое приложение должны быть собраны на одной версии QT! Займёмся сборкой. Для начала установим необходимые пакеты.
sudo apt install qt5-default qtdeclarative5-devПереходим в funq/server выполним следующие команды
qmake
make
cp ./bin/* ./funq_server/Теперь в funq/server/funq-server находится готовая серверная часть.
Простейший пример
Для демонстрации возможностей по управлению интерфейсом предлагаю использовать qBittorrent.
sudo apt install qbittorrentДавайте попробуем нажать на какую-нибудь кнопку. Очевидно, что нам нужно знать как к ней обратиться, наверняка у неё должно быть имя. Для того, чтобы узнать путь до конкретного элемента интерфейса запустим funq в режиме инспектирования.
python3 runner.py --pick qbittorrent #директория funq/server/funq-serverОткрывается окно qBittorrent. Зажимаем комбинацию клавиши Ctrl+Shift и кликаем по кнопке "Добавить ссылку на торрент..."
В консоли появляется сообщение, в котором указан путь до кнопки, запомним его.
Прекращаем работу в режиме инспектирования, теперь нужно запустить qBittorrent в режиме "управления".
python3 runner.py --host 0.0.0.0 --port 9999 qbittorrent В новой консоли запускаем python и выполняем следующий действия.
from funq.client import FunqClient
funq = FunqClient("127.0.0.1", 9999)
funq.widget(path='MainWindow::toolBar::QToolButton').click() #путь до кнопкиУра! Мы нажали кнопку и открылось диалоговое окно.
Взаимодействие с QTableView и QTreeView
С помощь funq можно легко взаимодействовать с элементами дерева и таблиц, хотя в начале пути я почти что впал в отчаяние, так как именно это мне не удавалось. Оказалось, что в документация устарела, либо в ней изначально допущена ошибка.
Попробуем получить доступ к выделенной таблице и выбрать какой-нибудь элемент.
С помощью режима инспектирования узнаём путь до таблицы. Попробуем выбрать строку "Неактивны (0)"
from funq.client import FunqClient
funq = FunqClient("127.0.0.1", 9999)
path_to_Table = MainWindow::centralWidget::QTabWidget::qt_tabwidget_stackedwidget::QSplitter::TransferListFiltersWidget::QScrollArea::qt_scrollarea_viewport::QFrame::StatusFilterWidget
table = funq.widget(path=path_to_Table)
model = table.model().items() #получаем доступ к модели данных таблицы
item = model.item_by_named_path([u'Неактивны (0)']) #находим item по пути до него
table.select_item(item) #селектим itemВ документации доступ к модели осуществляется следующим нерабочим образом, это нужно учитывать.
...
model = table.model_items()
...Некоторый элемент таблицы можно не только выбрать, но и кликнуть по нему, вызвать редактор, посмотреть или установить свойства. Подробнее об этом написано в документации, так же можете воспользоваться dir
dir(table)
>>>['CPP_CLASS', '__class__', '__delattr__', '__dict__',
'__dir__', '__doc__', '__eq__', '__format__', '__ge__',
'__getattribute__', '__gt__', '__hash__', '__init__',
'__init_subclass__', '__le__', '__lt__', '__module__',
'__ne__', '__new__', '__reduce__', '__reduce_ex__',
'__repr__', '__setattr__', '__sizeof__', '__str__',
'__subclasshook__', '__weakref__', '_item_action',
'activate_focus', 'call_slot', 'classes', 'click',
'click_item', 'client', 'close', 'create', 'current_editor',
'dclick', 'dclick_item', 'drag_n_drop', 'edit_item',
'editor_class_names', 'grab', 'keyclick', 'map_position_from',
'map_position_to', 'model', 'move', 'oid', 'path', 'properties',
'resize', 'select_item', 'set_properties', 'set_property',
'shortcut', 'wait_for_properties']Взаимодействие с элементами дерева осуществляется точно таким же образом как и в случае с таблицей, доступ к элементу осуществляется по пути до него, путь передаётся в item_by_path() в виде списка.
Алиасы
Вы уже наверняка заметили, что пути до элементов интерфейса могут быть очень длинными и неудобочитаемыми, поэтому в funq предусмотрена возможность использования алиасов, позволяющих выделить имена в отдельный файл и многократно уменьшить дублирование.
Создадим файл example.aliases и заполним его следующим содержимым
commonPath = MainWindow::centralWidget::QTabWidget::qt_tabwidget_stackedwidget::QSplitter::TransferListFiltersWidget::QScroll
table = {commonPath}::qt_scrollarea_viewport::QFrame::StatusFilterWidgetТеперь мы можем передать example.aliases в клиент и использовать короткие имена
...
funq = FunqClient("127.0.0.1", 9999, "example.aliases")
table = funq.widget('table')
...Работа с меню "Файл"
В последней версии funq нельзя достучаться до этой части интерфейса. Данный момент является для меня критичным, потому что без него невозможен автоматический запуск и первичная настройка тестируемого приложения. Решением пока что является костыль в виде pyautogui, что приемлемо, так как он необходим только в нескольких местах.
Заключение
Я намеренно не рассказываю про возможность запуска тестов с помощью nosetests, для которого в funq есть плагины, полагая, что лучше использовать pytest, так как он более распространён, имеет больше возможностей и активно развивается.
Надеюсь, что эта статья поможет тем, кто хочет начать тестировать QT GUI, но не может найти подходящего инструмента.