FlakyDetector — мой путь к созданию инструмента для ловли «нестабильных» тестов в Python

[@temadiary]

как вы определяете истинную причину нестабильности?
кажется что шум играет роль в конечно результате и далеко не в плюс.
вот есть тест который страдает от конкурентности, а попадёт в TIMING_ISSUE (ну та же гонка). а это всё из-за шума.

[@Artem7898]

Справедливое замечание.
Шум присутствует, поэтому классификатор учитывает несколько сигналов: повторяемость, AST-паттерны, типы операций и контекст. В спорных случаях ошибки действительно могут пересекаться, мы это учитываем при обучении и дальнейшем улучшении.

[@Kit-pit]

Так то классная идея!

Автор подчеркнул- проект еще дорабатывается!

Удачи!