Как мы создавали self-service функционал проверки качества данных для ML-моделей

[ivankudryavtsev]

Будущее — за организацией контрольных мероприятий в контуре бизнес-заказчиков.

Проще надо быть… канцелярит протекает…

[seasadm]

А как это сформулировать по-другому?

[ivankudryavtsev]

Легко. Мы верим, что заказчики должны контролировать качество.

Уже не так круто звучит?

[seasadm]

Тут не сказано что заказчики контролируют. Тут сказано что контроль происходит на их инфре.

[ivankudryavtsev]

Но, зачастую, вопросам качества данных при разработке витрин уделяется недостаточно внимания. Это связано с тем, что требования к качеству данных не фиксируются в бизнес‑требованиях, а разработчик витрины/инженер данных не всегда досконально знает предметную область.

[Aeryukov]

Смысл в том, что насколько бы не был крут DE/DQ он не всегда в теме каких-то изменений, акций и тд. Только совместная работа с бизнесом может дать лучший результат. Светофор зажёгся красным, DQ с виду ничего подозрительного не увидел, и тут требуется помощь заказчиков. Можно потратить время и дойти до истины, а можно сразу получить ответ: это результаты бизнес-события Х.