Aleron75 21 апр в 14:50Mixture of Experts: когда нейросеть учится делегироватьУровень сложностиСреднийВремя на прочтение8 минКоличество просмотров1.4KБлог компании Data Feeling SchoolМашинное обучение*ТуториалВсего голосов 8: ↑8 и ↓0+8Добавить в закладки11Комментарии3
Aleron75 22 апр в 19:34Показать предыдущий комментарийGelu чаще используют в NLP. Тут же пример был для простоты вычислений и скорости. Задача CV решалась. Так что выбор не особо критичен в данном случае!
DarkSold 26 апр в 15:25Комментарий был измененПоказать предыдущий комментарийGelu и в CV дает отличные результаты, наравне с silu (последние SOTA тому пример). Потери в скорости незначительные в сравнении с кол-вом процентов, насколько улучшатся метрики.
Mixture of Experts: когда нейросеть учится делегировать