Комментарии 6
Отличная статья и хорошее, полезное дело!
Можно больше технических деталей? какая инфра под проект, сколько людей в команде, какой стек технологий. Если можно, то хотя бы примерный бюджет. Т.е. хочется понять размах проекта, сколько и чего надо под такие задачи.
как всё непросто оказывается, я всегда думал (уж простите обывателя), что язык жестов универсальный и понятен в любой точке планеты, а тут оказывается в рамках одного языка куча сложностей.
Почему выбраны трансформеры? можно разметить через медиапайп и упростить решение
Cамое главное в медиапайпе, что из-за блюра кистей рук он не будет срабатывать на многих кадрах, из-за этого сделать качественное предсказание не получится.
Прямо сейчас на Kaggle компания Google проводит соревнования в этом направлении. А разметку для кистей рук мы тоже предоставляем.
Ваше решение сможет показать хорошие результаты на соревновании Fingerspelling Recognition ? В примерах жесты показываются очень быстро
Посмотрел дата сет репозитория... формат данных описать совсем ложно было?
Slovo и русский жестовый язык