Комментарии 10
Не раскрыта тема обработки изображений батчами.
Джентльмены, порекомендуйте мне такую вещь - идет некий процесс, смотрю на него камерой, нужно отслеживать скорость движения и положение нескольких точек и отдавать команды другому устройству, т.е. процесс в реальном времени. Что использовать?
Здравствуйте! Подскажите, какие библиотеки и какие нейросетевые решения могут понадобиться для оценки эмоционального и психического состояния человека с помощью компьютерного зрения?
Здравствуйте. Если речь про готовые решения, то есть, например FaceReader, SkyBiometry, Face++ и им подобные вещи. Если хочется сделать такое самому, то тут наверное сначала нужно решить будете ли вы определять эмоции только по лицу или же, допустим, по двигательной активности тела в видеопотоке. Если только по лицу, то первое, что приходит на ум это двухстадийный подход: сначала сделать детекцию лица, потом распознавание эмоций. Здесь подошла бы, например, архитектура YOLO. Если же работать с двигательной активностью, то в таких вещах применяли трехмерные сверточные сети, например Inception 3D, а также гибриды сверточных и рекуррентных сетей, например ResNet и LSTM.
Спасибо за статью - довольно подробный и интересный разбор с описанием функционала различной сложности.
В плане производительности существует ряд других альтернатив с быстрым препроцессингом изображений:
Kornia — библиотека компьютерного зрения