Слушайте, я сделал что-то подобное именно для задачи аудирование/ говорение. Думаю, автору проекта @HebrewGlotтоже будет интересно. Не сложная задача, на самом деле.
Аудирование.
Пользователь загружает аудио файлы, которые хочет прослушивать.
Обычно после прослушивания аудирования учитель даёт либо тесты для проверки, как учение понял аудио, либо просит пересказать в свободной форме.
Поэтому здесь такой user case:
Загрузили в сервис аудио
Можно его прямо в сервисе и слушать сколько угодно
Сервис сразу же его транскрибирует, но не показывает текст пользователю, просто сохраняет у себя.
Далее пользователь, когда уже достаточно послушал, переходит к этапу проверки
Здесь пользователю предлагается либо сделать тест либо пересказать
Тест на лету генерируется сервисом по транскрипции данного аудио и предлагается пользователю
Также пользователь может пересказать сам то, что услышил. Пока можно пересказ текстом, но в дальнейшем и с голоса снять изложение. Далее сервис также сравнивает с оригинальным аудио и видает отчёт:
Он показывает текст ученика и выделяет проблемные пункты: неправильное понимание оригинального аудио, ошибки орфографии, грамматики, указывает на неточность, избыточность или нехватку деталей, и выдает общий результат в процентах или баллах. Всё это покрывают возможности самых дешёвых llm моделей (я про подобный анализ текста)
2. Я эту опцию называю "Монолог"
Пользователь загружает в сервис некий текст: статью, пару страниц книги, и т.д
Пользователь начинает пересказывать о том, что прочитал в этом тексте. Естественно на иностранном языке, который изучает.
Идёт запись голоса, транскрипция, анализ на понимание текста (подобный анализу в аудировании)
В отчёте предоставляется текст транскрипции пользователя с выделенными ошибками, неточностями и т.п. И результирующий балл.
Я это делал для себя. Достаточно тривиальная задача, но, думаю очень полезная, другие разработчики могут тоже ее сделать как отличный, удобный сервис. Или добавить к сервису обучения.
Слушайте, я сделал что-то подобное именно для задачи аудирование/ говорение. Думаю, автору проекта @HebrewGlotтоже будет интересно. Не сложная задача, на самом деле.
Аудирование.
Пользователь загружает аудио файлы, которые хочет прослушивать.
Обычно после прослушивания аудирования учитель даёт либо тесты для проверки, как учение понял аудио, либо просит пересказать в свободной форме.
Поэтому здесь такой user case:
Загрузили в сервис аудио
Можно его прямо в сервисе и слушать сколько угодно
Сервис сразу же его транскрибирует, но не показывает текст пользователю, просто сохраняет у себя.
Далее пользователь, когда уже достаточно послушал, переходит к этапу проверки
Здесь пользователю предлагается либо сделать тест либо пересказать
Тест на лету генерируется сервисом по транскрипции данного аудио и предлагается пользователю
Также пользователь может пересказать сам то, что услышил. Пока можно пересказ текстом, но в дальнейшем и с голоса снять изложение. Далее сервис также сравнивает с оригинальным аудио и видает отчёт:
Он показывает текст ученика и выделяет проблемные пункты: неправильное понимание оригинального аудио, ошибки орфографии, грамматики, указывает на неточность, избыточность или нехватку деталей, и выдает общий результат в процентах или баллах. Всё это покрывают возможности самых дешёвых llm моделей (я про подобный анализ текста)
2. Я эту опцию называю "Монолог"
Пользователь загружает в сервис некий текст: статью, пару страниц книги, и т.д
Пользователь начинает пересказывать о том, что прочитал в этом тексте. Естественно на иностранном языке, который изучает.
Идёт запись голоса, транскрипция, анализ на понимание текста (подобный анализу в аудировании)
В отчёте предоставляется текст транскрипции пользователя с выделенными ошибками, неточностями и т.п. И результирующий балл.
Я это делал для себя. Достаточно тривиальная задача, но, думаю очень полезная, другие разработчики могут тоже ее сделать как отличный, удобный сервис. Или добавить к сервису обучения.