Хабр Курсы для всех
РЕКЛАМА
Практикум, Хекслет, SkyPro, авторские курсы — собрали всех и попросили скидки. Осталось выбрать!
Как оказалось, Microsoft — не первая компания, которой удалось достичь подобного успеха. До нее примерно такое же количество баллов набрал ИИ от Alibaba.
или не понял, или не увидел: 100000 вопросов, а в статье говорится про человека в числе прошедших тест. 100к вопросов для человека? Да как на них вообще можно ответить?
Недавние эксперименты (Robin Jia and Percy Liang, 2017) приходят к тому же выводу в другой области: работе с языком. Различные нейросети были натренированы на поиск ответов на вопросы в задаче, известной как SQuAD (Stanford Question Answering Database), в которой целью служит подсветка слов в определённой фразе, соответствующих заданному вопросу. К примеру, в одном случае натренированная система впечатляюще правильно, определила квотербека из выигравшей Суперкубок XXXIII команды, как Джона Элвея, на основе изучения небольшого параграфа. Но Джиа и Лиян показали, что простая вставка отвлекающих от темы предложений (например, о якобы случившейся победе Джеффа Дина в другой игре серии) привела к обрушению качества работы системы. У 16 моделей медианные показатели успеха упали с 75% до 36%.
Корпорация Microsoft разработала ИИ, способный прочитать текст и ответить на вопросы о прочитанном