Pull to refresh
8
0
Муаммар Аль-Шедиват @Laytlas

Пользователь

Send message
Безусловно, это самый важный аспект лекции, без которого она абсолютно теряет смысл!
Да, в принципе, понятно. Но вообще, это NER в чистом виде. Можно нагенерировать множество фичей и обучить на них логистическую регрессию. В общем, подходов море!
Напротив! Чем более человек религиозный, тем меньше времени он тратит на компьютерные игры, просмотр бесполезных видео в сети, бессмысленное общение и т.п. Накопленное время он тратит либо на поддержание религиозности, либо вливает в научное/рабочее русло.
На самом деле я сделал более общий, NLP-шный, подход, который работает в зависимости от чистоты данных, на которых все обучается. Но статья не об этом была, поэтому я и описывать не стал.
Я не сказал, что оно сложное, но оно не настолько очевидное, как кажется. Человек может задать «кто такой Чак Норрис» или «сколько дней в високосном году». Вы собираетесь руками вбивать всевозможные префиксы для поиска? Это какое-то brute-force решение.
В целом, вы правы, что в идеале процесс декодирования с хорошей языковой моделью должен отсеять все варианты типа «зеленый трава», но на практике это не так, поясню почему.
Обычно декодирование происходит с широким бимом, так что если слова звучат примерно одинаково, единственное отличие будет в языковой модели, а она не создаст такой большой разницы, чтобы вытолкнуть плохую гипотезу за пределы бима. А так как я вообще при оценке конфиденса не учитывал графовые веса (эксперименты показали, что это бессмысленно), то еще раз поиспользовать языковую модель было просто необходимо!

Что же насчет построения языковой модели на фонемах, то она никак не решает проблему, а, напротив, может ее усугубить. Возьмите две фразы «черный кофе» и «черная кошка». И пусть так случится, что в нашей языковой модели префикс «черная ко...» встречается чаще, чем «черный ко...». В итоге вы получите, что даже если человек скажет «черный кофе», такая языковая модель постарается исправить фразу на «черная кофе».
Не судите чужую культуру с точки зрения своей. Не стоит говорить, что «мы обогнали их в развитии, бла-бла-бла».
Звучит это примерно как «Самая лучшая еда — гамбургер! Что?! Ты ешь еще гречку? Чувак, да ты отстал в развитии, это же прошлый век».
P.S. Да, законы у них более «жесткие» с точки зрения современного европейца, зато у них нет Кончит и Брейвиков.
Задачи были и на семинарах, а также и убийственные домашки, которые мы ТЕХали днями).
А лекции этого года не выложили по причине искрометных шуток Райгора на тему «Есть два типа задач: задача о том как набрать и задача о том, как набраться» (так он называл задачи о разбиениях чисел на слагаемые)?)
Фамилия создателя сортировки многое говорит о нем. =)
«Извините, не смог удержаться.» — я уж начал думать, что вы нам покидаете ссылочек на новые картинки слоупоков…
Приведу вам простой пример.
Был такой математик, звали его Фурье. Наверное каждый краем уха слышал что-то о рядах Фурье. Вы можете погуглить даты жизни Фурье и понять, что достаточно мощное применение в жизни его работы получили лишь спустя большое количество времени. Так например для сжатия картинок формат .jpeg использует разложение в ряд Фурье.
Вы можете найти множество подобных примеров, где «абстрактная бесполезная хрень» позже находила серьезное применение.
Да, это правда, что мозгу бывает очень лениво заниматься тем, чему он не видит явного применения в жизни, но, это не значит, что это какая-то «бесполезная хрень».
Не в первый раз, те же шахматы…
Волков бояться — в лес не ходить. Это про вас.
Победителя можно было назвать еще до начала соревнований. Этот белорус не человек =).
Я араб, и мне за этих ребят, честно говоря, стыдно.
Все сразу стало ясно!
1
23 ...

Information

Rating
Does not participate
Location
Москва, Москва и Московская обл., Россия
Works in
Date of birth
Registered
Activity