Исследователи Facebook разработали новый метод хранения информации искусственным интеллектом, который позволяет более экономно обрабатывать данные благодаря тому, что он «забывает» фрагменты сведений. Об этом сообщается на сайте компании.
Метод назвали Expire-Span. Согласно нему, фрагментам информации присваивается срок годности в зависимости от того, насколько они важны. Необходимость его создания исследователи объясняют тем, что самостоятельно ИИ не может определить, какие сведения важны, а какие — второстепенны. Из-за этого система обрабатывает их с одинаковой эффективностью, тратя на них равнозначные ресурсы.
Expire-Span прогнозирует и назначает степень полезности информации в определёном контексте каждый раз, когда ей предоставляют новый фрагмент. Эта степень напрямую влияет на отведённый период пригодности. Затем ИИ определяет дату истечения срока действия этой информации — чем она важнее, тем позже будет назначена дата истечения срока «годности». Кроме того, после каждого добавления новых данных ИИ переоценивает уже существующие сведения, повторно назначая им приоритеты и сроки хранения.
По мнению исследователей Анджелы Фан и Сайнбаяра Сухбаатара, новая методика позволят более эффективно использовать вычислительные ресурсы, необходимые для сортировки, хранения и обработки информации. Благодаря ней нейросети смогут дольше сохранять нужные сведения, постоянно очищая память от нерелевантной информации.
В качестве примера исследователи Facebook приводят обработку текстового массива данных. В зависимости от начальных условий, ИИ может быть поручено, например, выполнить задачу по предсказанию слов на основе текста. В таком случае нейросеть будет запоминать редкие слова, как имена или географические названия, и избавляться в изначальном массиве данных от наиболее часто употребимых, как союзы и предлоги. Expire-Span запомнит лишь обработанную информацию о том, как часто они встречаются в тексте, чтобы в будущем проводить вычисления уже на её основе, и «забывая» само многократное их употребление в тексте.
В Facebook уточнили, что пока разработка находится на ранней стадии. Команда разработчиков компании планирует разработать для искусственного интеллекта память, которая будет наиболее приближена по своим характеристикам к человеческой, и которая позволит изучать информацию намного быстрее, чем позволяют современные технологии.
