Языковые модели как двигатель прогресса: необычные применения для GPT-3



    В начале лета разработчики из OpenAI представили языковую модель GPT-3, созданную для написания связного текста на основе заданного материала. Её обучали на 570 гигабайтах содержимого веб-страниц, википедии и художественной литературы, что почти в 15 раз превышает объем датасета для GPT-2. Модель отлично пишет стихи и прозу, умеет переводить на некоторые языки, разгадывать анаграммы и отвечать на вопросы по прочитанному материалу. Творчество языковых моделей становится всё труднее отличить от настоящего текста, и GPT-3 не исключение. Например: Как я, специалист по ИИ, на ИИ-текст купился.

    Но особенность GPT-3 не только в крутой работе с текстом — это не особенно выделяет её среди остальных моделей. На самом деле её возможности кажутся безграничными, а примеры поражают. Судите сами: получая на вход простейший императивный запрос, GPT-3 может писать код, верстать, составлять запросы, вести учёт, искать информацию и многое другое.

    Осторожно, трафик!

    Код


    Достаточно скормить модели пару обучающих примеров, и она сможет писать небольшие конструкции вроде верстки или описания ML-моделей:

    Генератор вёрстки в JSX

    Эту демку написал Sharif Shameem как прототип фронтенд-конструктора. Получить доступ к ней можно, заполнив эту форму.

    Императивная вёрстка

    Похожая версия от того же автора. Кажется, эпоха wysiwyg'a скоро закончится.

    Создание модели машинного обучения

    Восстание самовоспроизводящихся машин уже не за горами!

    SQL запросы из текста

    Вряд ли модель обучена всей мощи SQL, но простые запросы она парсит легко, а это уже неплохо.

    Регулярные выражения

    Эта демка работает не совсем корректно, но уже должна быть исправлена. Записаться на тест можно тут.

    Дизайн


    Плагин для Figma

    Уже нашумевшая в интернете демка плагина для Figma, собирающая дизайн приложений по текстовому запросу.

    Продвинутая версия

    “В целом, я очень впечатлен, что модели GPT-3 способны выдавать синтаксически правильный JSON исходя из всего двух-трех примеров. Несмотря на сложность самого JSON, GPT-3 работает корректно более чем в 90% случаев."
    Ветка в твиттере

    Текст


    Рерайтинг и кликбейт

    Здесь же можно преобразовать свой текст под стили разных писателей или даже сделать из него кликбейтный заголовок.

    Email-автоответчик

    Подстраивается под авторский стиль и отвечает по заданным пунктам. Для тех, у кого нет времени на формальности.

    Разное


    Google Spreadsheets

    Универсальная функция =GPT3() — мультитул для таблиц. На момент записи демки умела искать население в штатах, ники людей в твиттере и место их работы, и выполняла различные подсчёты.
    Уже шутят про следующий уровень, функцию =DOMYWORK(). Вкалывают роботы...

    Расчеты и финансовая отчетность

    Вы описываете свои транзакции (в том числе довольно сложные), модель парсит их в скрипт на питоне, который заполняет/обновляет гугл-таблицу. Я не бухгалтер, но по-моему это очень круто, особенно для пет-проекта, написанного на выходных.

    Мемы

    Иногда выходит и правда неплохо! Впервые после лебедевских логотипов мемы от искусственного интеллекта способны конкурировать с созданными вручную.

    Заключение


    Функционал GPT-3 не ограничен машинными текстами. Разработчики из самых разных направлений встраивают эту модель в свои инструменты, и уже можно ожидать новую волну стартапов на её основе. К сожалению, сейчас GPT-3 доступна только по инвайту от OpenAI в рамках бета-тестирования, но позже её откроют для коммерческого использования. Некоторые демки доступны по записи, так что поиграться с моделью можно уже сейчас.

    Всё чаще звучат страшилки об искусственном интеллекте, заменяющем программистов, и похоже что рано или поздно это всё-таки случится. Поживём — увидим.



    На правах рекламы


    Многие наши клиенты уже оценили преимущества эпичных серверов!
    Это мощные виртуальные серверы с процессорами AMD EPYC, частота ядра CPU до 3.4 GHz. Максимальная конфигурация позволит оторваться на полную — 128 ядер CPU, 512 ГБ RAM, 4000 ГБ NVMe. Поспешите заказать!

    VDSina.ru — хостинг серверов
    Серверы в Москве и Амстердаме

    Похожие публикации

    Комментарии 11

      +1
      Почему бы не залить на youtube? (Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:79.0) Gecko/20100101 Firefox/79.0)
      Скрин одного видео
      image

        –1
        Arch linux, Firefox — работает. Может вы каким-нибудь uMatrix эти видео себе заблокировали?
          +1
          В любом случае сервисы, подобные youtube, позволили бы посмотреть видео с не очень хорошим интернетом, выбрав соответствующее качество и проблемы бы отстутствовали, практически с любыми браузерами.
        +11
        Начнется эра великого разделения интернета на загаженную созданным нейросетями инфомусором помойку для «простолюдинов» (сегодняшние масштабы покажутся милой детской шалостью) и закрытых сообществ, куда пускают по знакомству. Пропаганда, фейки, мошенничество, взойдут на иные, поныне невиданные вершины.
          +2
          По моим ощущениям эта эра давно уже наступила. Ждем новую волну статей про P2P сети и независимый интернет. А потом волнения из-за гонений на альтернативные сети. Потому что якобы… ну вы поняли.
            0

            Да это же версификатор из 1984 Оруэлла в чистом виде.
            Вот что смущает — так это закрытость всей системы, API у них в закрытой бэте, и даже эти демки доступны лишь по вейтлисту. Вполне возможно что нам показывают только лучшие результаты, а в большинстве случаев сеть "лажает" как и все похожие технологии до неё.

            +1
            Где саму модель потыкать? А видосикам верить себя не уважать. Проект задумывался быть открытым, а пока кроме открытого хайпа никакой открытости не видно, даже прошлой версии нигде не потыкать.
              +3

              Выглядит очень неплохо.
              Даже непонятно, есть ли у данной модели ИИ общего назначения, или это лишь некоторого рода переводчик.


              Примеры, связанные с программированием, пока выглядят как ещё один язык программирования, очень близкий к английскому. Пока ещё надо знать, что такое div и что у него можно менять фон.

                +2
                Даже непонятно, есть ли у данной модели ИИ общего назначения, или это лишь некоторого рода переводчик.

                Трудно сказать, что такое ИИ общего назначения. Я бы не поручился за себя. Кто знает, может мы откроем что наши мозги это просто немного более продвинутые модели. Ну а конкертно данная моедль, скорее интерполирует по тому гигантскому объему данных, которые она заучила. Она видела похожие примеры, видела таблицы, запомнила факты из википедии. Хорошее на данную тему видео (язык английский)
                0
                Всё чаще звучат страшилки об искусственном интеллекте, заменяющем программистов, и похоже что рано или поздно это всё-таки случится.
                Нейросети скорее станут полезным инструментом для генерации каких-то типичных конструкций по словесному описанию, особенно для всяких gui и уязвимостей в них.
                  0
                  ничего не видно

                  Только полноправные пользователи могут оставлять комментарии. Войдите, пожалуйста.

                  Самое читаемое