Зачем проектировщику-архитектору условной резидентской многоэтажки знать тонкости и детали того как джамшуты будут ложить кирпич и возводить стены?
Проектировщик в строительной сфере должен вникать в детали. Они реально ездят на объекты и нелитературно ругаются со строителями :). Называется "архитектурный контроль" или "авторский надзор".
Имхо, в этом случае (и в контексте статьи в целом) можно дальше дописать: "Задай юзеру как можно больше вопросов, касающихся деталей реализации. Используй инструмент askQuestion".
Даёт больше понимания, что AI делает, где стоит, а где не стоит переусложнять, и, в целом, возвращает контроль над процессом :)
Нет, в статистике взвешенное ансамблирование повышает качество предсказания даже самой лучшей предсказательной модели. Особенно если прогнозы разных моделей имеют разную природу, не коррелированы (эксперты приносят свою разную экспертизу).
Давно есть adversarial validation. Одна сеть генерирует, а другая угадывает - сгенерировано, или реальное изображение. И так продолжается, пока не удастся сгенерировать изображение, проходящее такой тест.
Ну вот, сделают быстренько (за 5 лет говорят, да?) прорыв в термоядерном синтезе, и все энергозатраты экспоненциально уменьшаться.
Вместо ископаемого топлива перейдем на гораздо более энергоёмкую, и экологически чистую, водичку.
(Но вот только, если это всё будет развиваться действительно экспоненциально быстро, то там, к сожалению, возникает ограничение в виде сценария "Кин-Дза-Дза".)
Вы имеете ввиду, что престарелые олигархи все свои непосильным трудом нажитые богатства будут готовы отдать условному Deepmind за право пожить ещё дополнительные хоть несколько лет? :)
Да, такое перераспределение богатств возможно. Но они быстро закончатся :)
Любая инновация сейчас требует многомиллиардных инвестиций недоступных человеку с паяльником. Просто тоска берет. :-(
Просто нужно было давно переходить на новый уровень абстракций и масштабируемости. Софт позволяет реализовывать гораздо более сложную логику, чем позволяло железо. И эту логику за счёт копирования можно продать в гораздо большем количестве, чем можно было продавать поштучно спаянного железа.
Последние инновации в области ИИ позволяют масштабировать уже даже само создание логики.
Так что именно сейчас, на новом ветке технологический революции (или эволюции?), мы как-раз и наблюдаем уникальные возможности создания коммерчески востребованных инноваций, доступных даже для отдельных "соло-энтерпренёров". :)
У сложных систем с множеством не предсказуемых обратных связей возникают так называемые "эмерджентные свойства". У отдельных элементарных элементов системы этих свойств нет, а у системы в целом - возникают. Также, как нет никакого разума и у отдельного, достаточно простого, нейрона.
"Удивительно, что кто-то считает, будто недавние успехи статистических языковых моделей имеют хоть какое-то отношение к интеллекту или даже к лингвистике"
- Ноам Хомски
Многие считают, что в 95 лет классик не до конца понимает что из себя представляют современные большие языковые модели, не отслеживает актуальные научные работы. Считают, что он судит о LLM по старым n-gram-моделям и не понимает явления обобщающей способности больших языковых моделей.
Существует также понятие эмерджентных свойств сложных систем, наличие у сложных систем свойств, не присущих её компонентам по отдельности. Часто говорят, что примером эмерджентных свойств как раз и является сознание.
Явно не верны его тезисы об отстутсвии вклада открытий в сфере LLM в лингвистику.
Некоторые считают, что, возможно, в такой сознательно провокативной манере он пытается привлечь большее внимание к необходимости работ на стыке глубокого обучения и (психо)лингвистики. (Он известен своей провокативной позицией по многим общественно-политическим вопросам.)
Подбираем параметры на 24 годе и ранее, тестируем на 25. Смотрим как по всем стратегиям наступает плато.
Если тестировать по 150 тыс. стратегий в секунду, то и в 25-м году 1/3 из них вверх тоже пойдет. А треть от той трети и в 26-м. Так что все эти тестирования да валидации на отложенных выборках - не панацея ))
Нет, это ещё только начало. Дальше нужно ещё делать перебор, генетическую оптимизацию всевозможных комбинаций, условий, решающих правил, на основе различных индикаторов с разными параметрами. Чтобы софт сам искал оптимальную торговую стратегию. Вот где настоящий Грааль. Просто оптимизацией параметров N количества индикаторов вы таких красивых (на трейне) кривых доходности не получите ;)
Всё нормально будет со студентами с их кредитами. Их кредиты просто в очередной раз спишут.
О чём действительно стоит подумать полисимейкерам, так это то, что, во все времена большое количество умных, но не находящих себе высокооплачиваемой работы молодых людей становились мощной революционной силой.
Этот график популярен, и манипулятивен. Производительность труда на графике для "Основных секторов экономики", включающих, производство (промышленность, строительство, добыча, и т.д.) + услуги (торговля, финансы, здравоохранение, и т.д.). А зарплаты на графике приведены для работников, занятых именно в производстве, и только лишь товаров.
Экономика США в этот период как раз начала переходить к постиндустриальной (стал расти сектор услуг, производство стало переноситься в Азию). А производительность труда больше всего росла именно в секторе услуг.
Ещё не упёрлись.
Голодной не умрут. От ничего-не-делания - может быть :)
А остальные, кто захочет, будут заняты "общественно-полезными работами" :)
Цель - выбраться с холодного туманного острова :)
Но закономерность есть - южные народы действительно живут более расслабленно :)
Проектировщик в строительной сфере должен вникать в детали. Они реально ездят на объекты и нелитературно ругаются со строителями :). Называется "архитектурный контроль" или "авторский надзор".
Имхо, в этом случае (и в контексте статьи в целом) можно дальше дописать: "Задай юзеру как можно больше вопросов, касающихся деталей реализации. Используй инструмент askQuestion".
Даёт больше понимания, что AI делает, где стоит, а где не стоит переусложнять, и, в целом, возвращает контроль над процессом :)
Имхо, Вы начинаете с неправильной пресуппозиции. На самом деле люди-с-баблом не дураки. Иначе они давно уже не были бы людьми-с-баблом ))))
Нет, в статистике взвешенное ансамблирование повышает качество предсказания даже самой лучшей предсказательной модели. Особенно если прогнозы разных моделей имеют разную природу, не коррелированы (эксперты приносят свою разную экспертизу).
Давно есть adversarial validation. Одна сеть генерирует, а другая угадывает - сгенерировано, или реальное изображение. И так продолжается, пока не удастся сгенерировать изображение, проходящее такой тест.
Обычно слова "должен", "не должен" подсвечивают моменты, где есть зоны роста для построении более эффективной картины мира :)
Ну вот, сделают быстренько (за 5 лет говорят, да?) прорыв в термоядерном синтезе, и все энергозатраты экспоненциально уменьшаться.
Вместо ископаемого топлива перейдем на гораздо более энергоёмкую, и экологически чистую, водичку.
(Но вот только, если это всё будет развиваться действительно экспоненциально быстро, то там, к сожалению, возникает ограничение в виде сценария "Кин-Дза-Дза".)
Вы имеете ввиду, что престарелые олигархи все свои непосильным трудом нажитые богатства будут готовы отдать условному Deepmind за право пожить ещё дополнительные хоть несколько лет? :)
Да, такое перераспределение богатств возможно. Но они быстро закончатся :)
Просто нужно было давно переходить на новый уровень абстракций и масштабируемости. Софт позволяет реализовывать гораздо более сложную логику, чем позволяло железо. И эту логику за счёт копирования можно продать в гораздо большем количестве, чем можно было продавать поштучно спаянного железа.
Последние инновации в области ИИ позволяют масштабировать уже даже само создание логики.
Так что именно сейчас, на новом ветке технологический революции (или эволюции?), мы как-раз и наблюдаем уникальные возможности создания коммерчески востребованных инноваций, доступных даже для отдельных "соло-энтерпренёров". :)
У сложных систем с множеством не предсказуемых обратных связей возникают так называемые "эмерджентные свойства". У отдельных элементарных элементов системы этих свойств нет, а у системы в целом - возникают. Также, как нет никакого разума и у отдельного, достаточно простого, нейрона.
Люди, которые активно используют сети, например, для вайб-кодинга, этот прогресс чувствуют.
И открытые веса или закрытые - это вопрос не просто лицензии. Это вопрос децентрализации, демонополизации рынка.
Многие считают, что в 95 лет классик не до конца понимает что из себя представляют современные большие языковые модели, не отслеживает актуальные научные работы. Считают, что он судит о LLM по старым n-gram-моделям и не понимает явления обобщающей способности больших языковых моделей.
Существует также понятие эмерджентных свойств сложных систем, наличие у сложных систем свойств, не присущих её компонентам по отдельности. Часто говорят, что примером эмерджентных свойств как раз и является сознание.
Явно не верны его тезисы об отстутсвии вклада открытий в сфере LLM в лингвистику.
Некоторые считают, что, возможно, в такой сознательно провокативной манере он пытается привлечь большее внимание к необходимости работ на стыке глубокого обучения и (психо)лингвистики. (Он известен своей провокативной позицией по многим общественно-политическим вопросам.)
Почти про все новости можно так написать ))
Если тестировать по 150 тыс. стратегий в секунду, то и в 25-м году 1/3 из них вверх тоже пойдет. А треть от той трети и в 26-м. Так что все эти тестирования да валидации на отложенных выборках - не панацея ))
Нет, это ещё только начало. Дальше нужно ещё делать перебор, генетическую оптимизацию всевозможных комбинаций, условий, решающих правил, на основе различных индикаторов с разными параметрами. Чтобы софт сам искал оптимальную торговую стратегию. Вот где настоящий Грааль. Просто оптимизацией параметров N количества индикаторов вы таких красивых (на трейне) кривых доходности не получите ;)
Всё нормально будет со студентами с их кредитами. Их кредиты просто в очередной раз спишут.
О чём действительно стоит подумать полисимейкерам, так это то, что, во все времена большое количество умных, но не находящих себе высокооплачиваемой работы молодых людей становились мощной революционной силой.
Этот график популярен, и манипулятивен. Производительность труда на графике для "Основных секторов экономики", включающих, производство (промышленность, строительство, добыча, и т.д.) + услуги (торговля, финансы, здравоохранение, и т.д.). А зарплаты на графике приведены для работников, занятых именно в производстве, и только лишь товаров.
Экономика США в этот период как раз начала переходить к постиндустриальной (стал расти сектор услуг, производство стало переноситься в Азию). А производительность труда больше всего росла именно в секторе услуг.