В микроблогах предлагают угадать по списку референсов, кто написал научную работу.

Список состоит из работ Юргена Шмидхубера — одного из самых цитируемых исследователей ИИ. На Google Scholar у него более 200 тыс. цитирований, индекс Хирша — 116.

Шмидхубер не стесняется своего статуса. Он даже хвастает им у себя на странице на сайте Института исследований искусственного интеллекта Далле Молле. Страница называется «Все самые цитируемые нейросети построены на работе, выполненной в моих лабораториях». В микроблоге Шмидхубер ещё более скромен: он говорит «нашей работе», а не «моей».

Вообще, преувеличить роль Шмидхубера сложно. Он мог бы побороться с Яном Гудфеллоу за право называть себя изобретателем генеративно-состязательных сетей.

Трансформеры — тоже развитие идей Юргена. 26 марта 1991 года он представил технику neural fast weight programmers. Аналог из наших дней — трансформеры с механизмом внутреннего внимания. Разве что ключ и значение в 1991 году назывались FROM и TO, соответственно. Как известно, термин «трансформеры» закрепился из работы 2017 года «Attention Is All You Need» Ашиша Васвани и других.

Впрочем, Юрген признаёт: это лишь демонстрирует ограниченность и самозацикленность англоязычного мира. На деле глубинное обучение зародилось в 1965 году в «Кибернетических предсказывающих устройствах» Алексея Ивахненко и Валентина Лапы академии наук УССР, считает Юрген.

Что касается документа со скриншота, это работа «One Big Net For Everything» 2018 года. Написал её тоже Шмидхубер.

Индонезиец рассказал на Reddit, что ему по ошибке продали процессор i7-14700K. Как пишет пользователь PantatRebus, он три раза спросил, продаётся ли процессор, и все три раза ему ответили утвердительно.

14700K стоил 7 450 000 индонезийских рупий (эквивалент 480 долларов США).

В i7-14700K 20 ядер (8 P-ядер и 12 E-ядер) на 28 потоков. Максимальная частота работы — 5,6 ГГц, что явно вызовет интерес у геймеров.

Выставлять этот товар на полке и уж тем более его продавать — крупная ошибка со стороны магазина. Intel лишь готовится выпустить i7-14700K, официального релиза пока не было. Сейчас образцы процессора находятся разве что у обзорщиков на тестировании, которые временно не могут ничего рассказывать о продукте.

Удачливый индонезиец никаким эмбарго не подчиняется, поэтому поделился скриншотами CPU-Z, Cinebench 2024 и HWiNFO. На данный момент это первые бенчмарки i7-14700K.

Создатели Raspberry Pi показали, как выглядел прототип пятой версии одноплатного компьютера. На этой печатной плате тестировался RP1 — кастомный чип, который стал новинкой Raspberry Pi 5.

Южный мост RP1 управляет внешними устройствами. Выделение функций ввода-вывода на отдельную микросхему не только помогло разгрузить систему на кристалле, но и упростило разработку.

Raspberry Pi 4 вышла четыре года назад, но RP1 разрабатывали с 2015. Изначально внутри компании поговаривали, что RP1 поставят в Raspberry Pi 3B+, затем проект сдвинули на Pi 4, но RP1 был готов только для Raspberry Pi 5.

Кстати, именно с этой задержкой связано то, как порты USB и Ethernet расположены на пятой модели как на 3B+, а не на 4: распиновку чипов планировали с прицелом на B+. В центре у Raspberry Pi 5 расположены дорожки для четырёх линий шины PCIe. Двигать их было нежелательно.

В 2015 году планировалось использовать незадействованные каналы MIPI камеры и дисплея на BCM2837 для передачи гигабитного Ethernet и других быстрых интерфейсов. Система на кристалле BCM2837 стояла на третьей модели одноплатника.

Однако на Raspberry Pi 4 поставили новый, более мощный чип BCM2711, который включил в себя эти интерфейсы и содержал контроллер Ethernet. Тем не менее разработка RP1 всё равно продолжилась. Стандарт связи с процессором поменяли на PCI Express.

За семь лет RP1 преобразился за две стадии прототипов в кремнии до релизной версии, которая контролирует периферийные устройства в Raspberry Pi 5.

Fred the Frenchy любит анализировать продукты Apple и электронику вообще. У себя в микроблоге он иногда публикует разбор кристаллов, где пытается выделить конкретные блоки и оценить сложность производства.

На этот раз энтузиаст добрался до A17 Pro, системы на кристалле смартфонов iPhone 15 Pro и 15 Pro Max.

Анализ указывает на отдельные элементы:

• Шесть ядер видеоускорителя выделены сизым.

• Кэш SLC (system level cache, не путать с single-level cell в твердотельниках) размечен жёлтым.

• Энергоэффективные ядра центрального процессора и его кэш — зелёным.

• Нейроускоритель Neural Engine — оранжевым.

• Два высокопроизводительных ядра и их кэш — красным.

• Наконец, серым размечен интерфейс для памяти LPDDR5x, фиолетовым — 10-гигабитный контроллер USB 3 и прочие интерфейсы ввода-вывода.

Дополнительно Фред прикидывает, что процент брака нового 3-нм техпроцесса составляет 40–50 %. При этом на одной пластине умещается всего 420–500 чипов — на 30–40 % меньше, чем у A16 Bionic. Это ещё сильнее увеличивает себестоимость A17 Pro.

В качестве причины этих и прочих проблем (неожиданно малый рост числа транзисторов на кристалле относительно предшественника и жалобы на перегрев) Фред называет то, что техпроцесс 3 нм ещё не оптимизирован до конца. TSMC надо браться за ум, чтобы успеть к M3, считает микроблогер.

А вот работу дизайнеров микросхемы — Тима Миллета и его команды — Фред оценивает высоко. Различные источники энергии находятся на кристалле физически далеко друг от друга, чтобы было удобнее отводить тепло.

Умеете ли вы быстро передвигаться между популярными и высокооплачиваемыми сферами? Пратик Такар умеет. Судите сами, за последние два года он сменил три направления, оставаясь в Coca-Cola Company:

• С января 2021 года — лидер отдела метавселенной.

• Позднее — глава отдела по кампаниям NFT.

• С июня 2023 года — глобальный руководитель направления генеративного ИИ.

В рамках своих обязанностей Такар запускал рекламные кампании в Web 3.0 и выпускал NFT. Все эти отрасли находились на пике популярности СМИ. Похоже, что Пратик каждый раз удачно менял роль в компании, когда очередная модная технология сходила на нет, уступая место чему-то ещё. Как прикидывают наблюдатели со стороны, годовой оклад маркетолога исчисляется миллионами долларов.

Впрочем, стоит учитывать, что его карьера шла к этому давно. Если судить по резюме, мимолётный хайпожор на деле уже больше десятилетия проработал в Coca-Cola Company и занимался, например, продвижением на рынке Азии.

Профессор Университета Дрекселя Дарий Гринберг выложил на arXiv.org 422-страничный конспект по теории графов. Документ на английском «An introduction to graph theory» рекомендует себя как материал на курс Math 530 в Дрекселе длиной в четверть. Текущая редакция датируется 2 августа 2023 года.

Рассматриваются простые графы и мультиграфы, эйлеровы циклы, гамильтоновы циклы, остовные деревья, матричная теорема о деревьях, теорема де Брёйна — Эренефест — Смита — Татта, правильная раскраска, теорема Турана, двудольные графы, теорема Менгера и теорема Галлая — Мильграма. Также включены около сотни задач (без решений).

Гринберг вообще любит свободно распространять информацию. У себя на странице на сайте университета он непринуждённо ссылается на книги на пиратской библиотеке Library Genesis.

arXiv:2308.04512

Джарет Баркетт [Jarett Burkett] представил LoRA для Stable Diffusion XL, которая помогает генерировать картинки в стиле инструкций «ИКЕА».

К многим предметам нидерландской компании приложены инструкции по сборке, выполненные в характерном стиле. Для простоты локализации товаров транснациональной сети магазинов слова на буклете (кроме названия) отсутствуют, что только усиливает запоминаемость образов. Поэтому икеевские инструкции любят пародировать за простоту и узнаваемость графического языка.

К файлам проекта Ikea Instructions Баркетт приложил примеры работ. С этой LoRA он сгенерировал как людей, персонажей или предметы (хиппи, Барби с Кеном, гамбургер), так и процессы (сон).

Забавно, что модель с удовольствием вставляет в инструкцию шестигранник даже там, где он вряд ли нужен. В примерах он появляется в гардеробе Кена.

huggingface.co/ostris/ikea-instructions-lora-sdxl

Страница на Civitai

Bing Chat AI заблокировала генерацию картинок с Дрейком. Если упомянуть Drake в запросе на картинку, фильтр по стоп-слову выдаст предупреждение о невозможности генерации.

Встроенный в чат генератор картинок DALL-E 3 от OpenAI хорошо приспособлен выдавать любые образы по запросу пользователя. Этим незамедлительно воспользовались сетевые шутники. Канадский рэпер в их воображении ржёт как конь над детьми в снежных шарах, пилотирует Евангелион или просто (видимо, фантазия кончилась) руководит Третьим рейхом.

Вообще, у Microsoft хватает проблем с новым инструментом. Bing Chat AI с трудом пытается отфильтровать башни-близнецы Всемирного торгового центра в Нью-Йорке, на которые повадились запускать самолёты с Марио и Спанч Бобом за штурвалом.

Комбо, где атаки 11 сентября проводит Дрейк, тоже есть.

Секта водохлёбов добралась до искусственного интеллекта. Любители посчитать расход аш-два-о до этого с удовольствием приводили статистику, сколько ценного вещества нужно для выращивания, к примеру, говядины. Получается страшное: на килограмм стейка нужно более 15 тонн влаги — куда больше, чем для выращивания бобов сои или пшеницы. Предполагается, что затем такими числами нужно стыдить наглых любителей вкусить чужой плоти.

На деле речь идёт про осадки. Дождь и снег всё равно выпадут на лужайку, будет на ней пастись корова или нет. А вот выпас скота качество почвы лишь улучшит. (Про негативный эффект от засева огромных полей монокультурой говорить не принято вовсе.) Также внутри бурёнки не встроен портал в параллельное измерение, куда вода исчезает — всё потреблённое она рано или поздно отдаст обратно.

Некий микроблогер приводит график, согласно которому на обучение GPT-4 ушло в разы больше воды, чем потребляет в неделю аквапарк. Вывод простой: эдак скоро пить нечего будет.

Впрочем, к твиту приделали успокоительную пометку сообщества. Огромная корпорация Microsoft, которая хостит вычислительные мощности OpenAI, тратит на охлаждение своих многочисленных вычислительных центров лишь одну стотысячную процента потребления пресной воды США.

С само́й статистикой мало кто спорит: на обучение предыдущей версии GPT, GPT-3, ушло 700 тонн воды.

Как обычно, речь идёт про расход. Вода при этом уходит в почву или атмосферу, но не исчезает с планеты. Очевидно, что из цикла обмена воду не изымают.

Инженер стартапа Airchat Сигил Уэн портировал GPT-2 на Apple Watch Ultra 2. Большая языковая модель запускается локально, прямо на запястье, на всех 4 ядрах нейроускорителя Neural Engine системы в корпусе Apple S9.

Здесь тяжело отыскать практическую ценность. Нейросеть пытается продолжать промпт. Для видеоролика выбор пал на фразу «The meaning of life is», которую GPT-2 развивает в связный текст с законченной мыслью. Генерация идёт медленно: заметно, что на токен уходит больше секунды. По достижении отметки в 30 токенов приложение падает.

Как предполагает Уэн, кончается память — у Ultra 2 всего 1 ГиБ ОЗУ. Автор проекта считает, что такая демонстрация на умных часах доказывает, что в дальнейшем часть вычислений искусственного интеллекта станет граничными (on edge), то есть будет выполняться в пределах конечных устройств.

Разработчик поделился произведённым на своём аккаунте GitHub.

github.com/Sigil-Wen/WatchGPT2

Разработчик Фрэнк А. Крюгер обратил внимание, что иконка «Пункта управления» в тулбаре macOS нагружает процессор на 1,0 %. Поначалу эта постоянная активность Фрэнка беспокоила слабо, и он её игнорировал.

Но любопытство одержало верх. Разработчик, похоже, поковырялся в «Мониторинге системы» и проанализировал процесс. Как оказалось, приложение постоянно перерисовывает свои компоненты SwiftUI — в том числе тогда, когда его интерфейс скрыт.

Впрочем, как заметили в комментариях, непрекращающаяся работа функции с выразительным названием [NSView _updateConstraintsForSubtreeIfNeededCollectingViewsWithInvalidBaselines:] может быть нужна для отзывчивости системы. Если постоянно повторно рендерить интерфейс, то получится выводить элементы в тот же момент, как пользователь их вызывает.

Когда Apple показывает новую фичу iMessage, это демонстрируется с участием фальшивой переписки. Как выглядит вымышленный мир этих рекламных скриншотов? Некто Макс задался таким вопросом.

Microsoft для подобного изобрела компанию Contoso с головным офисом на окраине Парижа и сложной корпоративной структурой. Конгломерат Contoso часто мелькает в справочных материалах Office.

В случае Apple проработанного лора нет. Более того, имена собеседников никогда не повторяются. (Исключение: некий John Bishop.) Имена принадлежат сотрудникам и подрядчикам Apple.

Частые сюжеты переписки:

• Коллеги и друзья весело проводят выходные вместе.

• «Как доехали?» Местоположения всегда расплывчаты.

• Планируем вечеринку. Иногда встречается лейтмотив незапланированной встречи.

• В последних презентациях идёт планирование проектов, но внерабочих. К примеру, обсуждают благотворительную раздачу еды.

Возможны ошибки и противоречия. Собеседник может сказать, что отдыхал в горах, а затем прислать прибрежную фотографию.

Вообще, в мире Apple все обожают скидывать фотографии и разглядывать снимки собеседника. «Скинь фотки» — частый возглас в чатах. Картинки, конечно, с фотостоков.

Сообщения зловеще позитивны и с идеально правильно расставленными знаками препинания. Собеседники добродушны и вежливы. В мире Apple никогда не встречаются слухи, ирония, скептицизм, подколки и сленг по типу «LOL» — именно то, что характерно для электронной переписки.

Макс выложил целую галерею фильшивой переписки из презентаций с 2011 по 2023.

Framework призналась, что компания не отвечает принципам устойчивости и возобновляемости. Вернее, производитель ноутбуков указал, что так дела обстоят у всех.

12 сентября Apple отметилась роликом про усилия компании по достижению углеродной нейтральности. Скетч шёл во время презентации iPhone 15 и вызвал недоумение у прессы. Длинная видеовставка показалась неуместной, актёрская игра топ-менеджеров — слабой, а сам посыл — очевидным экологическим маркетингом. В видеоролике Apple пообещала достичь полной углеродной нейтральности всех продуктов к 2030 году.

Компания Framework вчера в очередной раз обновила свой блог и неявным образом сделала отсылку к заявлениям Apple. Как сообщается, Framework завела отдельную страницу frame.work/sustainability, где собраны данные по экологическому обзору компонентов устройств. Этот анализ был заказан у Fraunhofer IZM.

Framework утверждает, что вся индустрия электроники «грязная»: в год она даёт миру по 50 млн тонн отходов. Поэтому подход Framework — создавать устройства, которые служат дольше. Упор делается на модульность, возможность ремонта и апгрейда руками обычного пользователя. Чтобы это было возможно, компания закладывает в продукты простоту разборки, а затем продаёт запасные детали и публикует руководства по ремонту.

В числе прочего также упоминается повторное использование отдельных частей. К примеру, недавно энтузиаст собрал на основе материнской платы ноутбука Framework портативный игровой компьютер а-ля Steam Deck.

Международная космическая станция ближе, чем кажется. Речь даже не про небольшую по космическим меркам высоту полёта относительно уровня моря (≈420 км). МКС регулярно общается с Землёй.

Специализированные форумы отслеживают частоты, на которых общается станция. Известно многое — вплоть до каналов связи конкретного модуля. Периодически проводятся сеансы связи с радиолюбителями в диапазоне УКВ.

Но это далеко не всё: доступна даже расшифрованная телеметрия. Информации настолько много, что получается воссоздать полную модель МКС, которая на Земле повторяет поворот солнечных панелей (BGA), систем приводов солнечных панелей (SARJ) и терморадиаторов (TRRJ). Подобным занимается ISS Mimic (github.com/ISS-Mimic/Mimic).

Проект моднявый: одноплатники Raspberry Pi и микроконтроллеры Arduino приводят в движение физическую модель, которую предлагается распечатать на 3D-принтере. Развитие продолжается, в будущем детализацию хотят увеличить.

Когда-то телеметрию НАСА выкладывала на сайте ISSlive.com. Сегодня стрим телеметрии ведётся усилиями ISS Mimic. На странице iss-mimic.github.io (или её русифицированной версии) собраны десятки разнообразных значений, обновляемых ежесекундно.

Вариант с красивым дашбордом в режиме прямого эфира рассказывает про, к примеру, энергосистему станции и состояние внутренней атмосферы. Есть даже интимные данные. Скажем, на момент написания этих строк бак мочеприёмника наполнен на 8 %, а к главному компьютеру американского сегмента подключены 6 ноутбуков.

Художник сайта 9to5Mac Иэн Зельбо обратил внимание, что стоимость ремонта стекла задней крышки в iPhone 15 Pro снизилась относительно предшественника. Иэн зашёл на сервисный портал Apple и воспользовался онлайн-калькулятором на странице.

Если на 14-й «прошке» замену задней крышки Apple оценивала в $500, то для iPhone 15 Pro сайт Apple обещает ремонт за $169. Для моделей Max разница схожая: вместо $549 для 14 Pro Max стало $199 для 15 Pro Max. С Apple Care+ ($10 в месяц) ремонт заднего стекла на 15 Pro вообще стоит $29.

Таким образом цена ремонта этой части iPhone Pro сравнялась с версиями не-Pro. На последних замена задней крышки также стоит $169 (15 и 14) и $199 (15 Plus и 14 Plus).

Иэн спекулирует, что причина — изменение конструкции смартфона: теперь на Pro можно снять только заднюю панель, а не менять всё. Его предположения косвенно подтверждает бывший сертифицированный ремонтник, который утверждает, что 12 и более ранние модели даже при небольшом поражении тыловой части требовали полной замены корпуса, но с новыми поколениями ход шёл к появлению более дешёвых опций.

В Android Health Connect есть класс SexualActivityRecord для отслеживания половой активности пользователя. Каждая запись — это отдельный половой акт. Записывается время соития, часовой пояс (если доступен), а опциональное поле ProtectionUsed указывает, использовалась ли защита.

Нет, это не шутка на День смеха. Недавно подобное обнаружилось в официальной документации.

SexualActivityRecord добавили в Health Connect в версии 1.1.0-alpha04, которая вышла 6 сентября. Google представила Health Connect в 2022 году, но до сих пор продукт из беты так и не вышел. Приложение Apple Health работает с 2014 года, и схожая сущность под именем sexualActivity присутствует и в HealthKit. Как и Google, Apple предусмотрела поле SexualActivityProtectionUsed.

Очевидно, что в приложениях о здоровье подобное нужно не ради хаханек, а для, например, календарей для пар, которые пытаются зачать. Но кто помешает пошутить на эту тему? К примеру, как записывать, сколько партнёров участвовало в активности? И вообще, нужно ли учитывать ситуации, когда их 0?

Вы идёте по пустыне Блэк-Рок, идёт дождь. Внезапно вы смотрите вниз. В грязи к вам ползёт менеджер грейда L6 из Google, приехавший на Burning Man. Вы наклоняетесь и переворачиваете его голое тело. Управленец лежит на спине, капли стучат по его рыхлому телу, он нализался психоделиков и не может встать без вашей помощи. Но вы не помогаете ему. Почему?

В июне AMD объявила, что компания — эксклюзивный партнёр Starfield на ПК. В результате в вышедшей недавно игре нет поддержки масштабирования DLSS, которая работает только на видеокартах компании Nvidia. Вместо этого присутствует FSR.

FSR не привязана к конкретному производителю видеоускорителей и работает хоть на Intel HD Graphics. С другой стороны, многие геймеры предпочитают именно апскейлер Nvidia. С ними соглашаются обзорщики. К примеру, в тестах Hardware Unboxed на 26 различных играх производительность DLSS 2 уверенно обошла таковую FSR 2. При этом доля Nvidia на рынке ПК достигает 87 %.

Но насколько важен для геймеров DLSS в Starfield?

На Nexus Mods сейчас зарегистрированы уже 329 разнообразных модов для Starfield. Из них как минимум два (1, 2) заменяют FSR на DLSS или XeSS.

Оба этих мода сейчас находятся в первой пятёрке по голосам. Если сортировать по количеству скачиваний, они оба входят в топ-6.

Инженер и сооснователь компании Glean Дебаргья Дас поделился утечкой с расценками на ChatGPT Enterprise. Недавно, в конце августа, OpenAI объявила о новом тарифе на свои продукты, но стоимость на назвала. Вместо этого была применена излюбленная у гуру продаж тактика «цена по запросу».

Согласно твиту Дебаргья, OpenAI готова предоставить тариф Enterprise, если клиент хочет купить подписку на год от $100 тыс. В утечке нет точной формулы ценообразования. Зато названы два значения: $60 за пользователя в месяц, если их в организации 150, или $250 за каждого в месяц, если пользователей 50.

Также Дебаргья сообщает, что цена опускается даже ниже, но явно не меньше $20 за пользователя в месяц.

Выгоднее это или нет, чем платить за API по факту использования? Зависит от конкретных сценариев. Пример дорогого, но реалистично небольшого запроса к сервисам OpenAI: всего лишь один ответ на 2000 токенов с вводом в систему 20 000 токенов в GPT-4 32К обойдётся в почти полтора доллара (20·0,06 + 2·0,12 = 1,44). С другой стороны, запросы в «младшего брата» GPT-3.5 Turbo 4К дешевле в сорок с лишним раз, а много на контекст в модели на 4 тысячи токенов потратить просто не получится.

Рекорд самого старого используемого программного обеспечения принадлежит либо системе бронирования авиабилетов Sabre 1960 года, либо американским налоговикам.

Уже около 60 лет налоговая служба США использует введённый в 1962–63 годах софт для обработки цифровых форм Individual Master File. Впрочем, если фокусироваться на заскорузлости американских госорганов, легко упустить, каким прорывом была IMF.

Постоянный федеральный подоходный налог в США ввели в 1913 году. Каждый десятый налогоплательщик попадал под детальный аудит. Дело в том, что большинство жителей страны (≈97 %) на тот момент имели доход ниже облагаемого налогом, и проверять оставалось мало кого.

Несмотря на финансовые штормы двадцатых, доходы американцев росли. К тридцатым затраты госаппарата выросли, в сороковые частота налоговых проверок упала. Бурное развитие мейнфреймов в пятидесятых помогло создать систему налоговых возвратов.

В шкафах IBM System/360 с хранением данных на ленточных накопителях публика видела будущее. В СМИ пугали, что к 1966 году каждый налоговый возврат попадёт под зоркий глаз электронной машины. IMF умела обнаруживать странности в данных для допроверки и даже автоматически формировала письма с требованием скорректировать суммы. С 1963 по 1967 налоговые сборы выросли на $2,8 млрд.

Систему пытались заменить продуктом Customer Account Data Engine, но безуспешно. По сей день налоговики США обучают собственных специалистов для поддержания кода на Коболе и 20 миллионов строчек на языке ассемблера.