Займусь некропостингом, вдруг читающим дальше будет интересно )
Оставлю как отправные точки, что Во-первых, у фигур есть метод write_html позволяющий сохранить созданное в html-текст. Во-вторых есть plotly.offline, который насколько понимаю, делает примерно тоже самое c некоторыми нюансами.
У меня он под столом на работе стоит. Из примерно тех же соображений (дешевле) :D Но нам нужнее пока однопоток, поэтому вариантов немного
Охлад ему нужен лютый, факт. На предварительных тестах двухсекционная водянка под ним задыхалась. Трехсекционка держит. Даже пиковые 250Вт+
Там нюанс в том, что когда включаются все ядра, он просто по дефолтной конфигурации сбрасывает частоты., даже если запас по охлаждению есть. Плюс Е-ядра в принципе живут на меньшей частоте. При желании, богатом воображении и кошельке можно рискнуть поставить хоть в биосе хоть в XTU, чтобы держало всегда и всё, у меня такой нужды не было, поэтому не рисковал, не скажу насколько уверенно будет такое. Но тут уж как повезёт. 3365 вживую не гонял, не знаю, нам терять треть дури просто по частоте к сожалению не вариант, хотя на старших братьев поглядываем временами. Хотя если прикинуть банальной арифметикой, чот мне с трудом верится, что он удержит 64 потока на полных 4ГГц тоже уложившись в свои 250Вт. Пощупать бы вживую.. но где ж такое на пощупать найдешь (
Но если вашим товарищам важнее многопоточка, то конечно домашние камни это очень странный выбор, там реальных ядер-то восемь штук против 32 у xeon'а (я как-то из снобизма энергоэффективные за ядра не держу), даже смысла с серверными сравнивать нет, тем более что в сервер и несколько камней воткнуть можно (если модель по памяти позволяет)
Поколение-недоразумение. Обозвали бы уж честным 13 рефрешем и не насиловали журналистов..
Подняли частоты - ну ок, на эти 200мгц как понимаю примерно каждый первый камень и так гнался - после отработки производства можно отбраковку видимо потщательнее проводить.
Какой смысл в добавлении недоядер в семерку - вообще не понял, разве что в тестах померятся агрегатами. Пока задач нет и имеющихся восьми за глаза хватает. Как только появляется задача - вероятно уж лучше её на нормальное ядро сажать, теплопакет-то один на всех. И задействование всех ядер выносит этот пакет далеко наружу (вместе с охлаждением, которое мало когда готово к такому перепаду). И это все на фоне того, что "высокоинтеллектуальные" алгоритмы распределения задач по ядрам, по-прежнему, кроме пробивающего насквозь рука-лицо ничего не вызывают.
Зависит от задачи. В однопотоке он вполне держит свои частоты. Но если загрузить все (не дай боскх включая "энергоэффективное" недоразумение), то частоты просто бай дизайн упадут, там даже дело не в тепловыделении. Но если вам повезет найти экземпляр... :D
Не совсем, просто с появлением 48Гб модулей теже 4 планки стали давать не 128 а 192Гб. Они ретроспективно поменяли описания камней, в том числе старых линеек (что на мой взгляд, без дополнительных пометок отдает свинством)
Насколько я понимаю, сам камень-то адресовать может как и старшие братья до позеленения, появятся 64гб модули - еще поднимут..
Будучи убежденным "пека-боярином", и человеком, считающим приставки странным недоразумением, чудовищно усложнящим жизнь всей игровой индустрии, тем не менее хочу вступится за плойку
В 21 кажется году была ситуация, когда бетаверсия ммо от амазона new world просто сжигала старшие карты nvidia. Тоесть в стане пк-компонентов устройство для игр не просто отключалось или уходило в троттлинг, а просто умирало от игры. И это на фоне страшнейшего дефицита карт, при котором цены на этих старших монстров были заоблачными. Так что у всех бывают проблемы..
многоядерность — специфика железного устройства процессора- он состоит физически из нескольких ядер. её нельзя поддерживать, она или есть или её нет.
многопоточность — специфика программного устройства, позволяющая запускать на устройстве несколько параллельных потоков выполнимого кода (с оговорками)
hypertreading — особенность процессоров intel позволяющая за счет нескольких конвееров исполнения запускать "вроде-как" несколько потоков на одном ядре. это не маркетинговое название многопоточности ни разу. вы можете отключить HT и остаться с многопоточностью на современных процессорах. это слегка перпендикулярные понятия.
Это кстати отличный вопрос. История с larrabee вообще максимально странная. Я даже помню как тут на хабре был ряд статей перед "выпуском", в том числе от людей непосредственно принимавших участие в разработке. Все ждали, ждали, ждали… и так ничего не дождались.
Разве что чуть позже на серверном рынке вышли очень загадочные xeon phi в которые видимо часть наработок пошла, но они были столь загадочны, что я даже не слышал про живые проекты на них (кроме суперкомьютеров)
А вы много видите тех, кого погнали с работы под этим лозунгом? Мне пока скорее ситуация видится как "те кто работают с ИИ окажутся в более выгодной ситуации, чем те, кто с ним работать не умеет и не хочет учиться".
Да, для кого-то это может оказаться неприятным (но даже вряд ли сколь-нибудь фатальным в массе). Но это история последних сотен лет развития цивилизации, и ничего нового тут нет. Люди умевшие считать только на счетах вытеснены людьми с калькуляторами, а потом и с компьютерами, это буквально пример в моей семье, и даже там он не был как-то ужасным.
Просто любопытно, а какой ответ вы ждали? 3.5 не подключена к сети, если мы именно про openAI-модель, она не умеет в картинки, как четверка, я правда в некоторой растерянности… Описание фотографии может быть?
Давайте продолжим, если не возражаете, я по шагам буду продолжать )
Требование полноты графа, это вы конечно перестарались. В этом контексте бы и слабой связности навскидку хватило (кстати ваш алгоритм полноты не переживёт, можете проверить).
Но тогда еще нужно не забыть об ацикличности, а то возникнут проблемы
Это на мой взгляд довольно странное рассуждение.
Компаний делающих GPU две с половиной. GPGPU как направление на популярном рынке создано nvidia (это не решающий фактор, но право первопроходца часто имеет некоторое значение)
Вроде бы никто не говорит, что без nvidia бума нейросетей не было бы вообще, я вроде это даже явно подчеркнул (и упомянул например TPU от гугла). Но сейчас очевидно, что бум нейросетей ретроспективно и по факту во многом связан именно с ними.
Про вендор-лок я вообще не понял, если честно. В какой момент и какой вендор-лок мог как-то повлиять на нейросети? Я не помню ни одного фреймворка железобетонно прибитого к nvidia, у большинства есть прослойка между железом, дающая как минимум возможность работать на CPU.
Если бы AMD представила что-то действительно сопоставимое с CUDA, возможно занялась бы оптимизацией популярных фреймворков для своих карт, всё было бы иначе (мне вот одно время казалось что прямой доступ с ssd мог перевесить на их сторону, дав несравнимый с бортовым объем дополнительной но медленной памяти)
По моему представлению, CUDA на всем времени своего развития была более человекоориентирована, чем все попытки сделать что-то подобное со стороны AMD. Например на том же рынке майнинга, где цепочка код-деньги сверхкороткая, в некоторые моменты у людей хватало сил и воли на оптимизацию именно для чипов AMD, когда их числодробительное превосходство было заметным и давало очевидный и быстрый профит. В нейросетях, где куда важнее быстрое прототипирование и отработка гипотез, а цепочка до прибыли ни разу не очевидна, я вот так сходу даже не вспомню, были ли случаи явной оптимизации под красных. Хотя сейчас судя по соседним статьям Лиза явно намерена дать бой. Посмотрим что выйдет. В любом случае исход этого противостояния будет выгоден конечным пользователям.
А если вопрос коммерциализации вас не так тревожит, то может вам подойдет например LAION-5B? Хотя, как понимаю, сейчас все скорее упирается в мощности чем в количество картинок которое нужно найти?
Хорошо оформленная статья, но к решению много-много вопросов.
Суть задачи: требуется определить минимально возможное время, за которое можно выполнить все работы.
А где в выводе посмотреть это самое минимально возможное время? На гитхабе вы пишете, что
Значение последней строки столбца t(rk, i) будет длиной критического пути (время выполнения всех работ для изготовления изделий).
Но это совершенно точно неправильно. Можете ввести две задачи. У первой длительность 1000 единиц, у второй 10. Предшественников нет ни у одной. Последнее значение будет 10. Правильное — 1000.
Как написали, вторая основная криптовалюта эфир майнилась на видяхах. И как раз в конце лета — начале осени 22, насколько помню, они перешли с PoE на PoS систему, отвязавшись от генерации на картах. Отчего гигантское количество видях оказалось выброшено на рынок (на самом деле сброс начался чуть раньше, потому что планы были известны заранее). И подозреваю, что провал середины-конца года на графике с ценой акций скорее связан именно с этим. Но к концу года сетки (и, кмк, не толко chatgpt), новое поколение карт, которое не выглядело неудачным, не имело проблем с выпуском как предыдущее поколение (которое, кто помнит, из-за дефицита чипов на рынке можно было добыть с огромным трудом практически до самого его конца) и вытянули обратно наверх.
Последний взлет ИИ относительно общепринято отсчитывается от 2012 года. Под собой имеет три крупных основания — накопление больших объемов данных, невозможных в предыдущие эпохи, развитие новых архитектур, давших новый толчок нейросетям и — очевидно, новое железо. Вот новое железо насколько я помню — это собственные TPU Гугла и Nvidia. На прогресс работало много компаний, но без NVidia он не реализовывался. Он мог бы возможно реализовываться, если бы не было вообще NVidia, а кто-нибудь другой бы подсуетился вовремя. Но это пачка сослагательных наклонений. Вишенка на торте это тензорные блоки начиная с 20хх семейства в десктопной линейке, но и до них уже много лет все сети считаются на GPU. И я согласен с стартовым коментом — странно привязывать последовательное развитие GPGPU как отрасли на протяжении многих лет к одному проекту.
Кстати 22 год, помимо chatgpt, это еще и резкий подъем среди рисующих сеток, которые тоже работают на тех же картах NVidia.
Знаете, ваш первый пост с банком на схожую тему попахивал знатно, здесь запашок поменьше, но тоже явно отдаёт.
И в прошлый раз не "часть комьюнити топила за...", а вам совершенно явно дали понять, что ваши претензии выдуманы на ровном месте. Учитывая также, что в прошлый раз вы явно не удосужились даже прочитать лицензию под которой публиковали свои работы, а в этот раз вдруг заявляете, что оказывается в вашем мире единорогов все читают и выполняют каждую лицензию на каждый компонент, это выглядит мягко говоря неоднозначно. А уж если судить по комментариям(https://habr.com/ru/articles/739304/#comment_25610180) и тому, что вы и лицензии меняете втихую, начинает выглядеть вообще специфичненько.
Если вдруг хватит ... ресурсов для обращения в суд, желаю удачи в доказательстве коммерческой выгоды от прототипа показанного на выставке. Краткая справка на сайте CC говорит, что либо нужно коммерческое преимущество, либо монетизация. Даже в случае реализации в прод-среде, оба пункта мягко говоря нетривиальны по отношению к абсолютному монополисту. А, и заодно, раз уж вы такие правоориентированные господа, придумайте, как вы собираетесь доказывать, что код в прототипе взят до смены лицензии. В российском суде. Против РЖД.
И уж совершенно точно могу сказать, что с вашими продуктами я связываться не буду и не смогу их рекомендовать никому, учитывая желание бегать и кричать по малейшему, возможно придуманному поводу. Аналогичное брезгливое ощущение от как минимум пула xGPL-лицензий у меня сложилось давно, вы же умудряетесь его расширить даже на CC-пачку. Поразительный результат, если подумать.
Огромный рынок корпоративных машин без проблем закрывается встройками. Если же нужна именно машина с графикой - то это отдельный рынок с отдельными ценами, которые ни в какой обсуждаемый бюджет не влезут
Займусь некропостингом, вдруг читающим дальше будет интересно )
Оставлю как отправные точки, что
Во-первых, у фигур есть метод write_html позволяющий сохранить созданное в html-текст. Во-вторых есть plotly.offline, который насколько понимаю, делает примерно тоже самое c некоторыми нюансами.
У меня он под столом на работе стоит. Из примерно тех же соображений (дешевле) :D Но нам нужнее пока однопоток, поэтому вариантов немного
Охлад ему нужен лютый, факт. На предварительных тестах двухсекционная водянка под ним задыхалась. Трехсекционка держит. Даже пиковые 250Вт+
Там нюанс в том, что когда включаются все ядра, он просто по дефолтной конфигурации сбрасывает частоты., даже если запас по охлаждению есть. Плюс Е-ядра в принципе живут на меньшей частоте. При желании, богатом воображении и кошельке можно рискнуть поставить хоть в биосе хоть в XTU, чтобы держало всегда и всё, у меня такой нужды не было, поэтому не рисковал, не скажу насколько уверенно будет такое. Но тут уж как повезёт. 3365 вживую не гонял, не знаю, нам терять треть дури просто по частоте к сожалению не вариант, хотя на старших братьев поглядываем временами. Хотя если прикинуть банальной арифметикой, чот мне с трудом верится, что он удержит 64 потока на полных 4ГГц тоже уложившись в свои 250Вт. Пощупать бы вживую.. но где ж такое на пощупать найдешь (
Но если вашим товарищам важнее многопоточка, то конечно домашние камни это очень странный выбор, там реальных ядер-то восемь штук против 32 у xeon'а (я как-то из снобизма энергоэффективные за ядра не держу), даже смысла с серверными сравнивать нет, тем более что в сервер и несколько камней воткнуть можно (если модель по памяти позволяет)
Поколение-недоразумение. Обозвали бы уж честным 13 рефрешем и не насиловали журналистов..
Подняли частоты - ну ок, на эти 200мгц как понимаю примерно каждый первый камень и так гнался - после отработки производства можно отбраковку видимо потщательнее проводить.
Какой смысл в добавлении недоядер в семерку - вообще не понял, разве что в тестах померятся агрегатами. Пока задач нет и имеющихся восьми за глаза хватает. Как только появляется задача - вероятно уж лучше её на нормальное ядро сажать, теплопакет-то один на всех. И задействование всех ядер выносит этот пакет далеко наружу (вместе с охлаждением, которое мало когда готово к такому перепаду). И это все на фоне того, что "высокоинтеллектуальные" алгоритмы распределения задач по ядрам, по-прежнему, кроме пробивающего насквозь рука-лицо ничего не вызывают.
Зависит от задачи. В однопотоке он вполне держит свои частоты. Но если загрузить все (не дай боскх включая "энергоэффективное" недоразумение), то частоты просто бай дизайн упадут, там даже дело не в тепловыделении. Но если вам повезет найти экземпляр... :D
Не совсем, просто с появлением 48Гб модулей теже 4 планки стали давать не 128 а 192Гб. Они ретроспективно поменяли описания камней, в том числе старых линеек (что на мой взгляд, без дополнительных пометок отдает свинством)
Насколько я понимаю, сам камень-то адресовать может как и старшие братья до позеленения, появятся 64гб модули - еще поднимут..
Посмотрел бы я на установку 95 на 386 :D
В виде эксперимента еще ладно, но что всерьез, кто-то таким занимался… кхм… отдадим дань безумству.
Будучи убежденным "пека-боярином", и человеком, считающим приставки странным недоразумением, чудовищно усложнящим жизнь всей игровой индустрии, тем не менее хочу вступится за плойку
В 21 кажется году была ситуация, когда бетаверсия ммо от амазона new world просто сжигала старшие карты nvidia. Тоесть в стане пк-компонентов устройство для игр не просто отключалось или уходило в троттлинг, а просто умирало от игры. И это на фоне страшнейшего дефицита карт, при котором цены на этих старших монстров были заоблачными. Так что у всех бывают проблемы..
многоядерность — специфика железного устройства процессора- он состоит физически из нескольких ядер. её нельзя поддерживать, она или есть или её нет.
многопоточность — специфика программного устройства, позволяющая запускать на устройстве несколько параллельных потоков выполнимого кода (с оговорками)
hypertreading — особенность процессоров intel позволяющая за счет нескольких конвееров исполнения запускать "вроде-как" несколько потоков на одном ядре. это не маркетинговое название многопоточности ни разу. вы можете отключить HT и остаться с многопоточностью на современных процессорах. это слегка перпендикулярные понятия.
Это кстати отличный вопрос. История с larrabee вообще максимально странная. Я даже помню как тут на хабре был ряд статей перед "выпуском", в том числе от людей непосредственно принимавших участие в разработке. Все ждали, ждали, ждали… и так ничего не дождались.
Разве что чуть позже на серверном рынке вышли очень загадочные xeon phi в которые видимо часть наработок пошла, но они были столь загадочны, что я даже не слышал про живые проекты на них (кроме суперкомьютеров)
А вы много видите тех, кого погнали с работы под этим лозунгом? Мне пока скорее ситуация видится как "те кто работают с ИИ окажутся в более выгодной ситуации, чем те, кто с ним работать не умеет и не хочет учиться".
Да, для кого-то это может оказаться неприятным (но даже вряд ли сколь-нибудь фатальным в массе). Но это история последних сотен лет развития цивилизации, и ничего нового тут нет. Люди умевшие считать только на счетах вытеснены людьми с калькуляторами, а потом и с компьютерами, это буквально пример в моей семье, и даже там он не был как-то ужасным.
Просто любопытно, а какой ответ вы ждали? 3.5 не подключена к сети, если мы именно про openAI-модель, она не умеет в картинки, как четверка, я правда в некоторой растерянности… Описание фотографии может быть?
Давайте продолжим, если не возражаете, я по шагам буду продолжать )
Требование полноты графа, это вы конечно перестарались. В этом контексте бы и слабой связности навскидку хватило (кстати ваш алгоритм полноты не переживёт, можете проверить).
Но тогда еще нужно не забыть об ацикличности, а то возникнут проблемы
Ого, спасибо, у меня почему-то было застрявшее убеждение что truncate это ddl не попадающая под транзакционность
Это на мой взгляд довольно странное рассуждение.
Компаний делающих GPU две с половиной. GPGPU как направление на популярном рынке создано nvidia (это не решающий фактор, но право первопроходца часто имеет некоторое значение)
Вроде бы никто не говорит, что без nvidia бума нейросетей не было бы вообще, я вроде это даже явно подчеркнул (и упомянул например TPU от гугла). Но сейчас очевидно, что бум нейросетей ретроспективно и по факту во многом связан именно с ними.
Про вендор-лок я вообще не понял, если честно. В какой момент и какой вендор-лок мог как-то повлиять на нейросети? Я не помню ни одного фреймворка железобетонно прибитого к nvidia, у большинства есть прослойка между железом, дающая как минимум возможность работать на CPU.
Если бы AMD представила что-то действительно сопоставимое с CUDA, возможно занялась бы оптимизацией популярных фреймворков для своих карт, всё было бы иначе (мне вот одно время казалось что прямой доступ с ssd мог перевесить на их сторону, дав несравнимый с бортовым объем дополнительной но медленной памяти)
По моему представлению, CUDA на всем времени своего развития была более человекоориентирована, чем все попытки сделать что-то подобное со стороны AMD. Например на том же рынке майнинга, где цепочка код-деньги сверхкороткая, в некоторые моменты у людей хватало сил и воли на оптимизацию именно для чипов AMD, когда их числодробительное превосходство было заметным и давало очевидный и быстрый профит. В нейросетях, где куда важнее быстрое прототипирование и отработка гипотез, а цепочка до прибыли ни разу не очевидна, я вот так сходу даже не вспомню, были ли случаи явной оптимизации под красных. Хотя сейчас судя по соседним статьям Лиза явно намерена дать бой. Посмотрим что выйдет. В любом случае исход этого противостояния будет выгоден конечным пользователям.
А если вопрос коммерциализации вас не так тревожит, то может вам подойдет например LAION-5B? Хотя, как понимаю, сейчас все скорее упирается в мощности чем в количество картинок которое нужно найти?
Хорошо оформленная статья, но к решению много-много вопросов.
А где в выводе посмотреть это самое минимально возможное время? На гитхабе вы пишете, что
Но это совершенно точно неправильно. Можете ввести две задачи. У первой длительность 1000 единиц, у второй 10. Предшественников нет ни у одной. Последнее значение будет 10. Правильное — 1000.
Как написали, вторая основная криптовалюта эфир майнилась на видяхах. И как раз в конце лета — начале осени 22, насколько помню, они перешли с PoE на PoS систему, отвязавшись от генерации на картах. Отчего гигантское количество видях оказалось выброшено на рынок (на самом деле сброс начался чуть раньше, потому что планы были известны заранее). И подозреваю, что провал середины-конца года на графике с ценой акций скорее связан именно с этим. Но к концу года сетки (и, кмк, не толко chatgpt), новое поколение карт, которое не выглядело неудачным, не имело проблем с выпуском как предыдущее поколение (которое, кто помнит, из-за дефицита чипов на рынке можно было добыть с огромным трудом практически до самого его конца) и вытянули обратно наверх.
Последний взлет ИИ относительно общепринято отсчитывается от 2012 года. Под собой имеет три крупных основания — накопление больших объемов данных, невозможных в предыдущие эпохи, развитие новых архитектур, давших новый толчок нейросетям и — очевидно, новое железо. Вот новое железо насколько я помню — это собственные TPU Гугла и Nvidia. На прогресс работало много компаний, но без NVidia он не реализовывался. Он мог бы возможно реализовываться, если бы не было вообще NVidia, а кто-нибудь другой бы подсуетился вовремя. Но это пачка сослагательных наклонений. Вишенка на торте это тензорные блоки начиная с 20хх семейства в десктопной линейке, но и до них уже много лет все сети считаются на GPU. И я согласен с стартовым коментом — странно привязывать последовательное развитие GPGPU как отрасли на протяжении многих лет к одному проекту.
Кстати 22 год, помимо chatgpt, это еще и резкий подъем среди рисующих сеток, которые тоже работают на тех же картах NVidia.
Знаете, ваш первый пост с банком на схожую тему попахивал знатно, здесь запашок поменьше, но тоже явно отдаёт.
И в прошлый раз не "часть комьюнити топила за...", а вам совершенно явно дали понять, что ваши претензии выдуманы на ровном месте. Учитывая также, что в прошлый раз вы явно не удосужились даже прочитать лицензию под которой публиковали свои работы, а в этот раз вдруг заявляете, что оказывается в вашем мире единорогов все читают и выполняют каждую лицензию на каждый компонент, это выглядит мягко говоря неоднозначно. А уж если судить по комментариям(https://habr.com/ru/articles/739304/#comment_25610180) и тому, что вы и лицензии меняете втихую, начинает выглядеть вообще специфичненько.
Если вдруг хватит ... ресурсов для обращения в суд, желаю удачи в доказательстве коммерческой выгоды от прототипа показанного на выставке. Краткая справка на сайте CC говорит, что либо нужно коммерческое преимущество, либо монетизация. Даже в случае реализации в прод-среде, оба пункта мягко говоря нетривиальны по отношению к абсолютному монополисту. А, и заодно, раз уж вы такие правоориентированные господа, придумайте, как вы собираетесь доказывать, что код в прототипе взят до смены лицензии. В российском суде. Против РЖД.
И уж совершенно точно могу сказать, что с вашими продуктами я связываться не буду и не смогу их рекомендовать никому, учитывая желание бегать и кричать по малейшему, возможно придуманному поводу. Аналогичное брезгливое ощущение от как минимум пула xGPL-лицензий у меня сложилось давно, вы же умудряетесь его расширить даже на CC-пачку. Поразительный результат, если подумать.
Огромный рынок корпоративных машин без проблем закрывается встройками. Если же нужна именно машина с графикой - то это отдельный рынок с отдельными ценами, которые ни в какой обсуждаемый бюджет не влезут