Даже при нагрузке процессоров 30% на ноде, температура подбиралась к отметке 95 градусов
и сразу же
В результате, сервер более чем оправдал наши ожидания, процессор AMD EPYC 7742 кажется нам неубиваемым в нагрузке. Схема, построенная на подобных решениях, будет дальше
масштабироваться, со временем планируем запустить эту услугу в Нидерландах.
Это как??? Вы серьезно хотите строить решение на базе железа, которое может работать только со снятой крышкой, а при норм нагрузке при, например, трейне нейросети на всех ядрах, или, например, тяжелых отчетах на колоночной СУБД, вообще расплавится? После первой цитаты ожидал что-то вроде «теперь мы всем офисом думаем кому бы это впарить»
Без обид, но попахивает лютым оверинжинирингом и задачей ради процесса решения, а не результата.
Понимаю, что задача определения автомобиля по фото это прям серьёзный интересный вызов уровня FAANG, и хорошо, когда хозяин бабла готов оплачивать такой опыт. Но, если говорить о коммерческой части, то вижу следующее:
Прежде всего, судя по фоткам-примерам, где все кейсы максимально простые, подобный результат можно получить и сильно проще. Например, поиском госномера на картинке и последующим поиском логотипа над номером.
Идем дальше. Раз уж несложно доставать госномер (а это задача прям затяганная, как предсказание утонувших на титанике), то не дешевле ли поискать базу номеров, и по ней получать модель. Скорее всего, в РФ это может быть незаконно, но, как говорится, на что не пойдёт капиталист… А цена базы может быть ух как дешевле, чем работа датасаентистов.
Ок. Вы научились определять. Глазами посмотрели. Все ок, красиво. Но! Теперь идем к выводам. Если цель — делать реально полезные статистические выводы, то надо и не забывать об условных вероятностях. А о них в тексте ни слова, хотя они могут сломать тему напрочь. Например, нейросеть определяет BMW из за более характерных черт кузова, как ноздри, на 30% лучше, чем Toyota, но вы об этом не знаете -> привет перекос в исследованиях вида "на какой машине ездит наш клиент". Или ещё, предположим, что девушки реже фоткаются около свой машины, чем парни -> получаем перекос в соцдем исследованиях. Продолжать можно очень долго.
Зря недооцениваете ИИ… К примеру, написал кто-то js либу, и заюзали ее 100500 проектов на гитхабе. Плюс, если спарсить код топ 1000000 сайтов мира, то там тоже на 10% она встретится.
То есть, ии может
1) проанализировать код этих сайтов и гитхаба
2) запустить код с гх и сайтов и отпрофайлить его со всех сторон
3) запустить ещё несколько миллиардов синтетических прогонов
4) создать оптимальный код для самых частых ветвей исполнения кода.
5) вывести правила, при которых оптимизацию запускать можно (чтобы не запустить оптимизацию на коде, который появится потом и будет использовать какой-то нестандартный грязный хак).
Кстати, совсем не факт, что ускоренный в 2 раза сайт станет эффективнее. Как правило, подобные вещи достигаются серверным рендерингом и кешированием. То есть, по факту, общее количество вычислений может лишь вырасти
Похоже, что единственного правильный путь — это дальнейшее усложнение компиляторов и среды исполнения, чтобы реальный алгоритм работы все дальше отходил от того, что написал юзер.
Возможно, даже с использованием ИИ и глобальной базы данных с информацией о всех открытых проектах мира.
По сути, первые шаги уже сделаны (взять тот же V8, который является шедевром инженерной мысли). Но надо больше. Вплоть до того, что использовать ресурсы добровольцев не на всякие поиски инопланетян, а на оптимизацию популярных библиотек, заменяя их код математически эквивалентным, но при этом абсолютно нечитаемым, но оптимальным, алгоритмом
Ещё, как вариант, делать проверку студентами логов друг друга + выборочная преподом.
Разумеется, с использованием алгоритмов, аналогичных Amazon mechanical turk, для работы с исполнителями, к которым нет доверия
Вот сейчас скажу, наверное, очень непопулярную вещь, но считаю, что подробное изучение подобных вещей (основ алгоритмов) даёт неправильную систему ценностей студентам. И наносимый вред не покрывается пользой от умения писать оптимальный код.
По сути, современное программирование о сборе воедино огромных готовых модулей, умении исследовать их возможности и находить оптимальную комбинацию.
А подобные курсы, наоборот, формируют систему ценностей, в которой надо декопмпозировать задачу до мельчайших модулей, после чего реализовывать их и конструировать готовый продукт. Увы, такой подход не просто неконструктивен, а вреден, и его потом называют велосипедостроением и каленым железом выжигают в коммерческой среде. Думаю, о том, почему, и так очевидно
Увы, да, реально копейки. Для музыки без видео вообще ниочем. Для видеопотока чуть дороже, но, если пиратские плееры как-то на копейки от баннеров умудряются в плюсе быть, то, значит, там очень дешево (правда, для умных людей в теме, а не тех, кто пользует cloudfront по публичному тарифу)
Так а, в среднем, среди 100 молодых музыкантов, продавших душу, и не продавших, кто больше кеша имеет?
Проводя аналогию с мобильными казуалками, можешь и сам паблишить, но вот попробуешь помимо, собственно, написания игры и фикса багов, нормально аналитику настроить и делать выводы, оптимально трафом закупиться, и лопнешь от многозадачности)
И речь не об исполнителях, а, например, работниках студий звукозаписи. Они просто получают зарплату и у них не будет возможности ждать несколько лет результатов эксперимента.
Не сильно знаком с индустрией звукозаписи, но подозреваю, что эти работники и так потеряют работу, если будут сидеть на попе ровно, ведь, с развитием нейросетей и алгоритмов очень скоро (если не прямо сейчас) можно будет получить запись, неоличимую для 95% слушателей от студийного качества, имея лишь смартфон и микрофон.
Когда-то ведь, проводя аналогию, тоже в каждом ларьке, печатающем фотографии, была услуга «заменить фон на фото на Эйфелеву башню»…
Мне, как потребителю, хочется иметь простой понятный и дешевый сервис. А это невозможно, когда закупочную стоимость определяет не рынок, а сговор копирастов.
Все ж ведь просто, злой гугл мало платит, — значит не распространяй свою музыку через Youtube. Или распространяй, но не смотри, как на способ заработка, а только, как на спосоь раскрутки.
Ну да, хрень какая-то. Я бы ещё понял, если бы была возможность написать в аккаунте, но от имени администрации и с отличающимся по дизайну твитом (например, в тех случаях, когда кто-то делает противозаконные призывы или скам, и админы хотят отмежеваться от этого контента, предупредив читателей, что твиты тут личное мнение автора, и вообще похожи на скам).
Google красавчики. Лучше оставить YouTube без датской музыки, чем, прогнувшись под копирастов раз, получить рост комиссий, и, как следствие, рост цены для потребителя по всему миру.
Ну вот не надо мух с котлетами мешать. Развод на деньги пенсионеров на эксплуатации страха потерять свои кровные, и халявщиков со свободными битками на эксплуатации желания поднять бабла без напряга — это одно и тоже? Жертвы прозвонов ведь добровольно ни в какую авантюру не лезли. А тут мухи сами полетели.
Ну и да, реально, ребята сделали очень безобидное действие. Они могли запустить межрассовую бойню, качнуть фондовый рынок, а предпочли состричь годовую зп посредственного менеджера с халявщиков-авантюристов со свободным битком
помню как я теще лет 15 назад фото на ТВ с цифромыльницы через видеокабель показывал
Похвастаюсь) Был интереснее опыт. Году в 2008м, учась в школе, подготовил презу в PowerPoint, кажется, по географии. Потом сохранил картинками, и фотошопом пересохранил так, чтобы цифровая видеокамера поняла формат (в ней была SD карта для фоток). После чего подключил по видеокабелю к школьному телику и ИК-пультом переключал слайды.
Хорошо, есть задача, которая требует применения семафора. В чем проблема, что студент будет гуглить, решая ее? Если результат достигнут, и решение работает корректно, то, значит, студент сможет решить аналогичную задачу в боевых условиях. В чем проблема, если студент
1) понял, какой примитив синхронизации нужен для решения
2) успел за ограниченное время нагуглить и понять принцип его работы и пример кода
3) написал рабочий код
?
Чтобы не мигрировали проекты от предыдущего курса, параллельного потока. Чтобы все проекты были разными.
знания могут быть применены, например, для оптимизации программ
В том то и дело, что оптимизировать все по окончанию курса знатоки, а вот сделать с 0, начиная от сбора требований и заканчивая деплоем прода, могут очень немногие.
С СУБД студенты работают. Есть даже факультативы и пары по ним.
Да, SQL запросы на клетчатых листках пишут. Но вот целостной системы фронт-бек-субд не видят.
Во благо
Во благо себе. Ещё раз повторю — себе. TikTok дал благо его создателям.
Умение собрать софт локально — полезный скилл
Разумеется. Но без прода софта нет. Поэтому умение поднять прод — скилл необходимый.
и сразу же
Это как??? Вы серьезно хотите строить решение на базе железа, которое может работать только со снятой крышкой, а при норм нагрузке при, например, трейне нейросети на всех ядрах, или, например, тяжелых отчетах на колоночной СУБД, вообще расплавится? После первой цитаты ожидал что-то вроде «теперь мы всем офисом думаем кому бы это впарить»
Кликбейтище)
Без обид, но попахивает лютым оверинжинирингом и задачей ради процесса решения, а не результата.
Понимаю, что задача определения автомобиля по фото это прям серьёзный интересный вызов уровня FAANG, и хорошо, когда хозяин бабла готов оплачивать такой опыт. Но, если говорить о коммерческой части, то вижу следующее:
Прежде всего, судя по фоткам-примерам, где все кейсы максимально простые, подобный результат можно получить и сильно проще. Например, поиском госномера на картинке и последующим поиском логотипа над номером.
Идем дальше. Раз уж несложно доставать госномер (а это задача прям затяганная, как предсказание утонувших на титанике), то не дешевле ли поискать базу номеров, и по ней получать модель. Скорее всего, в РФ это может быть незаконно, но, как говорится, на что не пойдёт капиталист… А цена базы может быть ух как дешевле, чем работа датасаентистов.
Ок. Вы научились определять. Глазами посмотрели. Все ок, красиво. Но! Теперь идем к выводам. Если цель — делать реально полезные статистические выводы, то надо и не забывать об условных вероятностях. А о них в тексте ни слова, хотя они могут сломать тему напрочь. Например, нейросеть определяет BMW из за более характерных черт кузова, как ноздри, на 30% лучше, чем Toyota, но вы об этом не знаете -> привет перекос в исследованиях вида "на какой машине ездит наш клиент". Или ещё, предположим, что девушки реже фоткаются около свой машины, чем парни -> получаем перекос в соцдем исследованиях. Продолжать можно очень долго.
Зря недооцениваете ИИ… К примеру, написал кто-то js либу, и заюзали ее 100500 проектов на гитхабе. Плюс, если спарсить код топ 1000000 сайтов мира, то там тоже на 10% она встретится.
То есть, ии может
1) проанализировать код этих сайтов и гитхаба
2) запустить код с гх и сайтов и отпрофайлить его со всех сторон
3) запустить ещё несколько миллиардов синтетических прогонов
4) создать оптимальный код для самых частых ветвей исполнения кода.
5) вывести правила, при которых оптимизацию запускать можно (чтобы не запустить оптимизацию на коде, который появится потом и будет использовать какой-то нестандартный грязный хак).
Может ли человек сделать что-то подобное?
Кстати, совсем не факт, что ускоренный в 2 раза сайт станет эффективнее. Как правило, подобные вещи достигаются серверным рендерингом и кешированием. То есть, по факту, общее количество вычислений может лишь вырасти
Похоже, что единственного правильный путь — это дальнейшее усложнение компиляторов и среды исполнения, чтобы реальный алгоритм работы все дальше отходил от того, что написал юзер.
Возможно, даже с использованием ИИ и глобальной базы данных с информацией о всех открытых проектах мира.
По сути, первые шаги уже сделаны (взять тот же V8, который является шедевром инженерной мысли). Но надо больше. Вплоть до того, что использовать ресурсы добровольцев не на всякие поиски инопланетян, а на оптимизацию популярных библиотек, заменяя их код математически эквивалентным, но при этом абсолютно нечитаемым, но оптимальным, алгоритмом
Ещё, как вариант, делать проверку студентами логов друг друга + выборочная преподом.
Разумеется, с использованием алгоритмов, аналогичных Amazon mechanical turk, для работы с исполнителями, к которым нет доверия
Вот сейчас скажу, наверное, очень непопулярную вещь, но считаю, что подробное изучение подобных вещей (основ алгоритмов) даёт неправильную систему ценностей студентам. И наносимый вред не покрывается пользой от умения писать оптимальный код.
По сути, современное программирование о сборе воедино огромных готовых модулей, умении исследовать их возможности и находить оптимальную комбинацию.
А подобные курсы, наоборот, формируют систему ценностей, в которой надо декопмпозировать задачу до мельчайших модулей, после чего реализовывать их и конструировать готовый продукт. Увы, такой подход не просто неконструктивен, а вреден, и его потом называют велосипедостроением и каленым железом выжигают в коммерческой среде. Думаю, о том, почему, и так очевидно
Увы, да, реально копейки. Для музыки без видео вообще ниочем. Для видеопотока чуть дороже, но, если пиратские плееры как-то на копейки от баннеров умудряются в плюсе быть, то, значит, там очень дешево (правда, для умных людей в теме, а не тех, кто пользует cloudfront по публичному тарифу)
Проводя аналогию с мобильными казуалками, можешь и сам паблишить, но вот попробуешь помимо, собственно, написания игры и фикса багов, нормально аналитику настроить и делать выводы, оптимально трафом закупиться, и лопнешь от многозадачности)
Не сильно знаком с индустрией звукозаписи, но подозреваю, что эти работники и так потеряют работу, если будут сидеть на попе ровно, ведь, с развитием нейросетей и алгоритмов очень скоро (если не прямо сейчас) можно будет получить запись, неоличимую для 95% слушателей от студийного качества, имея лишь смартфон и микрофон.
Когда-то ведь, проводя аналогию, тоже в каждом ларьке, печатающем фотографии, была услуга «заменить фон на фото на Эйфелеву башню»…
Все ж ведь просто, злой гугл мало платит, — значит не распространяй свою музыку через Youtube. Или распространяй, но не смотри, как на способ заработка, а только, как на спосоь раскрутки.
Ну да, хрень какая-то. Я бы ещё понял, если бы была возможность написать в аккаунте, но от имени администрации и с отличающимся по дизайну твитом (например, в тех случаях, когда кто-то делает противозаконные призывы или скам, и админы хотят отмежеваться от этого контента, предупредив читателей, что твиты тут личное мнение автора, и вообще похожи на скам).
Google красавчики. Лучше оставить YouTube без датской музыки, чем, прогнувшись под копирастов раз, получить рост комиссий, и, как следствие, рост цены для потребителя по всему миру.
Ну и да, реально, ребята сделали очень безобидное действие. Они могли запустить межрассовую бойню, качнуть фондовый рынок, а предпочли состричь годовую зп посредственного менеджера с халявщиков-авантюристов со свободным битком
Похвастаюсь) Был интереснее опыт. Году в 2008м, учась в школе, подготовил презу в PowerPoint, кажется, по географии. Потом сохранил картинками, и фотошопом пересохранил так, чтобы цифровая видеокамера поняла формат (в ней была SD карта для фоток). После чего подключил по видеокабелю к школьному телику и ИК-пультом переключал слайды.
1) понял, какой примитив синхронизации нужен для решения
2) успел за ограниченное время нагуглить и понять принцип его работы и пример кода
3) написал рабочий код
?
Чтобы не мигрировали проекты от предыдущего курса, параллельного потока. Чтобы все проекты были разными.
В том то и дело, что оптимизировать все по окончанию курса знатоки, а вот сделать с 0, начиная от сбора требований и заканчивая деплоем прода, могут очень немногие.
Да, SQL запросы на клетчатых листках пишут. Но вот целостной системы фронт-бек-субд не видят.
Во благо себе. Ещё раз повторю — себе. TikTok дал благо его создателям.
Разумеется. Но без прода софта нет. Поэтому умение поднять прод — скилл необходимый.