BLIMP — Пайплайн синтеза и разметки изображений в Blender

[ioleynikov]

Идеальным результатом развития ваших идей и наработок было бы создание собственной мощной модели распознавания, синтеза видео со сверх быстрой, эффективной реализацией. Думаю, что используя ресурсы Сбера такое вполне реально. Со своей стороны мог бы подключиться к глубокой интеграции и оптимизации ядра 3D движка Blender непосредственно в нейросеть. У меня есть идеи как заменить сверхтяжелые алгоритмы Diffusion Models для вашей задачи. Спасибо за статью и Удачи !

[Jijiki]

сегодня даже во время прорывных технологий, чуть ниже я напишу возможно даже что-то и есть, НО, в общей части своей тот ИИ который доступен простому человеку даёт ошибки, всё приходится буквально проверять, на голубом глазу не зная/не проверяя, можно получить и 5% процессора, и если не двигаться то 1% будет где-то рядом, соотв эта же ИИ даст ошибку на любом глифе, рандомно это будет зависеть от нагрузки на ядро сети, и получается если мы упираемся в творчество, где определили рамки и что и как должно быть, туда идут и глифы и 3д сцены, опираться на ИИ крайне оптимистичная и амбициозная ситуация, творчество по-сути накопительно, в один момент если вы пропустите такую помарку придётся исправлять руками атлас или перерисовывать геометрию, так что модель хорошо, но какие там ошибки и когда, это на творчестве отталкивает

туда же и ситуация - например нужен шрифт(руками на аски 5 дней выходит, но так хочется нажать кнопку и получить результат, но когда видишь, что она недотягивает до 0.1% просто проще сразу руками рисовать), а в сети обсуждают баш скрипт, получается я запускаю автотрасировку и не управляю творчеством, и это не момент где надо перепрыгнуть, это момент где нужна сверхточность и надёжность, тоесть лучше постараться и получить заветный атлас, чем идти проторенной дорогой скриптов или нейронок, где по-сути рандом, а нужен не рандом например, и вот как этот 0.1% заложить в неё загадка вообще

тоесть если рассматривать ремесло - накопительные ситуации, например отладка фильма, рисование, монтаж, или еще чото такое ручное, я бы руками сам это проделывал

может конечно есть какие-то специализированные ИИ на иконки/шрифты, цветкор, генерацию геометрии, но по рисованию знаю, что проще просто рукой сделать геометрию сразу как нужно, шрифт сразу как нужно, свет и прочее

[Luis2]

Для MVP и исследований выглядит очень здраво. Как продакшен-решение, наверное, потребует ещё много инженерной обвязки, но как источник качественной синтетики вполне себе

[wadik69]

в прошлой компании был опыт генерации изображений через Blender для задачи классификации. Мы даже в каких-то аспектах немного дальше продвинулись, например, автоматически генерировали из 2D объекта в 3D, в итоге удавалось чисто на синтетике достигать для некоторых объектов accuracy в 90%, учитывая что классов было 300+ и некоторые классы были очень похожи, дальше уже размечали ручками небольшую часть реальных данных