Как стать автором
Обновить

Новая генеративная модель Kandinsky 3D для создания 3D-объектов. Как она работает и кому будет полезна

Уровень сложностиСредний
Время на прочтение10 мин
Количество просмотров12K
Всего голосов 25: ↑21 и ↓4+26
Комментарии12

Комментарии 12

Будем посмотреть. Пока что у нейросетей есть серьезные проблемы с отношением количества полигонов к качеству деталей раз, правильной обработкой любых выступающих частей (а полы плащей, хвосты, ручки судуков, волосы - это вообще ужас) - два, проблемы с разверткой - три и наконец иерархия чаще всего отсутствует, как таковая, или, в лучшем случае, будет... кхм, плохонькой. Сейчас глянем, что вы там наваяли и может ли это выдать хоть сколько нибудь годный результат)

Рекомендация: добавляйте в промпты детальные описания стиля, который хотите получить. Например: «A cartoonish and humorous model of an angry android. Bright colors, exaggerated expressions, comic-style lines and motion effects, lighthearted and funny mood»

А нельзя ли сделать Style Transfer, как для моделей генерации картинок в Stable Diffusion?

Дать пару-тройку references гораздо проще чем пытаться описать стиль словами.

Скоро будет доступна генерация по картинке, тогда вы сможете задать любой стиль картинке с той же Stable Diffusion и по ней сделать 3D модель.

Зачем нужна авторизация через сбер айди?

Лучше бы просто ограничили скорость генерации, чем авторизацию через , по сути, банковское приложение

SberId это не банковское приложение, это то же самое, что какой-нибудь Google Id или Facebook Id. Вы можете завести SberId, не имея счёта в банке

Попробовал сейчас вашу генерацию. Генерация лиц вообще оставляет желать лучшего, топология моделей тоже нуждается в доработке. Но начало положено, удачи вам в этом направлении! Возможно будет интегрировать сервис в такие приложения как Blender или Maya?

Интеграция в приложения в виде, например, плагинов в планах, но, как вы сами заметили, качество моделей в приоритете)

Чото как-то плохо.

Попробовал сгенерить просто правильную геометрическую фигуру - усечённый конус с определёнными размерами для печати на 3D-принтере, промпт был примерно такой: "усечённый конус для печати на 3D-принтере со следующими размерами: ширина (диаметр) конуса у основания - 22 мм., ширина (диаметр) конуса у вершины - 16 мм., высота конуса - 46 мм.". В итоге выдал 4 варианта, из которых 3 - какая-то дичь типа ваз неправильной формы, и только один - конус, но со скруглением на вершине, и совершенно другой высотой (приблизительно - раза в 2 меньше заданной).

Сбер, несолидно (впрочем, как и всегда - к Сберу у меня уже лет 10 нет доверия - мощная показуха при качестве ниже плинтуса).

Сейчас наша модель для создания 3D объектов де факто работает по картинке, то есть ваше описание модели уже скорее всего не воспроизводится на этапе создания картинки по тексту, такая проблема есть и она общая для всех известных в мире подходов создания картинок по тексту.

Для создания точной 3D модели, соответствующей описанию детали с ее размерами, мы работаем над другим подходом в рамках упомянутого проекта генеративного проектирования.

Где почитать про промты для моделей - ликбез так сказать.

Господа разработчики, создайте уже хоть в телеге чат или группу для обсуждения вашего проекта, тема интересная но при попытке найти сообщество с поддержкой разработчиков невозможно, у нас 21 век, все 3д генеративные платформы имеют свои сообщества или чаты.

А есть ли вероятность, что такую штуку когда-нибудь можно будет развернуть локально (хотя-бы купив ввиде коробки)?)

Зарегистрируйтесь на Хабре, чтобы оставить комментарий