3Дай Студио
Сегодня у нас 3Д-марафон. На дворе GDC, много апдейтов.
Для начала принес вот такой комбайн. Он сегодня еще будет фигурировать в тестах 3Д генераторов, как один из лучших.
Тут ребята развернулись не на шутку. 3Д-вьюпорт, text-to-3D, image-to-3D, Remesh AI и даже упоминания про Video AI.
И прямой коннект с Блендором.
Выглядит действительно неплохо, хороший конкурент Rodin Pro.
Бесплатного плана нет, а базовый выглядит дороговато 40 центов за одну генерацию (16 евро в месяц за 40 генераций).
Ремешер я не смог попробовать, хотя он как бы бесплатный, нужно навалить кредитов на баланс, чтобы появился Экспорт.
И у них свои 3Д-нейромодели из который Prism выглядит как самая продвинутая.
В общем, еще один игрок на рынке закрытых 3Д-генераторов.
https://www.3daistudio.com/
@cgevent
Сегодня у нас 3Д-марафон. На дворе GDC, много апдейтов.
Для начала принес вот такой комбайн. Он сегодня еще будет фигурировать в тестах 3Д генераторов, как один из лучших.
Тут ребята развернулись не на шутку. 3Д-вьюпорт, text-to-3D, image-to-3D, Remesh AI и даже упоминания про Video AI.
И прямой коннект с Блендором.
Выглядит действительно неплохо, хороший конкурент Rodin Pro.
Бесплатного плана нет, а базовый выглядит дороговато 40 центов за одну генерацию (16 евро в месяц за 40 генераций).
Ремешер я не смог попробовать, хотя он как бы бесплатный, нужно навалить кредитов на баланс, чтобы появился Экспорт.
И у них свои 3Д-нейромодели из который Prism выглядит как самая продвинутая.
В общем, еще один игрок на рынке закрытых 3Д-генераторов.
https://www.3daistudio.com/
@cgevent
👍12🔥7👎2❤1
А тем временем Хуньянь обновил свой 3Д-генератор.
Теперь там две модели.
2mini - 0.6B параметров, но генерит шустрее и лучше, чем предыдущая модель на 1.1B параметров.
2mv - multiview, генерация по нескольким картинкам (до 4 штук) с текстурированием.
Требования к памяти такие:
It takes 6 GB VRAM for shape generation and 12 GB for shape and texture generation in total with cpu offloading.
Все можно скачать и установить локально.
https://github.com/tencent/Hunyuan3D-2
Более того, есть демо-спейсы для тестирования:
https://huggingface.co/spaces/tencent/Hunyuan3D-2mv
https://huggingface.co/tencent/Hunyuan3D-2mini
@cgevent
Теперь там две модели.
2mini - 0.6B параметров, но генерит шустрее и лучше, чем предыдущая модель на 1.1B параметров.
2mv - multiview, генерация по нескольким картинкам (до 4 штук) с текстурированием.
Требования к памяти такие:
It takes 6 GB VRAM for shape generation and 12 GB for shape and texture generation in total with cpu offloading.
Все можно скачать и установить локально.
https://github.com/tencent/Hunyuan3D-2
Более того, есть демо-спейсы для тестирования:
https://huggingface.co/spaces/tencent/Hunyuan3D-2mv
https://huggingface.co/tencent/Hunyuan3D-2mini
@cgevent
❤23🔥21👍12
This media is not supported in your browser
VIEW IN TELEGRAM
Нейромоделинг, нейрориг, нейромокап плюс Unreal Engine (тут скоро будет нейрорендер).
Роден сгенерировал 3D-модель Патрика Стара, автоматически заригал ее, потом импорт в UE, где она была санимирована в реалтаймовом нейромокапе CYAN AI.
Понятно, что криво-косо, но это 5 минут вместо недели. И это пока.
Кнопка "сделать красиво" все ближе
@cgevent
Роден сгенерировал 3D-модель Патрика Стара, автоматически заригал ее, потом импорт в UE, где она была санимирована в реалтаймовом нейромокапе CYAN AI.
Понятно, что криво-косо, но это 5 минут вместо недели. И это пока.
Кнопка "сделать красиво" все ближе
@cgevent
🔥42👍11😁6❤1
Рендер или видео?
Ускорено или нет?
Рендер - 👍
Видео -🔥
Китайцы из EngineAI, конечно, приподзажигают со своими робатами.
А мы тут такие, 3Д генераторы, Wonder Dynamics, все дела..
@cgevent
Ускорено или нет?
Рендер - 👍
Видео -
Китайцы из EngineAI, конечно, приподзажигают со своими робатами.
А мы тут такие, 3Д генераторы, Wonder Dynamics, все дела..
@cgevent
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
36🔥131👍34❤4
This media is not supported in your browser
VIEW IN TELEGRAM
Помните старый фильм Живая сталь (Real Steel, 2011)?
Сколько интересно был бюджет на графику\аниматронику.
А сейчас можно взять робата из предыдущего поста и просто снять, а потом ускорить. 😄
@cgevent
Сколько интересно был бюджет на графику\аниматронику.
А сейчас можно взять робата из предыдущего поста и просто снять, а потом ускорить. 😄
@cgevent
👍26❤4
This media is not supported in your browser
VIEW IN TELEGRAM
ИИ идет по спирали.
Когда-то у Диснея еще в 2018(!!) году была удивительная работа (Cardinal AI) по конвертации сценариев(сторибордов) прямо в анимацию, а не в статичные модели. Они обновили ее в 2019 году (ссылка), и там это выглядело не только как построение лэйаутов, а еще и генерация анимации. И да, все это работало на основе библиотеки моделей, откуда таскались ассеты.
А теперь поглядите куда мы пришли со связкой Блендор + Клод + MCP.
На прошлой неделе Клод моделил самолетики и мебель, а сейчас смышленые парни прикрутили туда 3Д-сток с модельками, чтобы он не мучился, а таскал ассеты оттуда.
Вы просто покрутите видео и поглядите как импортируются текстуры, модели и хдри. И создается сцена с пляжем
И вот тут пора расчехляться Шаттерстоку...
Проматываем вперед: стоки забиты сгенерированными текстурами и 3Д-моделями, над ними парит Блендор, который на стероидах Клода, быстро собирает лего в соответствии с промптами (нет, не юзера, а) LLM, которая переводит хотелки заказчика в нужные промпты.
А Блендор нейрорендерит все это под нужный стиль..
@cgevent
Когда-то у Диснея еще в 2018(!!) году была удивительная работа (Cardinal AI) по конвертации сценариев(сторибордов) прямо в анимацию, а не в статичные модели. Они обновили ее в 2019 году (ссылка), и там это выглядело не только как построение лэйаутов, а еще и генерация анимации. И да, все это работало на основе библиотеки моделей, откуда таскались ассеты.
А теперь поглядите куда мы пришли со связкой Блендор + Клод + MCP.
На прошлой неделе Клод моделил самолетики и мебель, а сейчас смышленые парни прикрутили туда 3Д-сток с модельками, чтобы он не мучился, а таскал ассеты оттуда.
Вы просто покрутите видео и поглядите как импортируются текстуры, модели и хдри. И создается сцена с пляжем
И вот тут пора расчехляться Шаттерстоку...
Проматываем вперед: стоки забиты сгенерированными текстурами и 3Д-моделями, над ними парит Блендор, который на стероидах Клода, быстро собирает лего в соответствии с промптами (нет, не юзера, а) LLM, которая переводит хотелки заказчика в нужные промпты.
А Блендор нейрорендерит все это под нужный стиль..
@cgevent
4🔥64👍12❤3
Квази-3Д-генерация. И квази-ретопология.
Берете картинку, открываете Google AI Studio (бесплатно), берете модель 2.0 Flash или 2.0 Flash Thinking, даете ей на вход свою картинку и просите:
Гугл выдает вам, грубо говоря, wireframe render.
Он сам сегментирует объекты, честно пытается представить их топологию в 3Д и выдает вам варианты.
Скажу заранее, вам придется с ним как следует поругаться, прежде чем он что-то начнет выдавать. Например, сначала попросите сгенерить просто любую картинку.
Еще раз, это просто 2Д-картинка. Тут нет 3Д модели.
Но очень интересно смотреть, как он "понимает" сцену.
Я сгенерил бутылку на столе(первая картинка) - сцена простая, но вы можете его помучить на более сложных сценах. Обратите внимание на топологию стола и окна на второй картинке.
@cgevent
Берете картинку, открываете Google AI Studio (бесплатно), берете модель 2.0 Flash или 2.0 Flash Thinking, даете ей на вход свою картинку и просите:
edit this image to generate with Imagen3 a 3d wireframe representation (as image) of every unique object and subject in this scene. it should look like a blender 3d viewport with wireframe mode turned on.
Гугл выдает вам, грубо говоря, wireframe render.
Он сам сегментирует объекты, честно пытается представить их топологию в 3Д и выдает вам варианты.
Скажу заранее, вам придется с ним как следует поругаться, прежде чем он что-то начнет выдавать. Например, сначала попросите сгенерить просто любую картинку.
Еще раз, это просто 2Д-картинка. Тут нет 3Д модели.
Но очень интересно смотреть, как он "понимает" сцену.
Я сгенерил бутылку на столе(первая картинка) - сцена простая, но вы можете его помучить на более сложных сценах. Обратите внимание на топологию стола и окна на второй картинке.
@cgevent
2❤23👍18😁3
Заканчиваем 3Д-марафон эпическим сравнением 3Д-генераторов.
От самого Энди Прайса - Блендор Гуру.
Поглядите картинки, они красноречивы сами по себе.
Там правда есть момент, Энди не юзал Rodin Pro, за что ему насовали в коментах. Потом исправился, но не на всех тестах.
А я просто переведу твит Энди, так как сильно согласен с ним насчет редакитруемости и топологии.
Несколько тестов, чтобы понять, стоит ли художникам беспокоиться об искусственном интеллекте.
Честно говоря, ИИ стал очень хорош (особенно Prism: https://3daistudio.com). Но редактирование еще долго будет оставаться его главной проблемой. Кашеобразные(messy) сетки означают, что даже небольшие исправления требуют дорогостоящего ретопа.
Лучше всего ИИ справляется с непрозрачными, гладкими формами, которые часто встречаются в датасетах (автомобили, люди и т.д.), и хуже всего - со сложными объектами с мелкими деталями (деревья и т.д.)
Один из навыков, который будет очень ценен в будущем, - это ретоп и текстурирование. Если вы хотите повысить квалификацию, изучите любой существующий сегодня рабочий процесс по очистке фотограмметрии, потому что это, по сути, одно и то же.
Или сосредоточьтесь на "hero assets". Все, что находится близко к камере, должно быть точным, а AI-модели таковыми не является.
К игровым активам также предъявляются гораздо более сложные требования (UV-пространство, герметичные сетки, оптимизированные шейдеры), и я сомневаюсь, что ИИ сможет решить это в течение некоторого времени.
https://x.com/andrewpprice/status/1901678647850717638
@cgevent
От самого Энди Прайса - Блендор Гуру.
Поглядите картинки, они красноречивы сами по себе.
Там правда есть момент, Энди не юзал Rodin Pro, за что ему насовали в коментах. Потом исправился, но не на всех тестах.
А я просто переведу твит Энди, так как сильно согласен с ним насчет редакитруемости и топологии.
Несколько тестов, чтобы понять, стоит ли художникам беспокоиться об искусственном интеллекте.
Честно говоря, ИИ стал очень хорош (особенно Prism: https://3daistudio.com). Но редактирование еще долго будет оставаться его главной проблемой. Кашеобразные(messy) сетки означают, что даже небольшие исправления требуют дорогостоящего ретопа.
Лучше всего ИИ справляется с непрозрачными, гладкими формами, которые часто встречаются в датасетах (автомобили, люди и т.д.), и хуже всего - со сложными объектами с мелкими деталями (деревья и т.д.)
Один из навыков, который будет очень ценен в будущем, - это ретоп и текстурирование. Если вы хотите повысить квалификацию, изучите любой существующий сегодня рабочий процесс по очистке фотограмметрии, потому что это, по сути, одно и то же.
Или сосредоточьтесь на "hero assets". Все, что находится близко к камере, должно быть точным, а AI-модели таковыми не является.
К игровым активам также предъявляются гораздо более сложные требования (UV-пространство, герметичные сетки, оптимизированные шейдеры), и я сомневаюсь, что ИИ сможет решить это в течение некоторого времени.
https://x.com/andrewpprice/status/1901678647850717638
@cgevent
🔥34👍15❤5😱2