Santry's Singularity blog
1.72K subscribers
209 photos
17 videos
3 files
345 links
Авторский блог техноредактора. Научная журналистика, инсайды и нерегулярные записки о приближении сингулярности.

По всем вопросам (кроме рекламы):
@santry

#наука #технологии #будущее #футурология #сингулярность
Download Telegram
​​Астрологи объявили взрывной рост объемов 3D-контента — ситуация стремительно набирает обороты. За конец марта опубликовано 13 статей про генерацию трехмерных объектов из текста и изображений.

SV3D: Stability AI показала новую модель для реконструкции изображения в 3D с высоким разрешением.
LATTE3D от NVIDIA: новый метод преобразования текста в 3D, позволяющий генерировать текстурированные сетки из текста всего за 400 мс.
Isotropic3D: генерация изображения в 3D на основе создания многоракурсных плоских изображений.
MVControl: преобразование текста в 3D с управлением по типу ControlNet (резкость, глубина и т. д.).
Make-Your-3D: преобразование изображения в 3D с возможностью управления генерацией с помощью текстовых подсказок.
MVEdit: поддерживает преобразование текста в 3D, изображения в 3D и 3D в 3D с генерацией текстур.
VFusion3D: преобразование изображения в 3D на базе предварительно обученных моделей видеодиффузии.
GVGEN: преобразование текста в 3D с объемным представлением.
GRM: эффективное преобразование текста в 3D и изображения в 3D за 100 мс.
FDGaussian: преобразование изображения в 3D с предварительной генерацией разных ракурсов в 2D.
Ultraman: преобразование изображения в 3D с упором на человеческие аватары.
Sculpt3D: и снова преобразование текста в 3D.
ComboVerse: преобразование картинок в 3D с комбинированием моделей и созданием сцен.

Не везде доступен код, так что сравнивать сложно, но первые результаты уже есть — пара божественных мезоамериканских нейролягушек.

#эксклюзив
​​Астрологи объявили вторую волну роста объемов 3D-контента. За конец май опубликовано еще 12 статей про генерацию трехмерных объектов с помощью нейросетей.

Text-Mesh-Refinement — новая методика добавления деталей к простой трехмерной сетке с помощью текстовых подсказок.
Diff3DS генерирует трехмерные "эскизы" из текста или изображений.
MultiPly — реконструкция трехмерных моделей нескольких людей по видео, снятому с одного ракурса. Метод способен обрабатывать окклюзии и взаимодействия между людьми.
PuzzleFusion++ — новый метод сборки трехмерных моделей из отдельных фрагментов. Автоматически выравнивает их и собирает в единый объект.
ID-to-3D — позволяет создавать готовые к рендерингу аватары по одной фотографии, причем речь идет не только о лице, но и о волосах и аксессуарах.
SuperGaussian апскейлер для 3D-моделей, добавляющий геометрические детали и повышающий разрешение.
Unique3D — еще один метод преобразования картинок в 3D. Скоро надо будет обновлять сравнение.
DIRECT-3D — генерирует 3D-объекты с точными геометрическими деталями и текстурами из текстовых подсказок за 12 секунд на одном V100. Осталось только арендовать сервер.
Ouroboros3D — еще один метод преобразования изображения в 3D, ждем-с демо.
GECO — может создавать 3D-объекты из одного изображения менее чем за секунду.
EASI-Tex — решение для текстурирования 3D-объектов по картинке-образцу.
Part123 — однопроекционная 3D-реконструкция.

Тем временем совершенствую пайплайн на базе доступных решений. На смену лягушкам пришла нейроТортилла-кашпо. В хозяйстве пригодится.

#эксклюзив #3D_печать #DIY #image_to_3D #нейросети #дайджест