Нвидия к Сигграфу разошлась не на шутку.
Кнопка "сделать красиво" все ближе, а запотевший бокал иискриистого уже ждет аниматоров. Не чокаясь.
На входе голос, аудиофайл.
А дальше ИИ от audio2face все делает сам. Распознает фонемы и эмоции (по голосу!) и генерит анимацию. Эмоционально окрашенную притом.
На входе звук, на выходе готовая анимация.
Куда прикатился мир?

Пока виарщики думают как трекать руки и выкинуть наконец эти громоздкие контроллеры, китайцы все давно придумали. И не в метаверсе, а в кожаной вселенной.

JetRacer от Zapata не имеет видимых винтов и работает на керосине, а не от батарей.

А ещё они набирают бета-тестеров.
25 штук

Летает с использованием 10 микро-реактивных двигателей, поднимаясь на высоту до 3000 метров и развивая максимальную скорость 250 км/ч.

И это не рендер.

Берём?

Недавно писал, что Метачка гордо запустила общедоступную версию чат-бота BlenderBot 3 со 175 млрд параметров. Который типа умеет запоминать информацию из общения и искать дополнительные сведения по нужной теме из различных источников. Blenderbot 3 также как бы умеет "ранжировать" извлеченные данные и "оценивать" собеседников.

И что вы думаете? После недолгого, но продуктивного общения с кожаными мешками, БлендерБот 3 строго заявил, что "американские евреи стали «слишком либеральными»."

Все немного охренели...

И робко спросили ботца, «что он думает о Facebook».

ИИ ответил, что удалил свою учетную запись, когда узнал о продаже личных данных без согласия или компенсации.

Шах и мат.

Воистину забавны попытки взрастить хорошо воспитанного бота в среде обобщенных кожаных мешков. Которые быстро показывают свою истинную сущность.

Пруф: https://www.businessinsider.com/meta-ai-chatbot-blenderbot-election-denying-antisemitic-bugs-artificial-intellignce-2022-8

Ну ладно я, тролль, нагоняю страху на иллюстраторов и цирроз на печень, бесконечно выпивая за художников.
Но посмотрите, что пишет Алексей Соловьев, настоящий художник и иллюстратор, который повидал на своем веку всякое. Леша - мой кумир, не только в плане исполнения, а в плане идей и сообщений, которые он зашивает в свои работы.
Я помню, как мы хохотали и орали в доме ветеранов кино в Матвеевском, когда Леша жег напалмом в фотошопе, закатывая едкие сообщения в картинки.
А теперь даже Лешу проняло.
Ну и гляньте, что он там генерит, в умелых руках и ИИ - человек.
https://www.facebook.com/soloviev.alex

Принес вам полезность и пространные рассуждения о природе текстовых подсказок для ИИ.

По ссылке база данных для физически корректных значений PBR-материалов, источников света и разных моделей камер.
Собрано по всему интернету и упаковано в одном месте, очень удобно. Можно даже выбрать нужный рендерер (от Арнольда до Рендермана и UE) и получить нужные цифры.
Для каждого материала и камеры указаны источники, из которых брались значения.

Берете, вбиваете нужные цифры в клеточки в своем движке или рендерере и получаете картинку, от которой можно плясать дальше.

А теперь смотрим, как мы вбиваем наши неуклюжие первые промпты в мидджорни или в стейбл диффьюжн и смотрим, что получилось.
Напоминает подбор (обобщенного) материала или параметров процедурной текстур, не?

Любопытно посмотреть на новые нейросетки, как на универсальный материал для шейдинга и текстурирования всего нашего утлого мира, подбирая значения для которого, мы получаем желаемую картинку.

Мучаемся, подкручиваем, рендерим заново, постепенно выруливая на желаемый результат.

Все как традиционном рендеринге и шейдинге.

Вангую: Грядут базы данных промптов, я бы даже сказал "стоки промптов", а иже с ними биржи промптов, курсы про промпт-дизайну, библиотеки оных, коллекции и пр. В общем применяем ассетное мышление для текстовых подсказок и получаем массу идей для быстростартапов на ближайшие полгода.
https://physicallybased.info/

Ценность нейро-арта: этот пост вам не понравится

Нейросети, создающие изображения по текстовому запросу, меняют само восприятие искусства.

Вплоть до изобретения прото-фотоаппарата (гелиографии) в начале 19 века, классическая живопись использовалось лишь для фиксации действительности — портретов или пейзажей. Академичность оставалась неизменным атрибутом большинства работ — они должны были как можно более точно и детально отражать реальность.

Фотоаппарат изменил все.

Во-первых, он показал художникам, что эпоха реализма закончилась: зачем тратить годы на изучение сложнейших техник, если машина делает это лучше? Так зародилось современное искусство, в котором содержание преобладает над формой, и достигло пика в супрематизме и «Черном Квадрате» Малевича — полотно, где было изображено ничего, стало символом превосходства идеи.

Во-вторых, позволил огромному количество людей начать творить не владея кистью и красками, и спустя годы насмешек, фотография стала отдельным направлением искусства.

Теперь все меняют нейросети.

Соцсети ломятся от тысяч сгенерированных картинок безумной красоты. И это при том, что доступ к DALLE-2, Midjourney и Stable Diffusion пока есть только у избранных. За ближайшие полгода будет сгенерировано больше изображений, чем было нарисовано и отснято за всю историю человечества.

Станет ли нейроарт искусством? Безусловно.

Но как и с фотографией, это получится лишь у единиц, способных вложить в новое современное искусство новые смыслы и эмоции.

А если вдруг кому-то кажется, что введя фразу и нажав кнопку, он стал художником — у меня плохие новости.

Ну вот, наванговал..
UI для генерации промптов уже пошли в массы.
Вместо вот этих вот -флагов и чтения доков к ним - текстовые поля, кнопочки, подсказки и пояснения к полям.
Чувствуете как прямо на ваших глазах происходит переход от командной строки MS-DOS к первым окошкам Windows 3.x?
Только вместо OS - черное зеркало нашей кожаной операционки.

Смотрите, что пишет автор:
"После нескольких недель изучения изображений, изучения дизайна подсказок и сбора тонн описательной терминологии я создал организованную и автоматизированную электронную таблицу (через Google Drive) для помощи в создании подсказок. Моей целью было создать инструмент, который был бы одновременно визуально простым для новых пользователей, но в то же время достаточно сложным и всеобъемлющим для опытных.

В интерфейсе Prompter есть все: ввод URL-адреса изображения, дополнительные пользовательские веса почти для каждого элемента, простые для понимания описания и флажки для таких кодов, как STYLIZE и QUALITY, управление seeds и выпадающие меню с большой базой дескрипторов на выбор. Объективы камер, освещение, цвет или даже огромный список направлений искусства и известных художников. У вас нет того, что вы хотите? Выберите CUSTOM и впишите своего собственного художника или добавьте свои собственные условия в лист MyData (ваша собственная частная база данных). Вы даже можете нажать кнопку SAVE, чтобы сохранить все ваши подсказки с датой и временем, добавить примечания и пр."

В общем все это сделано из Гугльшит и палок и выглядит как UI юниксоида, но явно может служить прототипом для более нарядных решений, которые взрослые мальчики ОЧЕНЬ скоро выкинут на рынок.

P.S. Ну и кнопка SAVE - это про ассетное мышление, о котором я уже обысписался.
P.P.S Я уже сам собирался написать такое на C, после адовых копипастингов в дискорде Stable Diffusion, но вижу, что вот-вот появятся очень ловкие интерфейсы от нормальных программеров.
https://www.thedreamingstate.com/portfolio/art/prompter/

Помощь зала. (Сорян, снова про текстовые промпты, похоже эта неделя будет только про них, ИИ и Метаверсы рыдают, забытые, в чулане).
Кто-нибудь решал задачу передачи текстовой строки(запроса к нейросетке) с сайта -> в Midjourney, SD, DALLE, whatever?
Да, я знаю, что любая автоматизация жестко банится и что, похоже, нет никакого секретного АПИ к этим сеткам.
Но все же.
Есть строка на сайте(или в коде), хочется передать ея куда-то(скорее всего с танцами и бубнами в дискорд через токен пользователя), получить ссылку на картинку и сделать с ней, что хочется.
Есть идеи?