Такое нейро3Д нам нужно!
https://twitter.com/myshli_com

Я знаю Серегу Осипова еще по временам, когда я прилетал в Минск выступать в Wargaming, а вся команда WG Video Team (Кирилл, Саша, Саша) круто выступала у меня на Ивентах и брала призы в категорях Motion Design.

Так вот, Сергей запускает нехилый такой стартап Placy.ai - AI real estate assistant. MVP стартует на Кипре уже весной. Есть возможность понаблюдать за стартапом прямо в процессе создания продукта. Сергей, один из фаундеров, который на минуточку когда-то придумал и сделал единорога Cian.ru, ведет свой блог Placy Journal, где пишет обо всем в формате “открытая кухня”. Техно-инсайты, маркетинговые находки. Там даже можно поучаствовать в выборе аватара для AI-ассистента и т.п. Обещает пригласить подписчиков канала первыми на тестирование MVP в апреле.

И это не взаимный пиар или что там еще употребляют в телеграмме. Мы только что три часа взахлеб общались с Серегой, расширяя сознание разговорами про ИИ. Так что контент там будет интересный).
https://xn--r1a.website/placy_ai

Чем мне нравится DALL·E 3, так это своим чувством юмора и неприхотливостью к промптам.
Пишу анонс к очередному Хабу. И просто кидаю в chatGPT - дай мне криптозиму, бро.
- Апажалста.

И все на месте. И смыслы, и персонажи.

Тут недавно инернетик взрывался новым трейлером GTA6.
Выглядит нарядно, а на реддите мощно обсуждают, ИИ уже проник в застенки TakeTwo и нас может ожидать что-то совсем новое и интересное.

Динамическая генерация Интерьеров и Анимаций (для NPC), которая подстраивается, скажем так, под контекст (прокачка игрока, наигрыш, время года или дня, что угодно).

TakeTwo запатентовали несколько "идей" из которых выделяются две.

ИИ-интерьеры.

Интерьеры будут генерироваться случайным образом, то есть: комнаты/здания будут соответствовать стилистическим категориям/тегам.

Например: квартира дорогого класса по сравнению со старой квартирой, где есть стили и объекты: новые/изношенные, чистые/грязные. Общая структура, но будут взаимозаменяемые черты/объекты/элементы, которые будут генерироваться и развиваться с течением времени. Комната не изменится просто от того, что вы выйдете из нее и сразу же войдете снова.

AI NPC
У NPC будут генерируемые ИИ "ответы", настроения и анимации, основанные на событиях, атмосфере, настроениях и ситуациях других игроков или NPC.

Пример: Если NPC попал под дождь, его действия могут быть рандомизированы в зависимости от дождя/погоды. Если NPC пьян, он будет реагировать по-разному, основываясь на том, что ИИ случайно подскажет NPC, что делать - это не встроенное в игру "дерево анимаций". Если вы делаете что-то "безумное", ИИ может приказать NPC начать записывать вас на свой телефон.

По сути, они будут вести себя и чувствовать себя гораздо более индивидуально, с большим разнообразием спонтанных действий. Как будто все они живут своей собственной жизнью.

Я честно посмотрел патенты от TakeTwo, но не нашел там ничего про ИИ, максимум про data-driven animation. Что, впрочем, позволяет домыслить это как ИИ и бахнуть вот этот пост.

Ну и мы стремительно движемся к content on demand - каждому своя картинка. Дергающая за индивидуальный рычажок удовольствия.

И да, Илон Маск удачно вонзил свою иголочку в мозг первого кожаного пациента. Пациент жив. На этом пока все.
Поэтому я бы подождал месяцок, чтобы поглядеть, что будет дальше.
И какого рода "коммуникация" будет идти через иголочку.
Пока это односторонний канал. Изнутри наружу.

После вчерашнего поста Даня Криворучко пришел в коменты и там даже случилась дискуссия по поводу извлечения глубины нейросетками.
А сегодня подглядел у Нейронавтика пост про Depth Anything.
На демках, конечно, все сладко, особенно если подсовывать туда булки и полки, у которых гладкие края, уходящие вглубь кадра.
Я взял пару картинок от Дани и скормил их в новоиспеченное демо Depth Anything.
https://huggingface.co/spaces/Xenova/depth-anything-web
Скормите и вы, это не требует питонгования. Но дает представление о том, как сейчас нейросетки тащат глубину из кадра. И на каких картинках можно рассчитывать на интересный результат (крупные, гладкие объекты, спокойный фон), а на каких будут артефакты (шум, мелкодетальность) и проблемы при анимации.
Впрочем, это азы композа, которые приходят к нам благодаря нейросеткам.
Из интересного, все это добро можно прикручивать к своим [веб]-приложениям, благодаря интеграции с transformers.js
https://github.com/xenova/transformers.js/releases/tag/2.14.1

И не забудьте заглянуть сюда:
https://huggingface.co/spaces/Xenova/doodle-dash
Пример того, как можно вкручивать это хозяйство в веб.

Лолирую. Эпол запихнули в свой сойбордический шлем разъем, который выглядит, как финальная босс-фаза lightning.

Ну это и понятно, пока квест-плебеи вынуждены довольствоваться своими нищенскими USB-c и любыми павербанками, аполбои будут снова покупать проприетарщину. Я бы ещё им туда на павербанк их hardware id lock поставил по традиции, чтоб нельзя было самому новый официальный купить и поменять без похода в сервисный центр, для пущей илитарности.

Eu: bans lightning from iphones
Lightning: it's not even my final form

Подробнее

@derplearning

Про масочку от Эппле.

Вот-вот масочки попадут в руки нормальных (ну или как посмотреть за 3500) людей и в сети появятся реальные отзывы.

Пока в сети в основном обсуждаются технические характеристики, цена, вес батареи и качество картинки.

Если вам это все еще интересно, вот держите сводку от TheVerge, там очень ровно все написано. С осторожными выводами типа "непотнятно, станет ли это чем-то".
https://www.theverge.com/2024/2/1/24057883/heres-that-picture-of-tim-cook-wearing-an-apple-vision-pro-headset-you-wanted
Там же есть фоточки мистера Кука, которые наконец-то водрузил масочку на голову (чего все ждали еще на презентации). И главная цитата оттуда:

"Я смотрел третий сезон "Теда Лассо" на своем потолке, и это было невероятно!" - говорит Кук.

Verge едко подписывает цитату: "3 499 долларов, обоснованно, чо".

Я еще раз пробежался по обзорам - 95 процентов отзывов про экран, качество картинки, пассивный просмотр контента.

Есть ощущение, что главный козырь пока - просмотр и потребление контента.

Ну ок, конкуренция с TV и стримингами мысль неплохая, аудитория просто огромная.

Но я как древний мамонт, переживший стерео-истерику, вспоминаю 2010 и сумасшествие по поводу 3Д-стерео контента, 3Д-телевизоров, смешных 3Д-очков, которые прилагались к каждому проданному телевизору. И 4 миллиарда долларов, закопанных в проекты по стерео-вещанию.

Все уперлось в один неожиданный момент. Кожаные зрители ни в какую не хотят одевать эти легкие, беспроводные, и снова очень легкие очки на нос, чтобы окунуться в дивный мир пространственного контента.

Также оказалось, что пилить такой контент - дорого. В начале было просто ацки дорого, но потом научились дербанить обычную картинку на два глаза, но съемки требовали ограничений на композицию кадра. Ну и качество такой конверсии было не айс.

3Д-стерео тихо умерло.

Так что смотреть на потолке сериалы народ явно не будет, мы уже это прошли 13 лет назад. Ну и Нетфликс неожиданно кансельнул Эппле, заявив, что не будет пилить никаких приложений для Vision Pro - смотрите обычную картинку на потолке в браузере.

Ставки на игры Эппле не делает.

Остаются метаверсики? Но они как-то тоже приподумерли за два года.

Где киллер-фича или килер-приложение, которое сведет мир с ума?

Я готов восхищать маской как инженерным проектом, в котором еще вдобавок много нейросайенса. Я также ожидаю, что ажиотаж в этом году будет огромен (кстати, львиная доля заказов была сделана ботами, которые обходили AppleID и цена у перекупов начиналась от 6K).
https://9to5mac.com/2024/01/24/vision-pro-scalpers-bots/

Я также думаю, что есть ниши, где такие устройства будут бесценны (медицина, исследование кожаных мозгов).

Но масс-маркет?

Поговорим через год. А пока это повод хорошо заработать, как с NFT. На перепродажах. Шиллинг на миллиарды.

Харри Поттер и Молот Войны.
Продолжаю закидывать в канал работы подписчиков, интересны живые кейсы, а не сферический интернет.
Как всегда интересно, КАК это было сделано.
Вот держите еще одну работу от Паши Перегудова.
За подробностями в коменты, а тут небольшой брейкдаун от автора:

Все изображения генерировались в Midjourney v6
Анимирование в ComfyUI со StableVideoDiffusion
Апскейл Topaz Video AI 4
Фейсвап в https://www.deepswapper.com/
Липсинк в https://synclabs.so/
Голоса https://elevenlabs.io/
Аутпэйнтинг в fusionbrain.ai
Монтаж и цветокорр в DaVinci
Музыка авторская, Кирилл Горохов (Unstoppable Music)

Было создано около 214 изображений, из которых в монтаж вошло 41
Создание всего ролика заняло около 2 недель при работе в свободное время.
Все, кроме музыки создано одним человеком.

Мне нравится чувство юмора. Этот ролик мне представляется точным срезом генеративного видео на начало 2024 года. Один большой прикол с прицелом на огромные рынки коротких форм.

И у меня вот такой странный вопрос про масочку от Эппле.

Мы же говорим про ежедневное использование?
Мы же не говорим про игрушку за 3500, которую используют раз в неделю или реже (как смысл в таких инвестициях тогда)?

Мы же говорим про такую часть жизни как телефон, телевизор, автомобиль, компьютер. Ежедневную реальность.

И у меня вопрос: представьте, что вы надеваете на голову вот это вот всё каждый день на несколько часов. В течение года.

У меня сразу несколько вопросов:
- что скажет моя шея? - смещение баланса и вес маски мне точно не нравятся.
- что скажет кожа на лице?

Какие вопросы есть у вас в таком разрезе?

Спросите себя: несколько часов в день в течение года? готовы?
Если да, то за ради чего?

Так вот кто делал дизайн для Apple Vision Pro!!

Если вы просто спрОсите у chatGPT:
брат, дай picture of apple vision pro

Он вам выдаст вот такую картинку, но виду не подаст!
Это, говорит, воображаемый продукт от Эппле, я тут только галлюционирую и ничего не знаю про всеобщую истерику: Here is a futuristic concept design of an imaginary product called 'Apple Vision Pro'.

Ловко врет, ничего не скажешь (либо архетип лыжной маски прошит в дизайнерском коллективном бессознательном).

Недавно писал про InstantID, а тут выкатили видеоверсию - InstantID-2V
Сервисов оживлялок в сети много, они обычно попрошайничают, а тут как бы опен-сорс, с возможностью установки на свой комп.
Не скажу, что вау, но кому-то возможно пригодится.
Из управлялок - возможность выбрать ракурс камеры или даже загрузить свой кадр - ракурс возьмется оттуда (и по-моему там close-up сломан)
Я использовал фотку из предыдущего поста и короткий промпт:
cyberpunk portrain of man

Го пробовать, пока ГПУ в наличии:
https://huggingface.co/spaces/fffiloni/InstantID-2V

Эппле: пошли поставки лыжной маски!
Рынок: -5.01

Эппле: Кук сообщил, что Apple может анонсировать ИИ когда-нибудь в этом году.
Рынок: -5.46