Метаверсище и ИИще
46.9K subscribers
5.96K photos
4.39K videos
45 files
6.85K links
Это не новости, это персональный экспертный взгляд на то, как развивается индустрия ИИ, графики, метаверса, крипты, нейротехнологий и в каком направлении катится все это безобразие.
Для связи: @SergeyTsyptsyn
Download Telegram
Forwarded from AI для Всех
Релиз GPT-4 может состояться уже на следующей неделе

"Мы представим GPT-4 на следующей неделе. У нас есть мультимодальные модели, которые будут предлагать совершенно другие возможности — например, видео", — сообщил Андреас Браун, технический директор Microsoft в Германии и Lead Data & AI STU.

9 марта 2023 г. четыре сотрудника Microsoft в Германии представили большие языковые модели как революционную силу для своей компании. Мероприятие проходило на немецком языке.

Новость
@karray
🔥41👍13
Forwarded from Сиолошная
This media is not supported in your browser
VIEW IN TELEGRAM
Visual ChatGPT: Talking, Drawing and Editing with Visual Foundation Models

Работа от команды исследователей Microsoft, предлагающая объединить ChatGPT и множество моделей, работающих с другой модальностью - изображениями.

Под капотом доступно более 15 разных моделей и задач ("тулов", tools), которые позволяют пользователю взаимодействовать с ChatGPT путем:
1) отправки и получения не только текстовых сообщений, но и изображений
2) предоставления сложных визуальных вопросов или инструкции по редактированию, которые требуют совместной работы нескольких моделей ИИ с несколькими шагами. Фотошоп на максималках!
3) предоставление обратной связи и запрос исправлений.

Никакого дообучения не производится, всё делается исключительно промптами, то есть текстовыми командами, которые либо были созданы людьми и подаются в ChatGPT, либо были созданы ChatGPT и подаются в другие модели (то есть она ими как бы управляет).

Все картиночные модели качаются и запускаются локально (те же StableDiffusion или ControlNet), а ChatGPT дёргается по API. Таким образом, можно развернуть чатбота на своем компьютере, и получать команды от текстовой нейронки (но вскоре, с первым публичным релизом конкурента ChatGPT, можно будет делать локально всё от начала и до конца).

Самый понятный юзкейс - это заменить дизайнера на правках от заказчика 🙂, хех, когда говорят "ну давайте поиграем со шрифтами и цветами" или "поменяем объект А на Б?"

GitHub проекта: https://github.com/microsoft/visual-chatgpt
Please open Telegram to view this post
VIEW IN TELEGRAM
👍28🔥6
This media is not supported in your browser
VIEW IN TELEGRAM
Ну, за монтажки и композ!
Именно так пишут в твитторах.

Мне сегодня уже все прислали ссылку на WonderStudio. Это как бы тот самый софт, который с помощью ИИ делает все сам. Режет маски, удаляет фон, трекает камеру, трекает персонажа (AI mocap).
Там восемь кнопок "Сделать годно".
https://wonderdynamics.com/

Я писал о нем еще в фб, в дотележные времена. Ибо софт этот пилят с 2017 года.
В фаундерах там актер Тай Шеридан («Первому игроку приготовиться»), а в адвазерах, на минуточку, Стивен Спилберг.
https://wonderdynamics.com/#team

Они привлекли посевной раунд на 2,5 миллиона долларов в начале 2021 года и дополнительные 10 миллионов долларов в раунде A позже в том же году.

Вот допилились...

Хотя даже в подробном отчете на ТехКранче пишут, что это слишком хорошо, чтобы быть обещанной правдой. Вот почитайте, если вам интересны максимальные детали.
https://techcrunch.com/2023/03/08/wonder-dynamics-puts-a-full-service-cg-character-studio-in-a-web-platform/

Ну и самое главное: это web-based editor.

«Мы создали что-то, что автоматизирует весь этот процесс, анимирует его вживую, кадр за кадром, мокап не нужен. Он автоматически определяет актеров на основе одной камеры. Он выполняет движение камеры, освещение, цвет, полностью заменяет актера компьютерной графикой»

Для тех, кто в теме:
"You get mocap, clean plate, masks, blender scene, it analyzes the noise and grain,” he continued. That is: animation and motion data (including hands and face), the shot without the actor or replacement, outlines of characters and objects frame by frame, a 3D representation of the environment with terrain and other features. And it’s all matched automatically to the qualities of the shot — or shots, as it can track actors across a full scene with multiple angles."

В общем выглядит как софт-убийца. Можно записаться в вайт-лист и ждать приглоса в рай.
А пока облизывайтесь тут:
https://vimeo.com/805754885
🔥64👍7👎1
Для тех, кто в телеге недавно (или давно, но в танке).

Если попадаете в коменты к посту из самого поста, кликнув снизу на "Оставить комент" или "Х коментариев", то вы видите только коментарии к посту.
Если же вы залетели снаружи(не через пост) в чат-группу MetaComments(https://xn--r1a.website/+QHQehhqqnZJkNWFi), которая прикручен как болталка по мотивам постов, то вы видите И коменты к постам, И безумные дискуссии, которые идут в чате независимо от постов.
Там нехило пригорает местами и очень умные люди хлещутся (причем, что важно, не переходя на личности) по очень серьезным вопросам. Я все читаю, делаю вид, что понимаю, но виду не подаю.
Если вы ответили в комментариях (кликнув снизу поста), то ваши реплики будут видны и в коментариях (Discussions) и в чате (MetaComments).
Если вы пишете напрямую в чат-группу, то в коментариях (Discussions) ваши реплики не видны.
Не хотите видеть ацкия дискуссии, кликайте под постами и читайте только коменты к ним.

P.S. Чтобы коментить, надо вступить в чат-группу, просто нажать кнопку Join Group, я в конце дня всех подтверждаю. Было нашествие ботов, потом прошло, но осадочек и кнопка остались.
🔥17👍11
Южный парк конкретно оттоптался на chatGPT и ИИ.
4я серия 26 сезона называется ... Deep Learning!!

Начинается все мирно:
"После того, как Стэн, Баттерс, Клайд и Картман использовали ChatGPT для написания своих эссе и ответов своим подругам, они столкнулись с проблемами, когда на телефоне подруги Стэна, Венди, был обнаружен сгенерированный ИИ текст."

Дальше авторы жгут про ИИ.

Причем если пореcерчить, то можно найти chatGPT в авторах эпизода.

Вы спрашивали, как ИИ захватит мир - а вот так.
https://screenrant.com/south-park-season-26-ai-mocked-self/
👍33🔥14
ControlNet для SD v2.1

😳 Thibaud обучил ControlNet для Stable Diffusion v2.1, сейчас уже есть моделька Canny, Depth, HED, OpenPose.

🥳 Для обучения использовалось 300 тысяч картинок из LAION open датасета.

Как любитель генерить на v2.1 считаю что эта новость прекрасна!
☺️
ВЕСА
Тут еще веса для Diffusers
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥17👍3
Новые модели text2img, которые сейчас выпекаются на GPU 🥘

🔥 IF от Deepfloydai. Ожидаем очень релиза. Модель действительно хороша в генерации текста в артах, через промпт.

🍎 StableDiffusion-XL от StabilityAI. Это похоже SD 3.0. Но больше инфы у меня нет. Есть только примеры генераций:
EXAMPLES

🔄 Composer от AlibabaGroup. Схожая с ControlNet модель. Но есть свои особенности, например, генерация через предложенную палитру.
INFOPAPERGITHUB

🐱 DALL·E 2 experimental от OpenAI. Хотя тут еще анонс GPT-4, которая мультимодальная и обещают генерацию не только текста, но и картинок и звука. Представьте, ChatGPT на стеройдах.
EXAMPLES

🤫 MidJourney v5 от midjourney. Если вам надоело уже качество v4, кажется это как раз нечто новое, с пальцами еще попадаются веселые примеры, но интересен сам момент обучения, комьюнити сильно помогает отбирая лучшие результаты во время тренировки.
EXAMPLES

🔄 The-Model-After-SDXL от StabilityAI и MysteryGuitarM:
Промпт в одно слово.
Никаких трюков. Никаких негативных промптов. Без входящих картинок.
EXAMPLES

Многие модели уже тренятся с человеческим подкреплением, где комьюнити самостоятельно улучшают эстетику моделей, выбирая лучшие из генераций в момент обучения модели.
Пример для SD Тут можно погенерить бесплатно запросы и выбирать лучшие по вашему мнение.
Пример для Midjourney Тут нужно авторизоваться через дискорд и выбирать одну из двух генерация. Самые интересные можно себе сохранить😶‍🌫️

Автор арта -
illustrata.ai
Интересная статья от нее, как она становилась AI artist во втором Stable дайджесте.
LINK

Еще вагон видеонейронок ожидается...
Please open Telegram to view this post
VIEW IN TELEGRAM
👍21🔥1
This media is not supported in your browser
VIEW IN TELEGRAM
Вот такой вот композ прямо на ойфоне.
Берём фотку меня, сдираем с фона одним пальцем, тащим в телегу и вот я уже отрезанный отфона прилетел к себе в телегу.
Нейросети везде, а я слоупок и не знал...
👍44🔥22
This media is not supported in your browser
VIEW IN TELEGRAM
🔥85👍22
Давно знаю Йена Сприггса, встречался с ним с Софии на ТоталХаос и однажды даже чуть не привез в Москву на CG EVENT.
Этот художник делает в Maya и Mudbox портреты, которые нельзя отличить от фотографий.
Это не фотошоп, это 3Д, отрендеренное в V-Ray.

Но даже в 2017 году всегда находились люди, которые, внезапно узнав, что это все 3Д, начинали многозначительно воздыхать: "не, ну тут сразу чувствуется синтетический привкус, у них нет души, эманаций и воще бесовщина все это, я это чувствую!".

А пока не знали про 3Д, все было норм, хорошие портреты.

Я был на выступлениях Йена и помню, СКОЛЬКО времени и сил уходит на один портрет.
Поглядите на его Артстейшен, ссылка ниже.

А теперь поглядите на хорошие работы из Midjourney.
На их количество, качество, вариабельность.

И тут новые нормальные критики должны воскликнуть: "но там-то настоящее 3Д, а не эти вот ваши бесовские генераторы! Там свет правильный и текстуры кошерные..".

И я вот думаю, куда отнести работы Йена? В настоящее искусство или в бесовщину?

Если мерилом работы считать усталость, а красоту сверять с воздействием, то в искусство.
Если же метрикой будут страдания художника, слезоточивый провенанс, уникальные маски кисти и эманации исходящие от подлинников картин, то это, конечно, бесовщина.

В общем я запутался, куда теперь относить 3Д.

https://xn--r1a.website/twin_3d/185
👍21🔥11
Вот вам еще про шашечки или ехать.
Алекс Васильев сделал в фб гениальный пост.
Вот такая ИИ-кошечка и текст:
"Serpens cattus (змеиная кошка) — самый редкий вид кошачьих в на Земле. Эти животные обитают в труднодоступных регионах поймы Амазонки, в связи с этим изучены относительно плохо. Первые снимки, зафиксировавшие змеиную кошку, появились лишь в 2020-х годах. Млекопитающее весит до 4 килограмм и достигает 50 сантиметров в длину. Животное практически не поддаётся одомашниванию, хотя некоторые племена Амазонии используют змеиных кошек для охраны жилищ от грызунов.
(ТГК Неизвестная Планета).
"

Про тгк смешно, да.

На итоге - 129 репостов, 300 лайков, слезы радости в коментах и всеобщий восторг.

Никого не трясет, что это фейк.
Люди просто радуются красивым картинкам и придуманным фактам. Вам радоваться или душнить?

Вот вы гоните на chatGPT, что он иногда завирается. Да он просто радует вас интересными историями и такими же фактами, которых может и не существует.
Да и половина ваших знакомых порой несет всякую хрень, которую вы без всякого фактчекинга транслируете дальше.

Делайте репосты, радуйте знакомых.

Если же вы душнила, читайте следующий пост, про chatGPT и Википедию.
🔥70👍21👎41
wikiGPT

Давайте-ка вспомним, как затевалась Википедия.
"Главной особенностью Википедии является то, что создавать и редактировать статьи в ней может любой пользователь Интернета" - с сайта Википедии.

Вначале все просто охренели. Этож какой хни понапишут любые пользователи интернета!! Это ж какая солянка будет, субъективная притом! Да ей нельзя доверять! Там несвежие данные до 2000 года! Там фейки!

(Ничего не напоминает?)

Приподвскипало конкретно.
Потом все как-то устаканилось. Правила нарулились, люди подтянулись, никто не умер от дезинформации. Ну и понеслось.

"По объёму сведений и тематическому охвату Википедия считается самой полной энциклопедией из когда-либо создававшихся за всю историю человечества" - с сайта Вики.

Причем механизм, позволяющий Вики "самообучаться", скажем так, это в чистом виде Reinforcement Learning from Human Feedback (RLHF) - Обучение с подкреплением на основе обратной связи с человеком (также называемое RL на основе человеческих предпочтений). Кожаные модераторы правят и отслеживают посты, написанные другими кожаными модераторами.

Что сделало chatGPT таким ловким? Правильно, Reinforcement Learning from Human Feedback (RLHF):

Для обучения диалогу OpenAI привлекла кожаных инструкторов. Они изображали обе стороны разговора — ИИ и человека. Полученный набор данных команда смешала с датасетом InstructGPT, преобразованным в формат диалога. Для создания модели вознаграждения за обучение инженеры использовали разговоры между инструкторами и чат-ботом. Затем они случайным образом выбирали сгенерированные ИИ-ответы и просили модераторов ранжировать их.
Кожаные поставили свои оценки, и chatGPT обучился нравиться кожаным модераторам своими ответами.

Поэтому.

Пройдет немного времени, и все наладится. Не надо чморить chatGPT. Он щас как Вики 2001 года.
Подрастет, наберется уму разуму и никто не будет к нему придираться. Будут ходить к нему на поклон за любым чихом. Ибо он уже щас пожрал википедию с потрохами, и она составляет менее 1% в корпусах текстов, которые он проглотил на завтрак. Осталось нормально переварить, чтобы потом стать универсальным оракулом на все случаи жизни.

Мы же ему поможем своим Human Feedback? Протоколы-то обкатаны на Википедии. Дайте мальчику время.

P.S. Любителей чморить Википедию просьба не беспокоиться. Есть такая прослойка, преимущественно инженеры, которые любят найти статью про развальцовку втулок и возопить дурным голосом: "не два миллиметра, а полтора, мерзавка!".
🔥53👍24👎3
Forwarded from Квест Теория Каст и Ролей (Alexey Krol)
Спасибо всем, кто высказал свое мнение о том, где ИИ не может заменить человека?

Мое (частное) мнение:

1. Я думаю, что по мере развития коммуникативных и прочих возможностей ИИ, потребность в человеческом общении и всем с этим связанным будет неуклонно падать, и много задач будет делать ИИ.

2. Тем не менее, чтобы расти, по прежнему, надо будет уметь коммуницировать с человеком, так как пока голосует и платит человек. Хотя закупка любых видов коммодитиз будет отдана ИИ. Ибо тратить время на покупку стирального порошка - неразумно.

3. А где человек незаменим? Там, где ИИ дороже, чем человек.

4. 30 лет назад люди общались только с людьми. Сейчас до 50% всего времени люди общаются с алгоритмами в виде интерфейсов. Этот тренд будет нарастать, ибо нет обратных предпосылок.

5. Главная причина в том, что с ИИ, имитирующим некий маскот, общаться легче, а главное эффективней. Все остальное - привычка и легаси.

6. Дети вполне отлично привязываются к неантропоморфным героям мультиков и игр.

7. Весь древний анимизм это одушевление предметов вокруг, поэтому постепенно нужна будет серьезная причина, чтобы общаться с человеком, а не ии. Люди легко одушевят ИИ в разных формах, как уже сейчас одушевляют автомобили, яхты, самолеты, программы и т.п.

8. Все эти "чувство, тепло" и прочее, как эксклюзив человека довольно наивен. Вся литература, кино и игры давно научились создавать вымышленных героев, которые дают тепло, общение, дружбу и т.п. Кумиры это те, к кому тянутся, на кого хотят быть похожими, с кем хотят дружить. Люди отлично поладят с ИИ суррогатами кумиров.

9. Люди в целом не меняются. В то время, как ИИ будет становится все совершенней и будет больше похож на людей, или по крайне мере вызывать приятные чувства.

10. Скорее всего первый рынок, где "приятные" ИИ начнут поступать это будет рынок care. Люди стареют, спрос на людей в care неуклонно растет, это дорого.

11. Главное достоинство ИИ в его развитии. Даже если человек завел кошку, она не поменяется за 10 лет. Но для ИИ это огромный срок.

12. Смена ценностей, отношения займет лет 15-20, но постепенно adoption станет массовым.

13. Легче всего примут дети, потому что рынок бебиситоров, учителей - огромен. ИИ можно сделать в виде героя любимого мультика. Если ребенок полюбил этого героя в мультике, он хочет игрушку, а если его игрушка может осмысленно общаться, ходить, помогать, попробуйте объяснить ребенку, что это бяка. Ребенок быстро объяснит вам, кто бяка. И вы ВСЕ КУПИТЕ такого ИИ. Вам же карьеру делать надо, а с ИИ безопасно, и учит он лучше человека. И он мягкий, теплый, комфортный. И не будет бить ребенка в ваше отсутствие. И защитить сможет. И ребенка можно оставить с ним на несколько дней.

14. Потом примут старики. А что ВЫ МОЖЕТЕ ДАТЬ одиноким старикам? Или даже своим старым родителям? 2 звонка в год? Открытку на новый год? Да?
🔥69👍32👎5
Я согласен с КАЖДЫМ пунктом предыдущего поста.
Просто вспомните, как молодые родители с облегчением усаживают двухлетку в кафе напротив айпеда, чтобы спокойно поесть.

В айпеде - лютый треш. Ацкие мультики, которые почему-то нравятся двухлеткам.

А теперь предствьте что и айпеде babyGPT, который отлично знает, что нравится двухлеткам. Знает гораздо лучше кожаных затраханных родителей. Который может не только мультики показать, но и научить, успокоить, увлечь, поддержать. Который может воспитать.

А кожаным родителям нужно будет только кормить ребенка..

Хотя..

Заказ и доставка питания.
Небольшой сетап для кормежки кожаных детей.

И вот уже родители могут только делать фотки для инсты со своим чадом. Остальное сделает ИИ. И сделает лучше.

А доступ к ребенку будет в нужное ребенку время. Чтобы не травмировать его кожаными импринтами и психотравмами.

Ибо ИИ терпелив, заботлив, хорошо знает теорию, не ленится, не засыпает и знает как воспитать ребенка. Кожаные уже все про это написали. Только не успевают следовать написанному. Работа, соцсети, все дела...
👍85👎14🔥10
chatGPT - тупой идиот.
А вот GPT-3 (davinci-003) - умница и красавица.

Держите сайт, где можно сравнить разные языковые модели, просто тестируя их на одном и том же своем тексте. Очень познавательно.

А я оказывается на борде в Andreessen Horowitz плюс инвестировал в Slack, Airbnb, and Uber!
Где мои бабки, ИИ?!

"Sergey Tsyptsyn is a Russian-born entrepreneur and investor. He is the founder and CEO of Tsyptsyn Ventures, a venture capital firm focused on investing in early-stage technology companies. He has invested in a number of startups, including Slack, Airbnb, and Uber. He is also a member of the Silicon Valley-based venture capital firm Andreessen Horowitz."

https://nat.dev/compare

Стащил коментах к каналу, спасибо @andrey_bezryadin
🔥36👍13
This media is not supported in your browser
VIEW IN TELEGRAM
Кому генеративного 360 и виарчика?

Stable Diffusion + ControlNet + Skybox и вот уже рисуем в 3д и получаем почти 3д.

Выглядит убойно. В комментах обещают глубину и ещё больше 3д.

Яна, тебе понравится.

https://twitter.com/BlockadeLabs/status/1634578058287132674

Здесь ещё слаще:
https://www.blockadelabs.com/
🔥97👍9
А новый Бинг хорош.

Даже ссылки разные подбирает для разных языков.

Википедию на свалку истории!
👍47🔥24
Помните я писал, что большую языковую модель LLaMa от Метачки угнали и кинули на торренты?

Народ скачал, приподоптимизировал и уже запускает локально на Маках!!

"ChatGPT" on laptop: LLaMA 7B now runs on Apple M1 Pro at 16 tokens/s on Apple Silicon!

Secret? Pure C++ code and 4-bit quantization.

В комментах уже запихивают 75B модель в Apple M2.

А на робкие вопросы типа "это как chatGPT, только на своем компе и без интернета" - уверенно отвечают да.

Подробности:
https://twitter.com/sytelus/status/1634370038349303808?s=20

The effect on community is very similar to what happened when StableDiffusion models were released. Folks have already figured out much better generation strategies. The 33B model now can be run on a single RTX 4090 @ 4 tokens/sec!
🔥58👍12
chatGMC.

В часы chatGPT уже проник.

Теперь просачивается в автомобили.

Вы спрашивали, как ИИ захватит мир.

"компания разрабатывает ИИ-помощника, которые сможет подсказать водителю, что делать в сложной ситуации"

А потом, если подписка вдруг закончилась, то слегка отупевший и привыкший к хорошему водитель будет биться головой в руль и рыдать "что же мне делать".

ИИ: положить бабла на счёт, после этого поговорим.

https://www.ixbt.com/news/2023/03/11/general-motors-chatgpt.html
🔥20👍10
А вы о чем подумали, извращенцы?

И эти люди обвиняют ботов в сексизьме, расизьме и предубеждениях.

chatGPT - невинный младенец по сравнению с вами, греховодники.
👍104🔥42