Кто стоит за StableDiffusion?
Посмотрите интервью с @EMostaque, основателем Stability AI. Яник поговорил с ним об открытых моделях, создании гигантского вычислительного кластера с нуля и о том, как он представляет себе настоящую демократизацию ИИ.
Интервью
Посмотрите интервью с @EMostaque, основателем Stability AI. Яник поговорил с ним об открытых моделях, создании гигантского вычислительного кластера с нуля и о том, как он представляет себе настоящую демократизацию ИИ.
Интервью
YouTube
The Man behind Stable Diffusion
#stablediffusion #ai #stabilityai
An interview with Emad Mostaque, founder of Stability AI.
OUTLINE:
0:00 - Intro
1:30 - What is Stability AI?
3:45 - Where does the money come from?
5:20 - Is this the CERN of AI?
6:15 - Who gets access to the resources?…
An interview with Emad Mostaque, founder of Stability AI.
OUTLINE:
0:00 - Intro
1:30 - What is Stability AI?
3:45 - Where does the money come from?
5:20 - Is this the CERN of AI?
6:15 - Who gets access to the resources?…
👍17❤2🔥2
Forwarded from Earth&Climate Tech
Далее примеры картинок, которые создали нейронные сети по моим ключевым словам (опять, это не копии, а абсолютно оригинальные изображения сформированные по ключевым словам):
1. Футуристические технологии в науках о Земле и климате (Midjourney AI)
2. Разработка на Марсе с помощью дроидов (Dalle E)
3. Геологическое открытие в XXII веке (Midjourney AI).
4. Бассейновое моделирование (Dalle E)
Конечно, первым делом я захотел создать изображение сейсмики с разломами, но реально ничего не вышло.
А вот какие изображения сгенерировал мой сын по своим ключевым словам (выглядят поприкольнее, правда?) :
5. Зомби и красная луна
6. Микс покемона и штурмовика из Звездных войн
И наконец, мечтая о поездке в Исландию, я подумал о следующих ключевых словах: исландия, вулканы, луна, люди с рюкзаком. И получил картинки 7 и 8 от нейронной сети Midjourney AI
Кстати, вы можете попробовать самую простую версию Dall E здесь а Midjourney AI в чате Discord здесь
Как вообще, такую штуку бы использовали? Может есть идеи?
1. Футуристические технологии в науках о Земле и климате (Midjourney AI)
2. Разработка на Марсе с помощью дроидов (Dalle E)
3. Геологическое открытие в XXII веке (Midjourney AI).
4. Бассейновое моделирование (Dalle E)
Конечно, первым делом я захотел создать изображение сейсмики с разломами, но реально ничего не вышло.
А вот какие изображения сгенерировал мой сын по своим ключевым словам (выглядят поприкольнее, правда?) :
5. Зомби и красная луна
6. Микс покемона и штурмовика из Звездных войн
И наконец, мечтая о поездке в Исландию, я подумал о следующих ключевых словах: исландия, вулканы, луна, люди с рюкзаком. И получил картинки 7 и 8 от нейронной сети Midjourney AI
Кстати, вы можете попробовать самую простую версию Dall E здесь а Midjourney AI в чате Discord здесь
Как вообще, такую штуку бы использовали? Может есть идеи?
👍18😢1
За последние 7 лет я довольно много переезжал, видимо для того что бы добраться до Калифорнии.
Пробыв тут чуть меньше недели могу сказать, что тут очень очень круто. С одной стороны это такая большая деревня, с другой, это очень лухари деревня и в ней есть все те услуги и сервисы к которым мы привыкли в больших городах.
Еще немножко адаптируюсь и буду писать в канал чаще. А пока, о чем вам было бы инетерсно прочитать про мой опыт в Долине?
(промпт
Пробыв тут чуть меньше недели могу сказать, что тут очень очень круто. С одной стороны это такая большая деревня, с другой, это очень лухари деревня и в ней есть все те услуги и сервисы к которым мы привыкли в больших городах.
Еще немножко адаптируюсь и буду писать в канал чаще. А пока, о чем вам было бы инетерсно прочитать про мой опыт в Долине?
(промпт
!dream [description], Clean Cel shaded vector art. Shutterstock. behance hd by lois van baarle, artgerm, Helen huang, by makoto shinkai and ilya kuvshinov, rossdraws, illustration)🔥27👍10
Forwarded from DLStories
Ну и раз уж мы про диффузионные модели: все же знают, что они используются не только для генерации картинок?
Вот, например, свежая статья о диффузии для speech enhancement. Подобные задачи, где нужно избавиться от шума, вообще просто идеально подходят для решения диффузией: идея работы диффузионных моделей как раз состоит в том, чтобы взять объект, последовательно добавлять к объекту шум, а затем обучить нейросеть восстанавливать изначальный объект из этого шума. Ну ребята из IEEE и применили диффузию к speech enhancement, причем архитектура их нейросети заимствована прямо из работ по генерации картинок =) Работает это хорошо, сравнимо с SOTA моделями. Более того, авторы утверждают, что их метод достигает лучшей генерализации, чем предыдущие подходы.
Ссылки:
Статья
Код на Github
Ну и пара ссылок для тех, кто хочет лучше вникнуть в то, как работают диффузионные модели и кто как зачем их сейчас применяет:
✔️ Статья-введение в diffusion models
✔️ Гитхаб-репо со ссылками на статьи/видео/лекции о diffusion models и score-matching models (это нашла в эйай ньюз)
Вот, например, свежая статья о диффузии для speech enhancement. Подобные задачи, где нужно избавиться от шума, вообще просто идеально подходят для решения диффузией: идея работы диффузионных моделей как раз состоит в том, чтобы взять объект, последовательно добавлять к объекту шум, а затем обучить нейросеть восстанавливать изначальный объект из этого шума. Ну ребята из IEEE и применили диффузию к speech enhancement, причем архитектура их нейросети заимствована прямо из работ по генерации картинок =) Работает это хорошо, сравнимо с SOTA моделями. Более того, авторы утверждают, что их метод достигает лучшей генерализации, чем предыдущие подходы.
Ссылки:
Статья
Код на Github
Ну и пара ссылок для тех, кто хочет лучше вникнуть в то, как работают диффузионные модели и кто как зачем их сейчас применяет:
✔️ Статья-введение в diffusion models
✔️ Гитхаб-репо со ссылками на статьи/видео/лекции о diffusion models и score-matching models (это нашла в эйай ньюз)
❤8🔥5👍1
Андрей Карпати (ex Tesla AI) выложил новую лекцию
«!!!! Итак, я записал (новую!) 2h25m лекцию "The spelled-out intro to neural networks and backpropagation: building micrograd".
Это кульминация примерно 8 лет навязчивых мыслей о том, как лучше объяснить нейронные сети и обратное распространение.
Если вы знаете Python, смутно помните, как проходили производные в средней школе, посмотрите это видео и к концу не поймете обратное распространение и суть нейронных сетей, тогда я съем ботинок :D»
Смотреть
«!!!! Итак, я записал (новую!) 2h25m лекцию "The spelled-out intro to neural networks and backpropagation: building micrograd".
Это кульминация примерно 8 лет навязчивых мыслей о том, как лучше объяснить нейронные сети и обратное распространение.
Если вы знаете Python, смутно помните, как проходили производные в средней школе, посмотрите это видео и к концу не поймете обратное распространение и суть нейронных сетей, тогда я съем ботинок :D»
Смотреть
YouTube
The spelled-out intro to neural networks and backpropagation: building micrograd
This is the most step-by-step spelled-out explanation of backpropagation and training of neural networks. It only assumes basic knowledge of Python and a vague recollection of calculus from high school.
Links:
- micrograd on github: https://github.com/k…
Links:
- micrograd on github: https://github.com/k…
😁20👍14🔥9❤1
Deep-learning seismology
Сейсмология - наука о сейсмических волнах, которая ставит перед собой цель понять их происхождение. Наиболее очевидными источниками сейсмических волн являются землетрясения, но такие волны возникают также в следствие взрывов, извержения вулканов и тп.
Сейсмические волны регистрируются непрерывно, с типичной частотой дискретизации 100 точек в секунду.
Развитие технологии сейсмических датчиков, таких как оптоволоконный кабель и акселерометры в интеллектуальных устройствах, предвещает дальнейшее увеличение объемов сейсмологических данных.
Способность глубокого обучения к последовательному моделированию данных и снижению размерности - все это выгодно для обработки сейсмических данных. Глубокое обучение для научных открытий и прямого извлечения информации о сейсмологических процессах, очевидно, только начинается.
Мой профессор Greg Beroza написал большую обзорную статью в Science про будущее DL в Сейсмологии, которую я очень рекомендую к прочтению.
Сейсмология - наука о сейсмических волнах, которая ставит перед собой цель понять их происхождение. Наиболее очевидными источниками сейсмических волн являются землетрясения, но такие волны возникают также в следствие взрывов, извержения вулканов и тп.
Сейсмические волны регистрируются непрерывно, с типичной частотой дискретизации 100 точек в секунду.
Развитие технологии сейсмических датчиков, таких как оптоволоконный кабель и акселерометры в интеллектуальных устройствах, предвещает дальнейшее увеличение объемов сейсмологических данных.
Способность глубокого обучения к последовательному моделированию данных и снижению размерности - все это выгодно для обработки сейсмических данных. Глубокое обучение для научных открытий и прямого извлечения информации о сейсмологических процессах, очевидно, только начинается.
Мой профессор Greg Beroza написал большую обзорную статью в Science про будущее DL в Сейсмологии, которую я очень рекомендую к прочтению.
👍20🔥3
Сижу тут на PhD защите автора канала @earth_climate_tech, хоть канал и называется climate, защита на удивление про нефтяночку (причём норвежскую, которой я занимался в Лукойле в Осло).
Толик (вы его кстати видели в фильме у Дудя) молодец! Удачи будущий Dr. Aseev.
Толик (вы его кстати видели в фильме у Дудя) молодец! Удачи будущий Dr. Aseev.
👍31🔥4😁2❤1
Forwarded from TechSparks
Генерация фотореалистичных картинок — это прекрасно. Но мне иногда по старинке хочется запечатлеть на память те места физического мира, где я побывал телесно. Потому и люблю фото, и не только на телефон. И страдаю от проблем в условиях малой освещенности; сегодняшние ухищрения цифровой фотографии типа очень длинной экспозиции при цифровой стабилизации спасают далеко не всегда: шумы на изображении оказываются неустранимы и портят картинку безобразно.
И вот выясняется, что гугловая технология NeRF, применяемая для рендеринга 3D сцен по набору плоских фоток, замечательно подходит для восстановления зашумленных картинок, полученных в условиях очень слабого освещения. Ждём следующего прорыва в фоторедакторах и в мобильной вычислительной фотографии
https://petapixel.com/2022/08/23/google-researchers-add-powerful-denoise-tool-to-nerf-ai-program/
И вот выясняется, что гугловая технология NeRF, применяемая для рендеринга 3D сцен по набору плоских фоток, замечательно подходит для восстановления зашумленных картинок, полученных в условиях очень слабого освещения. Ждём следующего прорыва в фоторедакторах и в мобильной вычислительной фотографии
https://petapixel.com/2022/08/23/google-researchers-add-powerful-denoise-tool-to-nerf-ai-program/
Peta Pixel
Google Researchers Add Powerful Denoise Tool to NeRF AI Program
Will noise be a thing of the past?
🔥19👍1
Accurate prediction of transition metal ion location via deep learning
Около половины структурно охарактеризованных белков содержат ион металла. Ионы металлов играют решающую роль для многих приложений, таких как дизайн ферментов или дизайн белок-белковых взаимодействий. Однако вычислительный дизайн металлопротеинов - это очень ресурсоемкая задача.
В статье авторы показывают два инструмента - Metal3D (основанный на трехмерных сверточных нейронных сетях) и Metal1D (основанный исключительно на геометрических критериях) для улучшения идентификации и локализации цинка и других ионов металлов в экспериментальных и вычислительно предсказанных структурах белков.
Metal3D выдает метрику доверия для каждого предсказанного сайта и работает на белках с небольшим количеством гомологов в банке белковых данных.
Metal3D доступен в виде простого в использовании веб-приложения, блокнота или интерфейса командной строки.
📖 статья 📇 код 🤩 демо
Около половины структурно охарактеризованных белков содержат ион металла. Ионы металлов играют решающую роль для многих приложений, таких как дизайн ферментов или дизайн белок-белковых взаимодействий. Однако вычислительный дизайн металлопротеинов - это очень ресурсоемкая задача.
В статье авторы показывают два инструмента - Metal3D (основанный на трехмерных сверточных нейронных сетях) и Metal1D (основанный исключительно на геометрических критериях) для улучшения идентификации и локализации цинка и других ионов металлов в экспериментальных и вычислительно предсказанных структурах белков.
Metal3D выдает метрику доверия для каждого предсказанного сайта и работает на белках с небольшим количеством гомологов в банке белковых данных.
Metal3D доступен в виде простого в использовании веб-приложения, блокнота или интерфейса командной строки.
📖 статья 📇 код 🤩 демо
👍14🤩1
Forwarded from DLStories
Анонс!
В понедельник (29.08) я буду записывать новый выпуск подкаста Deep Learning Stories, и мне нужны ваши вопросы гостю =)
Гость выпуска — Артемий Новоселов, постдок рисерчер в Stanford University и автор канала NN for Science. В Стенфорде Артемий занимается ML в сейсмологии.
В выпуске обсудим:
- путь Артемия в рисерче: как добраться до Стенфорда;
- что такое землетрясения и какими методами их пытаются предсказывать;
- AI в сейсмологии: как применяется сейчас, какие есть проблемы и какое видится будущее.
Выпуск будет не живой, выложу я уже запись. Сейчас под этим постом у вас есть возможность задать вопросы Артемию. В понедельник при записи выпуска мы добавим эти вопросы в программу.
Вопросы Артемию ⬇️
В понедельник (29.08) я буду записывать новый выпуск подкаста Deep Learning Stories, и мне нужны ваши вопросы гостю =)
Гость выпуска — Артемий Новоселов, постдок рисерчер в Stanford University и автор канала NN for Science. В Стенфорде Артемий занимается ML в сейсмологии.
В выпуске обсудим:
- путь Артемия в рисерче: как добраться до Стенфорда;
- что такое землетрясения и какими методами их пытаются предсказывать;
- AI в сейсмологии: как применяется сейчас, какие есть проблемы и какое видится будущее.
Выпуск будет не живой, выложу я уже запись. Сейчас под этим постом у вас есть возможность задать вопросы Артемию. В понедельник при записи выпуска мы добавим эти вопросы в программу.
Вопросы Артемию ⬇️
👍21🔥7😁1
Forwarded from Борис опять
В инженерном блоге Толоки вышла (с немалой моей помощью) такая статья, что даже здесь хочется поделиться. Ребята из мобильной команды в деталях рассказывают детективную историю, как реализовали блюр лиц на эдж девайсах.
https://medium.com/toloka/privacy-and-speed-the-story-behind-our-face-blurring-solution-46ffa3514ed5
https://medium.com/toloka/privacy-and-speed-the-story-behind-our-face-blurring-solution-46ffa3514ed5
Medium
Privacy and speed: The story behind our face blurring solution
Toloka provides an easy way to collect data about the offline world. When you need images of certain locations like buildings or streets…
👍9