Сегодня, в связи с официальным анонсом Оптимуса, который уже очень скоро должен быть у каждого, в рубрике #КриповаяСуббота не странное видео, а целый подкаст на тему интимных отношений между человеком и роботом. Получилось неплохо! Даже интересно.

Ребятам я рассказал про анонс, а так же прислал два документа:
Турецкий пейпер: Attachment and Sex with Robots и результаты опроса YouGov

(русская и english версия на YouTube)

Сергей Булаев AI 🤖 - об AI и роботах

Уважаемые коллеги! Сегодня нас стало 4000! Вроде бы не много, но уже и не мало… А ведь только в июне нас было всего 250! Хочу вам всем сказать, что для меня это очень важно, то, что вы читаете меня.

Особенности моей личности заставляют постоянно сомневаться в себе, и тормозить, но с каждым новым подписчиком мне становится легче. А чем мне легче - тем больше идей! Спасибо за подписки! Кстати, можете ещё друзьям про мой канал рассказать ;) но это не обязательно, я рад, что вы со мной! Этого уже достаточно!

По этому поводу записали с Suno короткий трек!

Спасибо ещё раз!

Кстати, можете ещё подписаться на мой инстаграм из Таиланда.

Сергей Булаев AI 🤖 - об AI и не только

В Штатах политики первого уровня не стеснясь напрямую говорят о сокращениях связанных с внедрением ИИ как в ручном, так и офисном труде (не забывая упомянуть про безусловных доход - UBI)

В это время TikTok уже сокращает сотни сотрудников по всему миру, а особенно в Малайзии, где были уволены около 500 человек. Основная часть уволенных занималась модерацией контента. Эти сокращения связаны с планами компании усилить использование искусственного интеллекта в модерации.

ByteDance, владелец TikTok, планирует провести еще больше сокращений в следующем месяце, чтобы оптимизировать региональные операции. Компания инвестирует $2 млрд в глобальные меры проверок и безопасности в этом году, с акцентом на автоматизацию модерации.

Сокращения также произошли на фоне усиления давления на технологические компании со стороны властей Малайзии, которые требуют получения всяких дополнительных лицензий.

Сергей Булаев AI 🤖 - об AI и не только

@OpenAI выложили Swarm — лайтовую библиотеку для создания мульти агентных систем. Swarm предоставляет абстрактный слой для управления взаимодействием и передачей управления между агентами и не использует API Assistants.

Swarm не является официальным продуктом, создатели просят рассматривать как пример экспериментов по мотивам мультиагентного кукбука OpenAI (посмотрите, интересно)

Как оно работает:

1️⃣ Определите агентов, у каждого из которых есть свои инструкции, роль (например, "Агент по продажам") и доступные функции (будут преобразованы в JSON-структуры).

2️⃣ Определите логику передачи управления другому агенту на основе хода беседы или определенных критериев в функциях агента. Передача управления осуществляется простым возвращением следующего агента, которого следует вызвать в функции.

3️⃣ Контекстные переменные предоставляют начальный контекст и обновляются в ходе беседы для поддержания состояния и обмена информацией между агентами.

4️⃣ Функция run() клиента инициирует и управляет мультиагентной беседой. Для этого требуется начальный агент, сообщения пользователя и контекст, и возвращает ответ с обновленными сообщениями, контекстными переменными и последним активным агентом.

Инсайты:

🔄 Swarm управляет циклом взаимодействий агентов, вызовами функций и возможными передачами управления.
🧩 Агенты инкапсулируют инструкции, доступные функции (инструменты) и логику передачи управления.
🔌 Фреймворк не сохраняет состояние между вызовами, предоставляя прозрачность и тонкий контроль.
🛠️ Swarm поддерживает прямой вызов функций Python внутри агентов.
📊 Контекстные переменные позволяют управлять состоянием в ходе взаимодействий агентов.
🔄 Передачи управления между агентами позволяют динамически переключаться между специализированными агентами.
📡 Поддерживаются потоковые ответы для взаимодействия в реальном времени.
🔧 Гибкий и работает с любым клиентом OpenAI, например, Hugging Face TGI или моделями, размещенными на vLLM.

По мотивам, на видео парень строит RAG агента на базе Swarm

Сергей Булаев AI 🤖 - об AI и не только

По этому поводу перевёл (хорошо в этот раз перевёл, косяков единицы) для вас разбор того как они её ловили и с какими проблемами могли столкнуться. Очень интересный разбор на 30 минут от профессионала в теме, Райана Хансена.

Есть также версия перевода в более хорошем качестве на YouTube, так же на английском можете посмотреть оригинал. Круто всё показано.

Сергей Булаев AI 🤖 - об AI и не только

Извините, пожалуйста, за вынужденный день космоса, но мой друг сегодня сфотографировал комету Tsuchinshan–ATLAS (фото, кстати, на iPhone 15 Pro Max).

Кометы для меня — обожаемая тема. В 1997-м, когда я учился в 11-м классе, к нам прилетала комета Хейла-Боппа. Она тоже была видна на небе невооруженным глазом, и каждый день, когда я приезжал из школы домой и шёл 10 минут от автобусной остановки, я непрерывно пялился в небо.

Кончилось всё тем, что я написал на мыло и Хейлу, и Боппу, и кто-то из них мне ответил. Этого ответа хватило для пятерки по экзамену по астрономии, успешно сданному мной в выпускном классе наряду с математикой, русским и информатикой.

А так то в 12 я ещё и марки по теме космоса собирал…

Сергей Булаев AI 🤖 - об AI и космосе

У нас в Таиланде очень необычные банки. Например на моём корпоративном стейтменте нельзя увидеть от кого приходят платяже. Там просто пишут - международная транзакция. Кстати с операциями по картам таже фигня - в стетменте не пишут для кого списались деньги.

Каждый месяц, в районе 15-числа у меня наступает день бухгалтерии, который я ненавижу Ну объективно это не день конечно, но несколько нудных часов всегда уходит на сбор pdf-ок с платежками, входящими и исходящими, ресиптами, инвойсами, а затем я всё это офрмляю в Google Sheets, который уже мой тайский бухгалтер использует для сдачи отчётности и налоговых платежей.

Вчера опять был такой день, но в этот раз я его решил потратить на автоматизацию этой рутины. В результате, не очнь легко, но всё же родилось приложение EasyMoney, только для меня одного. Оно работает на моём ноуте. Я ему отдаю кучу PDF файлов с финансовыми документами за месяц. Оно их парсит через LlamaParse, а затем отдаёт GPT-4o для процессинга и генерации сводных таблиц. В роли БД выступает .json файл.

Вообще я конечно хотел что бы оно потом само в бухгалтерскую таблицу в Goodle Sheets всё добавило, но сил не хватило - закончу в следующем месяце. Вчера хватило просто копи пасты :)

Мне очень нравится как получилось. Кажется у меня получается всё лучше и лучше. Чем больше делаешь такое - тем больше лайфхаков узнаёшь. Вышла основа для любого пользовательского приложения, где нужен парсинг PDF и работа с моделями.

А ещё я вчера завёл себе аккаунт на boosty. Решил что там буду выкладывать исходный код тех небольших проектов, которые делаю для себя. Думаю они могут пригодится кому то как основа для собственных. Выложу код EasyMoney там и буду обновлять.

Так же планирую публиковать отдельный контент о разных интересных инструментах и способах я использую для быстрого создания продуктов с помощью ИИ. Походу дела разберёмся. Ну и конечно отдельная закрытая группа для тех, кто как и я хочет творить!

В общем если хотите мою работу поддержать, у вас теперь есть реальный способ!

Сергей Булаев AI 🤖 - об AI и создании продуктов с его помощью

Open Canvas - это опенсорсное приложение для совместной работы с агентами для упрощения написания различных документов от LongChain. Создано под впечатлением от Canvas OpenAI, но отличается:

- Открытый исходный код
- Встроенная память
- Возможность работы с существующими документами

Открытый исходный код: Весь код, от фронтенда до агента генерации контента и агента рефлексии, имеет открытый исходный код и лицензирован под MIT.

Встроенная память: Open Canvas поставляется с агентом рефлексии, который хранит правила стиля и пользовательские инсайты в общем хранилище памяти. Это позволяет Open Canvas запоминать факты о вас между сеансами.

Начало работы с существующими документами: Open Canvas позволяет пользователям начинать работу не только с пустого текста или редактора кода на выбранном языке, но и даёт возможность начать сеанс с уже имеющегося контента.

Ребята считают, что это ключевая фича, так как часто у нас уже есть какой-то контент для начала работы, и хочется работать с ним.

Попробовать можно здесь. ну или репозиторий с кодом.

Сергей Булаев AI 🤖 - об AI и не только

Вчера поймал себя на том, что постоянно пытаюсь объяснять людям, что такое Embeddings, и даётся это всегда с большим трудом. Пришла в голову мысль - а что если наглядно показать, как свойства одних слов соответствуют другим.

Моментально в моей голове родился проект волшебных эмбеддингов. Взял массив из 50 сказочных слов, добавил к ним 20 ещё не сказочных, вычислил эмбеддинги через OpenAI, и сделал наглядную демонстрацию вместе с моим любимым Framer Motion.

Далее решил попробовать сделать на других языках, и так проект стал мультиязычным (научился, как делаются мультиязычные проекты).

Потом захотелось оптимизировать его по SEO, и я проработал тему. Ещё хотелось выложить на Cloudflare Pages (считаю перспективной темой в паре внутренних проектов и хотелось изучить). Но там споткнулся - не смог создать API-ключ с нужными правами доступа (не смог подобрать набор необходимых прав, и инструкцию не смог найти!). Если у кого-то есть опыт с этими страницами - помогите, пожалуйста.

Надеюсь, завтра всё же сумею выложить. Клёвый домен embeddings.fyi уже ждёт!

P.S. Саундтрэк, как обычно Suno, звуковые эффекты - Elevenlans.

Сергей Булаев AI 🤖 - об AI и не только

Тем временем theInformation нам сообщает (да, я сломался и подписался наконец, слишком много интересного публикуют, буду с вами делиться теперь).

В этом году OpenAI столкнулась с более жесткой конкуренцией в области найма и удержания исследователей искусственного интеллекта. Эта ситуация усугубилась после ухода бывшего технического директора компании, Миры Мурати. Мурати, чей последний рабочий день был 4 октября, теперь является советником компании. Однако она уже начала общаться с сотрудниками OpenAI о возможности присоединения к ее следующему проекту. Хотя она не раскрывает деталей этого предприятия, по словам двух осведомленных источников, ее действия вызывают интерес.

Неизвестно, присоединится ли Мурати к бывшему вице-президенту OpenAI Баррету Цофу в его новом стартапе, создаст ли собственную компанию или же присоединится к уже существующему разработчику ИИ. Тем не менее, ее предложения могут быть привлекательны для многих исследователей. После назначения Лиама Федуса на должность руководителя пост-тренировочных процессов, исследовательская организация OpenAI переживает период нестабильности. Три осведомленных источника сообщают, что несколько исследователей выразили желание сменить команды, что не является редкостью в подобных ситуациях.

Федус фактически занял позицию, ранее принадлежавшую Цофу, который неожиданно объявил о своем уходе 25 сентября одновременно с Мурати и руководителем исследований Бобом МакГрю. В знак продолжающихся последствий, Люк Мец, работавший вместе с Федусом и Цофом в команде ИИ Google и перешедший с ними в OpenAI в 2022 году для разработки ChatGPT, также объявил о своем уходе на прошлой неделе. Как и другие, Мец ушел перед предстоящим выкупом акций, в рамках которого OpenAI планирует выкупить акции у сотрудников.

Как сообщалось ранее после ухода Мурати, финансовая команда OpenAI прилагает значительные усилия для противодействия предложениям конкурентов, включая новый стартап от Ильи Сутскевера, сооснователя OpenAI и бывшего главного научного сотрудника. Учитывая солидарность, которую исследователи, такие как Цоф и МакГрю, проявили после отставки Мурати, ее попытки привлечь таланты могут стать серьезным испытанием для навыков управления персоналом генерального директора Сэма Альтмана.

Сергей Булаев AI 🤖 - об AI и не только

И опять про вчерашнюю тему.

Кто в теме - ставьте лайк. Я в теме. Фанат и просто обожаю. Несмотря на всю критику.

Сергей Булаев AI 🤖 - об AI и не только

А помните, да, как пирамиды 5000 лет назад в Египте строили? Тут архивные съёмки всплыли....

Сергей Булаев AI 🤖 - об AI и не только

Мы, сегодня, улетели на Пхукет, что бы одну, «отпускную» ночь провести в отеле, а завтра — лететь аэрофлотом в Россию на неделю. Прошу прощения у всех, кому сейчас не отвечаю. В субботу точно всем отвечу.

Продолжаю наслаждаться недавно купленным безлимитным доступом к Runway. Зачастую, получается, как я раньше и говорил, далеко не с первого раза.

Кстати, коллега Сергей, выпустил мини сравнение лидирующих сервисов ИИ видео генерации. Но моё ❤️ (и деньги) с Runway.

Сергей Булаев AI 🤖 - об AI и не только

Стало известно, что Amazon вложила $500 млн в разработку ядерных реакторов X-energy, сообщает The Information. Этот шаг направлен на обеспечение энергией дата-центров, которые будут поддерживать работу ИИ.

Google и Microsoft не отстают: обе компании заключили соглашения с ядерными стартапами, такими как Kairos Power и Constellation, с целью получения надёжных источников энергии.

Эти проекты демонстрируют растущий дефицит традиционных энергетических ресурсов для поддержки работы ИИ. В ближайшие годы ядерная энергия может стать ключевым звеном в технологической инфраструктуре.

Сергей Булаев AI 🤖 - об AI и не только

Хочу поделиться с вами, что у меня первое видео на моём экспериментальном YouTube канале "залетело". Видео про то, как ловили SuperHeavy. Может, конечно, это громко сказано, просто у него уже больше 5к просмотров (пока я дальше пары сотен не поднимался) и я прошёл 100 подписчиков.

Эксперименты с YouTube в ленивом формате начались менее чем месяц назад. Весь контент создаётся автоматически. Я признаю полностью ламерское, топорное оформление видео. Смешные скриншоты, недоделанность итп. Может, среди моих подписчиков есть кто-то, кто проконсультирует или поможет настроить какие-то базовые штуки. Также, никак не доходят руки до оформления канала на ВК. Знаю, что надо сделать, а некогда.

Сергей Булаев AI 🤖 - об AI и новом контенте

После неоднозначных новостей о том, что на презентации роботов полностью контролировали люди, Tesla выпустила апдейт по Optimus-ам.

Новые возможности:
- Автономно исследовать новые пространства.
- Самостоятельно находить зарядную станцию и подключаться к ней.
- Поднимать тяжелые предметы (до 11 кг).
- Несколько роботов могут работать вместе для понимания окружающей обстановки.
- Подниматься по лестнице.
- Взаимодействовать с людьми.
- Использовать собственные аккумуляторные элементы Tesla 4680.

Многие новые навыки осваиваются с помощью единой нейронной сети, работающей в реальном времени на компьютере робота.

Сергей Булаев AI 🤖 - об AI и не только

Perplexity представили внутренний поиск по знаниям для бизнес клиентов. Теперь пользователи смогут одновременно искать информацию как в файлах своей организации, так и в интернете.

Кроме того, компания запускает Spaces (не только для бизнеса) - ИИ хабы для совместной работы, которые можно настроить под конкретные нужды команды, будь то исследовательский проект, подготовка коммерческих предложений или создание учебных материалов.

Новые возможности:
- Загружать и хранить файлы (поддерживаются форматы pdf, txt, csv, xlsx, pptx, docx)
- Искать информацию в файлах и в интернете
- Выбирать предпочтительную модель ИИ
- Задавать собственные инструкции для получения нужных ответов
- Приглашать других пользователей для совместной работы

Для корпоративных клиентов Perplexity обещает высокий уровень безопасности и конфиденциальности данных. В ближайшем будущем планируется добавить интеграцию с Crunchbase и FactSet для клиентов Enterprise Pro.

Сергей Булаев AI 🤖 - об AI и роботах