По этому поводу перевёл (хорошо в этот раз перевёл, косяков единицы) для вас разбор того как они её ловили и с какими проблемами могли столкнуться. Очень интересный разбор на 30 минут от профессионала в теме, Райана Хансена.

Есть также версия перевода в более хорошем качестве на YouTube, так же на английском можете посмотреть оригинал. Круто всё показано.

Сергей Булаев AI 🤖 - об AI и не только

Извините, пожалуйста, за вынужденный день космоса, но мой друг сегодня сфотографировал комету Tsuchinshan–ATLAS (фото, кстати, на iPhone 15 Pro Max).

Кометы для меня — обожаемая тема. В 1997-м, когда я учился в 11-м классе, к нам прилетала комета Хейла-Боппа. Она тоже была видна на небе невооруженным глазом, и каждый день, когда я приезжал из школы домой и шёл 10 минут от автобусной остановки, я непрерывно пялился в небо.

Кончилось всё тем, что я написал на мыло и Хейлу, и Боппу, и кто-то из них мне ответил. Этого ответа хватило для пятерки по экзамену по астрономии, успешно сданному мной в выпускном классе наряду с математикой, русским и информатикой.

А так то в 12 я ещё и марки по теме космоса собирал…

Сергей Булаев AI 🤖 - об AI и космосе

У нас в Таиланде очень необычные банки. Например на моём корпоративном стейтменте нельзя увидеть от кого приходят платяже. Там просто пишут - международная транзакция. Кстати с операциями по картам таже фигня - в стетменте не пишут для кого списались деньги.

Каждый месяц, в районе 15-числа у меня наступает день бухгалтерии, который я ненавижу Ну объективно это не день конечно, но несколько нудных часов всегда уходит на сбор pdf-ок с платежками, входящими и исходящими, ресиптами, инвойсами, а затем я всё это офрмляю в Google Sheets, который уже мой тайский бухгалтер использует для сдачи отчётности и налоговых платежей.

Вчера опять был такой день, но в этот раз я его решил потратить на автоматизацию этой рутины. В результате, не очнь легко, но всё же родилось приложение EasyMoney, только для меня одного. Оно работает на моём ноуте. Я ему отдаю кучу PDF файлов с финансовыми документами за месяц. Оно их парсит через LlamaParse, а затем отдаёт GPT-4o для процессинга и генерации сводных таблиц. В роли БД выступает .json файл.

Вообще я конечно хотел что бы оно потом само в бухгалтерскую таблицу в Goodle Sheets всё добавило, но сил не хватило - закончу в следующем месяце. Вчера хватило просто копи пасты :)

Мне очень нравится как получилось. Кажется у меня получается всё лучше и лучше. Чем больше делаешь такое - тем больше лайфхаков узнаёшь. Вышла основа для любого пользовательского приложения, где нужен парсинг PDF и работа с моделями.

А ещё я вчера завёл себе аккаунт на boosty. Решил что там буду выкладывать исходный код тех небольших проектов, которые делаю для себя. Думаю они могут пригодится кому то как основа для собственных. Выложу код EasyMoney там и буду обновлять.

Так же планирую публиковать отдельный контент о разных интересных инструментах и способах я использую для быстрого создания продуктов с помощью ИИ. Походу дела разберёмся. Ну и конечно отдельная закрытая группа для тех, кто как и я хочет творить!

В общем если хотите мою работу поддержать, у вас теперь есть реальный способ!

Сергей Булаев AI 🤖 - об AI и создании продуктов с его помощью

Open Canvas - это опенсорсное приложение для совместной работы с агентами для упрощения написания различных документов от LongChain. Создано под впечатлением от Canvas OpenAI, но отличается:

- Открытый исходный код
- Встроенная память
- Возможность работы с существующими документами

Открытый исходный код: Весь код, от фронтенда до агента генерации контента и агента рефлексии, имеет открытый исходный код и лицензирован под MIT.

Встроенная память: Open Canvas поставляется с агентом рефлексии, который хранит правила стиля и пользовательские инсайты в общем хранилище памяти. Это позволяет Open Canvas запоминать факты о вас между сеансами.

Начало работы с существующими документами: Open Canvas позволяет пользователям начинать работу не только с пустого текста или редактора кода на выбранном языке, но и даёт возможность начать сеанс с уже имеющегося контента.

Ребята считают, что это ключевая фича, так как часто у нас уже есть какой-то контент для начала работы, и хочется работать с ним.

Попробовать можно здесь. ну или репозиторий с кодом.

Сергей Булаев AI 🤖 - об AI и не только

Вчера поймал себя на том, что постоянно пытаюсь объяснять людям, что такое Embeddings, и даётся это всегда с большим трудом. Пришла в голову мысль - а что если наглядно показать, как свойства одних слов соответствуют другим.

Моментально в моей голове родился проект волшебных эмбеддингов. Взял массив из 50 сказочных слов, добавил к ним 20 ещё не сказочных, вычислил эмбеддинги через OpenAI, и сделал наглядную демонстрацию вместе с моим любимым Framer Motion.

Далее решил попробовать сделать на других языках, и так проект стал мультиязычным (научился, как делаются мультиязычные проекты).

Потом захотелось оптимизировать его по SEO, и я проработал тему. Ещё хотелось выложить на Cloudflare Pages (считаю перспективной темой в паре внутренних проектов и хотелось изучить). Но там споткнулся - не смог создать API-ключ с нужными правами доступа (не смог подобрать набор необходимых прав, и инструкцию не смог найти!). Если у кого-то есть опыт с этими страницами - помогите, пожалуйста.

Надеюсь, завтра всё же сумею выложить. Клёвый домен embeddings.fyi уже ждёт!

P.S. Саундтрэк, как обычно Suno, звуковые эффекты - Elevenlans.

Сергей Булаев AI 🤖 - об AI и не только

Тем временем theInformation нам сообщает (да, я сломался и подписался наконец, слишком много интересного публикуют, буду с вами делиться теперь).

В этом году OpenAI столкнулась с более жесткой конкуренцией в области найма и удержания исследователей искусственного интеллекта. Эта ситуация усугубилась после ухода бывшего технического директора компании, Миры Мурати. Мурати, чей последний рабочий день был 4 октября, теперь является советником компании. Однако она уже начала общаться с сотрудниками OpenAI о возможности присоединения к ее следующему проекту. Хотя она не раскрывает деталей этого предприятия, по словам двух осведомленных источников, ее действия вызывают интерес.

Неизвестно, присоединится ли Мурати к бывшему вице-президенту OpenAI Баррету Цофу в его новом стартапе, создаст ли собственную компанию или же присоединится к уже существующему разработчику ИИ. Тем не менее, ее предложения могут быть привлекательны для многих исследователей. После назначения Лиама Федуса на должность руководителя пост-тренировочных процессов, исследовательская организация OpenAI переживает период нестабильности. Три осведомленных источника сообщают, что несколько исследователей выразили желание сменить команды, что не является редкостью в подобных ситуациях.

Федус фактически занял позицию, ранее принадлежавшую Цофу, который неожиданно объявил о своем уходе 25 сентября одновременно с Мурати и руководителем исследований Бобом МакГрю. В знак продолжающихся последствий, Люк Мец, работавший вместе с Федусом и Цофом в команде ИИ Google и перешедший с ними в OpenAI в 2022 году для разработки ChatGPT, также объявил о своем уходе на прошлой неделе. Как и другие, Мец ушел перед предстоящим выкупом акций, в рамках которого OpenAI планирует выкупить акции у сотрудников.

Как сообщалось ранее после ухода Мурати, финансовая команда OpenAI прилагает значительные усилия для противодействия предложениям конкурентов, включая новый стартап от Ильи Сутскевера, сооснователя OpenAI и бывшего главного научного сотрудника. Учитывая солидарность, которую исследователи, такие как Цоф и МакГрю, проявили после отставки Мурати, ее попытки привлечь таланты могут стать серьезным испытанием для навыков управления персоналом генерального директора Сэма Альтмана.

Сергей Булаев AI 🤖 - об AI и не только

И опять про вчерашнюю тему.

Кто в теме - ставьте лайк. Я в теме. Фанат и просто обожаю. Несмотря на всю критику.

Сергей Булаев AI 🤖 - об AI и не только

А помните, да, как пирамиды 5000 лет назад в Египте строили? Тут архивные съёмки всплыли....

Сергей Булаев AI 🤖 - об AI и не только

Мы, сегодня, улетели на Пхукет, что бы одну, «отпускную» ночь провести в отеле, а завтра — лететь аэрофлотом в Россию на неделю. Прошу прощения у всех, кому сейчас не отвечаю. В субботу точно всем отвечу.

Продолжаю наслаждаться недавно купленным безлимитным доступом к Runway. Зачастую, получается, как я раньше и говорил, далеко не с первого раза.

Кстати, коллега Сергей, выпустил мини сравнение лидирующих сервисов ИИ видео генерации. Но моё ❤️ (и деньги) с Runway.

Сергей Булаев AI 🤖 - об AI и не только

Стало известно, что Amazon вложила $500 млн в разработку ядерных реакторов X-energy, сообщает The Information. Этот шаг направлен на обеспечение энергией дата-центров, которые будут поддерживать работу ИИ.

Google и Microsoft не отстают: обе компании заключили соглашения с ядерными стартапами, такими как Kairos Power и Constellation, с целью получения надёжных источников энергии.

Эти проекты демонстрируют растущий дефицит традиционных энергетических ресурсов для поддержки работы ИИ. В ближайшие годы ядерная энергия может стать ключевым звеном в технологической инфраструктуре.

Сергей Булаев AI 🤖 - об AI и не только

Хочу поделиться с вами, что у меня первое видео на моём экспериментальном YouTube канале "залетело". Видео про то, как ловили SuperHeavy. Может, конечно, это громко сказано, просто у него уже больше 5к просмотров (пока я дальше пары сотен не поднимался) и я прошёл 100 подписчиков.

Эксперименты с YouTube в ленивом формате начались менее чем месяц назад. Весь контент создаётся автоматически. Я признаю полностью ламерское, топорное оформление видео. Смешные скриншоты, недоделанность итп. Может, среди моих подписчиков есть кто-то, кто проконсультирует или поможет настроить какие-то базовые штуки. Также, никак не доходят руки до оформления канала на ВК. Знаю, что надо сделать, а некогда.

Сергей Булаев AI 🤖 - об AI и новом контенте

После неоднозначных новостей о том, что на презентации роботов полностью контролировали люди, Tesla выпустила апдейт по Optimus-ам.

Новые возможности:
- Автономно исследовать новые пространства.
- Самостоятельно находить зарядную станцию и подключаться к ней.
- Поднимать тяжелые предметы (до 11 кг).
- Несколько роботов могут работать вместе для понимания окружающей обстановки.
- Подниматься по лестнице.
- Взаимодействовать с людьми.
- Использовать собственные аккумуляторные элементы Tesla 4680.

Многие новые навыки осваиваются с помощью единой нейронной сети, работающей в реальном времени на компьютере робота.

Сергей Булаев AI 🤖 - об AI и не только

Perplexity представили внутренний поиск по знаниям для бизнес клиентов. Теперь пользователи смогут одновременно искать информацию как в файлах своей организации, так и в интернете.

Кроме того, компания запускает Spaces (не только для бизнеса) - ИИ хабы для совместной работы, которые можно настроить под конкретные нужды команды, будь то исследовательский проект, подготовка коммерческих предложений или создание учебных материалов.

Новые возможности:
- Загружать и хранить файлы (поддерживаются форматы pdf, txt, csv, xlsx, pptx, docx)
- Искать информацию в файлах и в интернете
- Выбирать предпочтительную модель ИИ
- Задавать собственные инструкции для получения нужных ответов
- Приглашать других пользователей для совместной работы

Для корпоративных клиентов Perplexity обещает высокий уровень безопасности и конфиденциальности данных. В ближайшем будущем планируется добавить интеграцию с Crunchbase и FactSet для клиентов Enterprise Pro.

Сергей Булаев AI 🤖 - об AI и роботах

в мой любимый NotebookLM добавили фичу "передай записку подкастерам".

Теперь пользователи могут давать инструкции перед созданием подкаста. Это позволит сосредоточить внимание на конкретных темах или настроить уровень экспертизы в соответствии с нужной аудиторией.

Пользователи также могут слушать аудиообзоры, продолжая работать в NotebookLM. Это означает, что они могут делать запросы по своим источникам, получать цитаты и изучать соответствующие цитаты, не прерывая аудио.

Так же нам рассказали про NotebookLM Business - это новая версия, доступная через Google Workspace с расширенными функциями для бизнеса, университетов и организаций. Конфиденциальность и безопасность данных являются главными приоритетами. Более 80 000 организаций уже используют NotebookLM.

Что бы получить доступ, нужно подать заявку на участие в пилотной программе NotebookLM Business. Дополнительная информация о общедоступности и ценах на NotebookLM Business будет предоставлена позже в этом году.

Сергей Булаев AI 🤖 - об AI и не только

Whisper Turbo MLX - лёгкая имплементация Whisper через MLX (на маках). Всего 250 строчек кода.

Установка:

Copybrew install ffmpeg
git clone https://github.com/JosefAlbers/whisper-turbo-mlx.git
cd whisper-turbo-mlx
pip install -e .

Для разобора аудиофайла:

wtm test.wav

Для использования библиотеки в Python:

>>> from whisper_turbo import transcribe
>>> transcribe('test.wav', any_lang=True)

Сергей Булаев AI 🤖 - об AI и не только