Data Secrets
77.4K subscribers
6.05K photos
593 videos
20 files
2.43K links
Главный по машинному обучению

Сотрудничество: @veron_28

РКН: clck.ru/3FY3GN
Download Telegram
Также я в субботу: 😒
Please open Telegram to view this post
VIEW IN TELEGRAM
11674259🫡6🏆2
Развивать компанию, чтобы достичь капитализации в $3 триллиона: 👎

Чтобы появляться в мемах с Тейлор Свифт: 👍
Please open Telegram to view this post
VIEW IN TELEGRAM
12235👍17😁1210😎5
Ученые из OpenAI, Microsoft, Стэнфорда, Принстона и еще 8 университетов выпустили огромный репорт с обзором техник промптинга

Да-да, этот пост про промпт-инжиниринг. Мы долго думали, рассказывать про это руководство или нет, пока не почитали сами. Оказалось, что статья действительно полезная (и конечно далека от порядком всем надоевших псевдо-научных пособий по промптам).

Итак, в документе рассмотрено 58 техник промптинга для текста и 40 для иных модальностей. Все разделено на 6 основных подходов, таких как In-Context Learning (ICL), Zero-Shot, Self-Criticism и др.

Все сопровождается тестами на бенчмарках и, местами, даже доказательствами и строгими определениями. Например, на картинке – дефинишн few-shot промтинга на языке условной вероятности.

Читается легко, встречается много интересных рассуждений и деталей. Однозначно рекомендуем.
👍1082415🔥7
This media is not supported in your browser
VIEW IN TELEGRAM
Сегодня выходит второй сезон «Дома дракона»

И в честь этого создатели запилили сайт, где можно нагенерировать сериальные постеры со своим лицом.

Получается мемно, идеально для смены аватарки. Еще одни боги маркетинга, получается
🔥4616👍115😐5
OpenAI может стать коммерческой организацией

Что это значит:
⚪️ это позволит компании провести IPO (продавать акции не только сотрудникам)
⚪️ больше не быть подконтрольной некоммерческому совету директоров
⚪️ обойти ограничение по прибыли
⚪️ меньше отчитываться о своих действиях перед Microsoft

По такой же схеме работают Anthropic и xAI.

Один вопрос: почему сейчас?
Please open Telegram to view this post
VIEW IN TELEGRAM
109😐20🗿9😁64🫡32🔥1💋1
На тему утренних новостей 🥴
😁104🔥12🎃8👍22
This media is not supported in your browser
VIEW IN TELEGRAM
Тем временем новая Dream Machine (мы писали об этой модели тут) наконец разрешила философскую проблему вагона.

Ей на вход подали знаменитую фотографию, которую модель оживила… как посчитала нужным.
😁184🔥2185👍3😐1
Метод Монте-Карло для поиска по дереву мощно повышает способности LLM к математике

Этот алгоритм в ML совсем не ноу-хау: его использовали в AlphaGo и AlphaZero, а сейчас он активно исследуется учеными из OpenAI для той самой загадочной G*. И вот на днях вышла статья из Китая: там придумали использовать поиск Монте-Карло для уточнения ответов LLM на вопросы по математике.

В целом подход такой: выбор наиболее перспективной вершины дерева (это некоторый ответ на задачу) –> "самоуточнение", когда LLM генерирует фидбек для улучшения ответа –> самооценка с помощью ревард-модели (как в RL) –> обратное распространение ошибки -> обновление дерева.

Таким методом на тестах удалось приблизить мат. талант Llama-3 8B к cпособностям гораздо более крупного GPT-4, и это звучит очень неплохо.

Полный текст статьи тут.
🎉56👍20🔥742😁1
🚀 NumPy 2.0 уже здесь!

Еще раз основные новшества: появились типы строковых данных, ускорены многие фукнции, улучшено API. Более подробно обо всем – в нашей статье.

Когда дождались релиз впервые за 18 лет 🕺
Please open Telegram to view this post
VIEW IN TELEGRAM
🤯847742🤩87👍7🔥6😁1👻1
И еще немного сегодняшних новостей (ну и денек):

⚡️ Google выпустила video-to-audio (V2A) модель.

⚡️ Новый день - новая модель для генерации видео. На этот раз Gen3-Alpha.

⚡️ Вышел DeepSeekCoder 2.0, обгонящий GPT-4 на вопросах по программированию. Опенсорс!

Поздравляем, теперь вы ничего не пропустили.
Please open Telegram to view this post
VIEW IN TELEGRAM
85😁40👍10🔥8🙈2
Начинаем утро с идеального объяснения механизма обновления политики в RL

«Я учусь на ошибках людей, которые приняли мой совет»
😁150🔥14👍3👌1
Мир, если бы все ИИ-релизы соответствовали своему демо
😁117🔥129🙈5👍1
Сыр часто достается второй мышке или как Apple собирается стать монополистом ИИ

Скотт Гэллоуэй, профессор маркетинга в NYU, на днях в своем блоге разобрал стратегию Apple, с которой они собираются захватить ИИ рынок. Да-да, вы не ослышались, Apple, у которых нет даже собственной нормальной LLM. Статья навела немало шума. Основные моменты:

⚪️ Инновации переоценены. Visa не изобрела кредитную карту, а Coca-Cola не изобрела газировку. Стратегия второй мышки заключается в следующем: возьмите что-то, уже изобретенное, сделайте это более удобным и простым в использовании, добавьте промышленный дизайн — и создавайте миллиарды экземпляров. Это именно то, во что целится Apple.

⚪️ Несмотря на то, что сейчас Siri работает плохо, у компании есть бренд и капитал, чтобы исправлять подобные ошибки, тем более быть первым — не выигрышная стратегия для Apple.

⚪️ Акции Apple взлетели после презентации, потому что люди поняли: внедрение ChatGPT в iPhone ставит в тупик всех кокурентов, в том числе Alphabet. А Apple точно заработает свою обычную долю от премиальных подписок, приобретенных через iPhone.

⚪️ Преимущество iPhone в том, что для миллиарда людей на Земле это первое устройство, которое они видят утром и последнее перед сном, и в течение всего дня оно находится не более чем в нескольких шагах от них. Все, что мы делаем, происходит в наших телефонах. Та LLM, которая получит информацию о наших дискреционных расходах, и будет моделью, которая нас заполучит.

⚪️ Ну и, наконец, несмотря на то, что Apple потратит миллиарды для запуска LLM на устройстве, им это все равно обойдется дешевле, чем кому-либо. К тому же, у стратегии second mouse есть важное преимущество: в случае неудачи она обходится намного дешевле.

Так что не списываем Apple со счетов и ждем, пока 2024 и 2025 расставит все по своим местам.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍8219🔥11😁7🤔6🗿5
Data Secrets
Сыр часто достается второй мышке или как Apple собирается стать монополистом ИИ Скотт Гэллоуэй, профессор маркетинга в NYU, на днях в своем блоге разобрал стратегию Apple, с которой они собираются захватить ИИ рынок. Да-да, вы не ослышались, Apple, у которых…
… однако, несмотря на все вышесказанное, сегодня все взгляды обращены на другого игрока👇

Nvidia только что стала самой дорогой компанией на планете, обогнав Microsoft. Сейчас капитализация компании составляет 3,3 триллиона долларов.

Напоминаем, что после презентации Apple Nvidia оттеснили на третье место, но выход нового Nemotron 4 все резко изменил.
Please open Telegram to view this post
VIEW IN TELEGRAM
65🔥219👍76
GPT-4o теперь будет лечить рак

Компания объединилась с организацией Color Health, и вместе они разработали «второго пилота» для врачей. Бот анализирует данные и анализы пациента, ищет в диагнозах белые пятна и создает индивидуальные планы лечения.

Кстати, одновременно с этим Google тоже выпустила собственного чат-бота для диагностики заболеваний. AMIE (Articulate Medical Intelligence Explorer) разговаривал с пациентами, задавал вопросы, собирал данные и обсуждал с ними план лечения. В основе зафайнтюненый на мед.вопросах PaLM-2.
🔥6311😁9👍5😈2🏆1