Да что же они творят 😱

Classic ML инженер
от 120 000 ₽/месяц
Офис, Фултайм

Привет! Мы — продуктовая команда сервисного маркетинга в СОГАЗе, которая помогает бизнесу находить наилучшие предложения для клиентов, максимизируя их ценность (CLTV). Наши решения основаны на персонализированных ML-моделях, которые анализируют поведение пользователей и автоматически подбирают оптимальные условия...(читать далее)

так и рисуются продающие презентации в корпорациях 🤣

#кейсы #корпжиза

Про корпоративные конфликты

Жили-были два соседних и близких по функционалу департамента. Назовем их А и Б.
Был у департаментов курирующий топ, назовем его «ПетрПетрович».
В департаменте Б есть управления Ба и Бб
И тут начальника департамента Б увольняют.

Кем заменить? Три кандидата:
◦ Зам начальника департамента А
◦ Начальник управления Ба
◦ Начальник управления Бб

Вы в камень-ножницы-бумага играли? 🙌
Вот также и эта троица — каждый против двух других и никто не может одержать верх. 🦢🦞🦈 (кэп: акула изображает щуку)

В такой ситуации «ПетрПетрович» принимает решение нанять кого-то, кто вроде бы немного со всеми тремя по чуть-чуть работал и ни с кем не поругался 😅. Назовем нового руководителя Новорук.

В итоге департамент Б «пропал с радаров» — амбициозных инициатив, которые бы дисраптили бизнес-модель или хотя бы были достойны обсуждения на борде — нет, зато со всеми смежниками мир 🕊

С этими словами Новорука и уволили спустя пару лет.

Итого, случилась корпоративная классика: наняли за бесконфликтность — уволили за бесхребетность🤷‍♂️

PS: В личку пришло несколько знакомых из разных организаций с вопросом "не их ли конторы я описал?" -- значит, ситуация не такая уж и редкая

#кейсы #корпжиза

не могу удержаться 🤷‍♂️ от токсичного комментария что 7 кругов собеседования инженеров и полугодовые ревью с увольнениями 10% лоу-перформеров сработали ожидаемо 😁😁😁

PS побуду кэпом: в таких условиях более выигрышная стратегия готовиться к собеседованиям в другие компании (и пробовать их проходить) чтобы иметь оффер в случае очередного лэй-оффа, чем овертаймить и тащить проект, от которого висты все равно достанутся канальям.

PPS кстати, вспомнил кейс, скоро напишу

Марк Цукерберг на презентации новых умных очков не смог принять звонок 4 раза подряд. @bankrollo

#ML

В первый день RecSys все воркшопы битком.

Самые именитые исследователи, крутые инженеры, призеры соревнований из Сбера и ex-Яндекса, сильные доклады, сложный комбайны архитектур.

В решающий момент вспомнил что я-таки ближе к канальям и пошел в полупустой зал где хоть что-то понятное для нашего брата: 12th Joint Workshop on Interfaces and Human Decision Making for Recommender Systems.

Здесь доклады слабо похожи на технические, в которых куча экспериментов и ablation study, доверительные интервалы, оговорки о том что результаты верны именно на этих датасетах именно при таком протоколе валидации, и все прочее что вызывает доверие исследователей.

Вот эти восемь докладов (точнее, статей, по которым доклады):

https://ceur-ws.org/Vol-4027/paper1.pdf
https://ceur-ws.org/Vol-4027/paper2.pdf
https://ceur-ws.org/Vol-4027/paper3.pdf
https://ceur-ws.org/Vol-4027/paper4.pdf
https://ceur-ws.org/Vol-4027/paper5.pdf
https://ceur-ws.org/Vol-4027/paper6.pdf
https://ceur-ws.org/Vol-4027/paper7.pdf
https://ceur-ws.org/Vol-4027/paper8.pdf


Зато идеи меня порадовали (оставим в стороне llm для интерпретации рекомендаций), попробую поделиться:

Если загрузить скриншот рекомендательной системы в ChatGPT и задать правильные вопросы — можно получить ценный фидбек по интерфейсу.

Если пользователю дать ручки / ползунки для настройки рекомендаций, и еще и сигналов больше логировать, то результат будет гораздо лучше чем бесконечно тюнить модели.

Дать возможность пользователю не только рейтинг проставлять, но весь арсенал смайликов в качестве фидбека — полезно.

Serendipity можно выкрутить на максимум сохраняя точность, если модель поддержать еще и интерфейсом (в статье блоком «удиви меня» — все совпадение со сберовской платформой AmazeMe случайные)

Общая мысль: хватит бороться за 0.0001 прироста метрик моделями, они ограничены шумом в самих данных. Грамотный интерфейс и выстроенное взаимодействие с пользователем могут дать гораздо больше в плане бизнеса.

И еще одна мысль:

Групповые рекомендации сейчас нигде в индустрии не применяются (цитата в докладе по статье), хотя два доклада из восьми были про них (второй), однако заставило задуматься над известной цитатой

Лучшие умы занимаются рекламой, а могли бы космос покорять

Так вот, представить киберпанк, в котором групповые генеративные рекомендации формируют политическую волю электората — мягко говоря, несложно. И тот кто обладает такой компетенцией — будет Урфином нашим Джюсом.

#кейсы #ML

Про каналий, рекомендашки и рисеч // навеяно конфой.

Есть у меня хороший друг, который в 2010-2015 работал в Yahoo! Labs таким обычным Research Engineer

Кто не помнит Yahoo! — это такой был «конкурент» гугла, сейчас благополучно издыхает, и поделом.
И вот история увольнения Хаима из Yahoo! Research

Под Research канальи понимают обычно что-то с немедленным возвратом на инвестиции, бо «очень кушать хочется», поэтому рисеч лабе поставили задачу за 9 мес разработать онлайн-рекомендации для Yahoo! Таким образом, чтобы рекомендации рекламы приносили не менее 1 млн долларов в день.

Это сейчас много материалов и успешных кейсов, у джунов на собесах спрашивают ML System Design, а в качестве материалов для подготовки советуют «пересмотреть всего Бабушкина». А в 2014м, еще и на масштабах Web это был серьезный инженерный челлендж.

За несколько месяцев, с постоянными овертаймами, корпоративными приколами и регулярными «get things done» достаточно маститая команда местных инженеров с задачей справилась и приготовилась встречать каналий из HQ Yahoo!, предвкушая огромные бонусы почет и уважение.

И бонусы действительно были — но для местных манагеров.

А вот команда инженеров получила бесценный приз:

белые футболки. И кроме логотипа Yahoo! там примерно 24м шрифтом было напечатано:

10^6

PS: в этот момент Хаим дал зарок больше никогда не работать в корпорациях и вот уже второй десяток лет стартапит

#кейсы #ML

Если вы думаете что квадратно-гнездовые бывшие сотрудники силовых ведомств — костяк кибербезы только в корпорациях в СНГ, вы глубоко заблуждаетесь 😆

На RecSys многие авторы на свои постеры и / или презентации лепят QR-коды, ведущие на страницу с просидингами, например.

Что будет, если несколько сотен человек с одного WiFi (с самой конференции) туда побегут? 🤔

Верно, правило кибербезы посчитает это DDoS-атакой и заблочит IP-адрес конфы 🤦‍♂️.

Конфа же проходит в непредсказуемые даты и часы, а провайдер WiFi на площадке был заранее неизвестен 😝 (классическое коммунальное -- зима в декабре настала абсолютно непредсказуемо)  

Ох уж эти некомпетентные дармоеды, которым лишь бы запретить и заблокировать! Сколько мы с вами потратили часов чтобы с чувством несомненного интеллектуального превосходства объяснить им, недалеким, что эмбеддинги абсолютно безопасны и по эмбеддингу никто не восстановит исходный объект 🧐.

Так вот, внезапно правы оказались они! Хоть и частично:

На reproducibility треке парни перепроверили способность восстанавливать из текстовых эмбеддингов исходный текст.

Мб чуйка? А мб и правда шарят? Это что же, придется к ним нормально относиться? Да ну, бред какой 🤣🤣😅

Хорошо что кибербезы не читают ни статей ни мой канал 🤣

лайфхак -- если напечатать постер на габардине, то не нужен тубус. А делать абстракт мелким белым шрифтом на темно-синем фоне -- не лучшая затея, будем исправляться

Никита с Сашей сегодня презентуют нашу статью на RecSys'25 в Праге.

А я смотрю на фото.

Радуюсь, что мы добрались до уверенного "Accept" в треке Late-Breaking Results. Переписывали статью в 4-страничный формат за 3 дня перед дедлайном, после реджекта на другом треке. Справились)

Если буду ещё публиковаться - надо всё-таки добираться до конференций.

Раз вы хотите фоточек, то вот вам.

Кирилл уже упоминал что команда Сбера взяла второе место на RecSysChallenge 2025, и привел ссылку на разбор их решения.

Но чего в том посте не хватило -- ссылки на канал лидера команды -- Алексея Васильева, что я c удовольствием исправляю