HighLoad++
6.31K subscribers
2.41K photos
160 videos
16 files
2.27K links
Официальный канал профессиональной конференции разработчиков высоконагруженных систем

Saint HighLoad++ 2026 пройдёт в июне в Санкт-Петербурге: https://highload.ru/spb/2026

Общаемся в чатике https://xn--r1a.website/HighLoadTalks
Download Telegram
Разобрать весь путь данных, поговорить о security в масштабе, узнать, как выжимать максимум из железа и перенять опыт работы с петабайтами информации — все это вы сможете на HighLoad++ 2025 🙌

Берите на заметку следующие доклады из программы конференции ⤵️

1) Онлайн-анализатор миллиона видеостримов: как положить в кликхаус 2 млрд записей в сутки и достать в мультитенантную графану. Максим Лапшин (erlyvideo)

В докладе вы узнаете технические детали разработанного решения, анализирующего структурную целостность около миллиона видеопотоков одновременно. Это поток в 2 млрд строк в Clickhouse в сутки. Эти данные просматривают люди через Grafana, адаптированную для мультитенатного доступа и роботы, присылающие алерты в системы мониторинга клиентов.

2) SSO для бедных: реализация IAM на Open Source в инфраструктуре разработки. Александр Лысенко (К2 Кибербезопасность)

Инфраструктура заказной разработки — страшный сон для любого специалиста ИБ: большое количество сервисов, «тестовые» и «демо»-сервисы с инфраструктурной обвязкой. При этом бизнес требует делать больше за меньшее число человеко‑часов. В таких условиях DevOps‑инженеры успевают лишь «чинить» очередную упавшую сборку. Подобные ситуации порождают огромное количество рисков ИБ. Александр расскажет, как это решить данную проблему.

3) Как понимание работы RAM ускорило на +30% пакетный шлюз 4G/5G сетей и позволило обрабатывать 4M пакетов в секунду на одном ядре и 100Gbps на NUMA node. Максим Шахметов (ООО «Протей-Лаб»)

Максим поделится опытом, как они при помощи профилирования нашли узкие места в программе. Какие CPU метрики (DTLB miss, L2/L3 cache miss, RAM throughput) проседали, какие решения они применяли для увеличения производительности. Эти простые методы применимы для широкого круга задач разработки.

4) Как прокачать иопсы вновь: новый слой хранения для Vitastor. Виталий Филиппов (Личный проект)

За последние 3 года Vitastor стал универсальной SDS. Появилось много новых функций и оптимизаций. Однако одной вещи не хватало давным-давно — более умного и быстрого слоя хранения. Идея не давала покоя буквально все эти годы, и только сейчас наконец кристаллизовалась и вылилась в практическую реализацию. Результаты отличные! О новом хранилище и будет доклад Виталия.

🖐️ Ждем вас 6 и 7 ноября в Москве

Пройдите на сайт, чтобы узнать больше о программе HighLoad++ 2025
3👍2
Дизайн систем вечная тема для дискуссии и свободы творчества.

Как и где можно научиться хорошей архитектуре? Можно ли этому научиться на курсах? Наш ответ — нет.

Помимо теоретических архитектурных практик нужен живой опыт и обратная связь от реального мира «так работать не будет». Любой выживший под нагрузкой проект — кладезь практического опыта и учебная лаборатория. Не упускайте возможность чему-то научиться на чужом (часто горьком) опыте, посмотрите записи докладов с конференции HighLoad++ 2024 ⤵️

🔴Архитектура хранилища рекламных объектов Яндекс.Директ. Булат Гайфуллин

Узнайте, как построить почти безгранично масштабирующееся хранилище данных, учесть требования поставщиков и потребителей, а благодаря использованию YTsaurus реализовать эффективный стриминг изменений большому количеству разнородных потребителей.

VK Видео
RUTUBE

🔴Мобильные платежи «Мир». Дмитрий Викулов

Особое внимание в докладе уделено тому, как устроены мобильные платежи в НСПК и как работает платформа мобильных платежей в целом. Не менее важным аспектом стало обсуждение адаптивности систем к изменениям, что критично для поддержания надежности и бесперебойной работы.

VK Видео
RUTUBE

🔴Миллионы часов: поиск копий в VK Видео. Никита Кочетков

Узнайте о решении задачи поиска дубликатов видео при загрузке на VK Видео. Рассказ охватывает несколько стадий этой задачи: декодирование видео, оптимальный сбор фингерпринтов, поиск аналогов. В чем отличие от распознавания лиц, какие сложности при работе с видео — все в этом докладе.

VK Видео
RUTUBE

Продуктивного просмотра 🙌
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥42🤩2
Узнайте, как внедрить Traffic Mirroring в OVN для анализа трафика. Погрузитесь в архитектуру высоконагруженного поиска с 10К запросов в секунду. Узнайте, почему ML не всегда лучше классического кэширования. Получите готовый план масштабирования GitLab до 4000 RPS. ⤵️

1) Зеркала не врут: Traffic Mirroring в OVN. Александра Рукомойникова (K2 Cloud)

Александра расскажет, как им удалось осуществить желание стать первым российским облаком с готовым решением Traffic Mirroring. Как они реализовали этот механизм в своей SDN-платформе на базе OVN и интегрировали его с NTA-решениями.

2) Как поиск авиабилетов в Туту обрабатывает 10000 предложений в секунду: вызовы, архитектура, кейсы оптимизации. Иван Садовой (Туту)

Почему поиск авиабилетов — это не просто бизнес‑логика про тарифы, а настоящий Highload со специфическими метриками качества? Как устроены доменные слои поиска и где внутри системы «взрывается» нагрузка? Ответы на эти вопросы вы получите в докладе Ивана. А также узнаете: на какие компромиссы и приемы оптимизации им пришлось пойти, где не сработали первоначальные идеи; каких целей и показателей в продакшн они достигли, а каких целей достичь не удалось; какие новые вызовы стоят перед системой после 5 лет эксплуатации.

3) Интеллектуальное кэширование: можем ли мы научить backend предсказывать будущее. Николай Кокоулин (Ви.Tech)

Кэширование ускоряет работу сервисов, и чаще всего мы полагаемся на проверенные эвристики вроде TTL или LRU. Но в реальных высоконагруженных системах они не дают хороших результатов. В докладе Николай расскажет, как они пробовали использовать ML, чтобы кэш сам предсказывал востребованность данных, почему не все сработало и почему в проде они оставили классическое решение.

4) От одного контейнера до 4000 RPS: как мы масштабировали GitLab в 3 датацентрах. Максим Степанов (МТС Web Services (MWS))

Доклад посвящен реальному опыту масштабирования GitLab от маленького контейнера до крупного распределенного решения в трех датацентрах с нагрузкой 4000 запросов в секунду. Будут подробно рассмотрены ограничения, с которыми столкнулись при росте нагрузки и пользователей, и конкретные шаги по решению этих проблем. После доклада вы поймете, как последовательно и эффективно масштабировать GitLab и аналогичные сервисы, избегать распространенных ошибок и заранее подготовиться к техническим ограничениям инфраструктуры.

Присоединяйтесь к нам на HighLoad++ 2025, будем обсуждать реальные решения для актуальных задач 🙌

➡️ Пройдите на сайт, чтобы посмотреть другие доклады и забронировать билет
11👍1
Если вы используете Low Code-технологии в своей работе, тогда техтолк «Open Source Low Code-технологий в импортозамещении», который мы записали на HighLoad++ 2024 с Иваном Ратниковым, – для вас 🙌

Посмотреть запись можно здесь:
VK Видео
RUTUBE

Тезисно, о чем поговорили:
🔴А какой он, вообще, BPMS?
Аспект на основные группы различных технологий bpms, и на какие стоит обратить внимание в Low Code-разработке. Существует 3 вида систем согласно Gartner. Их особенности и применяемость.
🔴Enterprise ушел, да здравствует Open Source. Или не надо путать Engine и System.
Важный тезис, что большая часть путает Engine и System. Как крупные компании на примере МТС (Финтех) используя Open Source-технологии успешно замещают «коробочные решения» иностранных вендоров.
🔴Время! = Деньги
Тезис о том, что с замещением технологии концепция «время = деньги» не работает, как считается канонически. Продуктовый подход сокращает T2M, но из-за накладных расходов и ошибок в архитектуре тратится больше времени за те же инвестиции.
🔴Миксуем технологический смузи
Кейс и практики по использованию Camunda и Temporal в синергии процессов МТС, и как это все работает в стратегии компании по Cloud Native.


Смотрите сами и делитесь с коллегами, которым будет актуально 🚀
Please open Telegram to view this post
VIEW IN TELEGRAM
2👍1😱1😎1
На HighLoad++ 2025 у вас будет возможность обсудить и разобрать: баланс между безопасностью и производительностью; языки и фреймворки с точки зрения производительности и масштабируемости; как обеспечить качество данных, минимизировать задержки и масштабировать обработку; как строить и масштабировать системы с LLM.

В этом анонсе доклады из четырех секций, выбирайте актуальную для вас тематику и добавляйте в свое личное расписание на конференции

1️⃣ Опережаем угрозу: антивирусная защита начинается с CI/CD. Марк Песков (Selectel)

В докладе будет рассмотрено оригинальное архитектурное решение по антивирусной защите разрабатываемых облачных сервисов и особенности его практического применения.

2️⃣ Порефлексируем о Spring AOT. Рустам Курамшин (MAGNIT TECH)

Рустам покажет, как Spring AOT ускоряет запуск Spring Boot-приложений за счет генерации кода и RuntimeHints. Это не про GraalVM Native Image и не про JDK AOT/CDS. Что меняется, где реальная выгода по времени старта, риски и шаги внедрения. В конце — демо «до/после» и чек-лист.

3️⃣ GPT в службе поддержки: автоматизация, оптимизация и инновации. Николай Пономаренко (Техплатформа Городских сервисов Яндекса)

Вы узнаете, как Яндекс внедряет GPT для автоматизации различных процессов; как построить RAG для высоко эффективной автоматизации обращений в службу поддержки; какие уроки были извлечены в процессе переосмысления подхода к использованию языковых моделей.

4️⃣ Как RAG ускоряет поддержку RUTUBE: от гибридного поиска до мониторинга галлюцинаций. Виктор Леньшин (RUTUBE)

Сильный производственный кейс от RUTUBE: как построить RAG-систему, которая реально работает. Конкретные метрики, архитектурные решения, сравнение технологий. Особенно ценно: опыт работы с русским языком и on-premise. Рекомендуется всем, кто думает о внедрении AI в поддержку.

Присоединяйтесь к нам 6 и 7 ноября в Москве, чтобы забрать готовые решения для своих проектов 🖐️

➡️ Пройдите на сайт и вы узнаете больше о программе конференции
22👍2🗿1
🖐️ 13 сентября приглашаем на новую онлайн-конференцию для тех, кто хочет систематизировать знания в разработке высоконагруженных систем — HighLoad++ Genesis. Эта фундаментальная конференция сфокусирована на системной разработке и архитектуре высоконагруженных проектов.

Формат создан специально для тех, кто находится в начале пути и стремится развивать профессиональные компетенции в области highload. Мероприятие максимально доступное для каждого, кто хочет расти в IT — полностью онлайн и абсолютно бесплатное.

🎯 Наша главная цель — дать мощный старт тысячам инженеров.

Здесь нет абстрактных докладов без погружения в контекст.
Каждая тема начинается с базы и доводится до прикладного уровня, чтобы участник не просто понял суть — а мог применять знания на практике.

На конференции вы:

1️⃣ получите системное понимание архитектуры высоконагруженных систем, что поможет принимать обоснованные архитектурные решения;

2️⃣ узнаете про современные подходы к обработке данных — практические навыки выбора между строчными и колоночными базами, понимание ClickBench-бенчмарков;

3️⃣ научитесь работать с современной инфраструктурой — когда использовать Docker Compose, а когда — Kubernetes, практические критерии выбора;

4️⃣ поймете, как работают очереди сообщений — научитесь принимать решения на основе реальных потребностей проекта, а не «потому что все используют»;

5️⃣ научитесь масштабировать ML-решения — узнаете три подхода к ML-архитектуре, их преимущества и подводные камни.

Еще вас ждут:
▪️прикладные знания — разбор основ highload без «воды»,
▪️обучение от топовых спикеров HighLoad++,
▪️общение в чате с экспертами и коллегами со всей России.

🔥 Ознакомиться с темами докладов и спикерами, а также бесплатно зарегистрироваться можно на сайте

✔️Отправьте этот пост тем, кому тоже может быть полезно. Давайте делиться знаниями и опытом друг с другом.
7🔥5👍2🤩1
Багу 78 лет 🎉

9 сентября 1947 года команда Грейс Хоппер работала с компьютером Harvard Mark II — монстром, размером с комнату, на электромагнитных реле. Внезапно машина начала сбоить. После долгих поисков инженеры нашли причину: между контактами реле застряла… моль! Ее извлекли и приклеили в технический журнал с пометкой «First actual case of bug being found». Этот случай считается первым обнаруженным компьютерным багом в истории.

И так родился термин «debugging», а запись в журнале стала символом начала эпохи «охоты на ошибки».

Эта история идеально отражает суть IT: даже самые гениальные технологии иногда уязвимы перед самой простой случайностью. И да, она напоминает нам, что даже великие начинания могут зависеть от мелочей. В прямом смысле 😉

А у вас была своя «моль»? Поделитесь самым эпичным или забавным багом, который вам доводилось встречать или создавать ⤵️
👍9🎉8🔥3🤔1😎1
Forwarded from Data Internals
Прокачайте стек и сэкономьте до 30% — мультибилет на Data Internals X и HighLoad++ 🔥
Если вы работаете с базами данных, проектируете архитектуру высоконагруженных систем или оптимизируете производительность под капотом — этот формат для вас.

Мультибилет — это не просто проход на две конференции, это возможность:
🟣Расширить технический стек и прокачать уже имеющиеся hard-skills;
🟣Углубиться в реальные кейсы от лидеров индустрии и получить практические знания, которые можно применять в production уже на следующий день;
🟣Обменяться опытом с коллегами и обсудить проблемы, которые не гуглятся.

И, конечно, это шанс посетить сразу две технически насыщенные программы по выгодной стоимости:

🔴 Легендарная конференция HighLoad++ — для разработчиков высоконагруженных систем. На одной площадке соберутся сильнейшие разработчики highload-систем, чтобы обсудить самые актуальные темы индустрии, обменяться знаниями о технологиях, позволяющих одновременно обслуживать многие тысячи и миллионы пользователей, разобрать реальные кейсы с решением конкретных задач.

🔴Конференция нового формата Data Internals X — для всех тех, кто работает с базами данных. Хардкорное мероприятие с акцентом на технических инсайтах от создателей СУБД, практических решениях, оптимизации на уровне железа и реальном опыте импортозамещения.

Ваша выгода при покупке мультибилета — 34'000 ₽

Купить один билет и попасть сразу на две конференции

📍Встречаемся в Москве:
🟣23 сентября на Data Internals X
🟣6 и 7 ноября на HighLoad++
Please open Telegram to view this post
VIEW IN TELEGRAM
4🔥4👌4
Forwarded from grigorycode
😁224💯3🔥2
Забрать практические решения, погрузиться в технические детали нового типа сетевых нереплицируемых дисков, получить фреймворк выбора RAG-архитектуры + экономическое обоснование для бизнеса — все это вы сможете на докладах из секции «Архитектура и масштабируемость» ⤵️

1️⃣ Эволюция Kafka as a Service: от факапа до чилаута. Анастасия Цепелева (РСХБ.цифра)

От одной «большой» Kafka до «Kafka as a Service» под бизнес-задачи: ошибки и решения, автоматизация развертывания через GitOps-подход в Kubernetes, упрощение авторизации и не только. Анастасия поделится практическими решениями, схемами, рекомендациями и чек-листом.

2️⃣ Сетевые нереплицируемые диски в облаке: почему, как, а главное — зачем? Александр Руденко (K2 Cloud)

Доклад посвящен обзору и техническим деталям нового типа дисков в K2 Cloud. Александр расскажет, как устроена инфраструктура этих дисков, за счет чего достигаются высокие показатели производительности и низкие задержки, о проблемах и особенностях эксплуатации, их слабые и сильные стороны. Вы узнаете, для чего подойдут такие диски и как их использовать, чтобы максимизировать их плюсы и минимизировать риски.

3️⃣ RAG → GraphRAG → LightRAG: как мы трижды переписывали медицинский AI и кратно снизили издержки. Андрей Носов (Raft)

Практическая история эволюции RAG-системы в MedTech через три итерации: от наивной реализации, дорогой GraphRAG к оптимальному LightRAG. С реальными цифрами, архитектурными решениями и ценой ошибок.

🖐️ Ждем вас на HighLoad++ 2025

➡️ Программа конференции и билеты на сайте
👍42😎1
Друзья, с праздником!

Вы – супергерои, потому что делаете технологии, которые меняют мир 💪. Вы решаете сложнейшие задачи, умеете справляться с огромными объемами данных и делаете невозможное возможным!

Продолжайте прокладывать путь в мире высоких нагрузок и сложных архитектур! Желаем вам вдохновения в каждом проекте, кода без багов и покорения новых вершин 🚀

Да пребудет с вами желаемая суперсила 🙌
🎉1310🏆4🗿1😎1
Теория без практики мертва. Воркшопы HighLoad++ 2025 — это возможность не просто услышать, но и попробовать руками.

Сегодня рассказываем про два воркшопа, которые будут особенно полезны:
🟣программистам, знакомым с вебом, которые хотят начать применять Rust в браузере. А также Rust-разработчикам, которые хотят начать писать под браузер;
🟣разработчикам и инженерам, которым приходится разбираться в причинах произошедшего сбоя и писать postmortem.

1️⃣ «Пишем простую браузерную игру на Rust». Илья Барышников (Независимый консультант)

На этом воркшопе участники напишут небольшую браузерную игру на Rust. Для начала разберутся с инструментами и скомпилируют Rust-проект в WebAssembly. Потом посмотрят, как использовать полученный wasm-модуль из JS. Решат проблему циклических ссылок в Rust и научатся работать с JS коллбеками из Rust-кода. Напишут рендерер, используя 2d canvas. Если останется время, то обсудят мультиплеер или даже напишут свой сервер.

2️⃣ «Postmortem. Докопаться до истины». Александр Качмашев (Точка)

Как часто вы были в ситуации, когда вам непонятно что делать на встречах по обсуждению прошедшего инцидента и заполнению postmortem? Часто? Тогда вам нужно посетить воркшоп Александра, на котором вы пройдете полный путь под руководством мудрого наставника.

Присоединяйтесь к нам на HighLoad++ 2025, будем разбирать сложное просто 😎

➡️ Программа конференции и билеты на сайте
Please open Telegram to view this post
VIEW IN TELEGRAM
3👍2🔥2😎2
This media is not supported in your browser
VIEW IN TELEGRAM
🔥4
Как в Яндекс Еде за 3 месяца построили свой рекламный движок с нуля? Расскажет об этом Денис Токарев в своем докладе на HighLoad++ 2025.

Денис 10 лет в IT. Последние 3 года руководит разработкой рекламных инструментов в Яндекс Еде, отвечает за архитектуру и развитие рекламной платформы. И в этом видео он поделился практической ценностью своего доклада 🖐️

✔️ Тезисы доклада
✔️ Узнать больше о том, что вас ждет на HighLoad++ 2025 здесь

Присоединяйтесь к нам 🙌
3👍2🔥2😢1
В сегодняшней статье — необычайно сложный контент. Но максимально простыми словами, будто сидим, пиво пьем, рыбку едим.

Александр Сербул пробудит ваш интерес к Rust, высоким нагрузкам, асинхронщине, многопоточности и тому, как это используется.

Выключайте мозги, расслабляйтесь, читайте сердцем и получайте удовольствие 😎
🔥4❤‍🔥1😎1
«Тестирование высоконагруженных систем», «Архитектура и масштабируемость», «Языки программирования и технические стеки», «Data Engineering» — секции из программы HighLoad++ 2025.

А ниже доклады из перечисленных секции. Выбирайте актуальное для вас направление и сохраняйте, чтобы сформировать свое личное расписание на конференции 😀

1️⃣ Автоматизированное тестирование автономного транспорта. Евгений Енин (Navio)

Евгений расскажет о том, как тестируется технология автономного вождения, и как они строили свою систему автоматического тестирования многоагентной системы. Доклад будет полезен тем, кто хочет узнать, как тестируются технологии автономного вождения, или сталкивается со сложностями в автоматизации тестирования распределенных и ресурсоемких систем.

2️⃣ OVN, техдолг и распределёнка: переносим функции облачной сети в SDN из LXC. Владислав Одинцов (K2 Cloud)

Переход с VMware NSX на OVN дал прирост производительности и контроль. Об этом Владислав рассказывал в своем докладе на HighLoad++ 2024 (здесь вы можете посмотреть запись этого доклада). Однако LXC-контейнеры с DNS, firewall, NAT оставались узким местом. В докладе на HighLoad++ 2025 Владислав расскажет, как они построили в К2 Облаке новую распределенную и отказоустойчивую архитектуру сетевых сервисов и какой ценой этого достигли.

3️⃣ Технологический стек Flowwow: что скрывается под капотом маркетплейса. Алексей Сундуков (Flowwow)

В 2024 году оборот Flowwow достиг 17 миллиардов рублей. Думаете их движок — это Golang? Нет! Ядро работает на PHP — языке, который на протяжении последних 30 лет постоянно хоронят. Алексей подробно разберет, с какими пиковыми нагрузками справляется их архитектура. Вы узнаете, какие готовые Open Source-решения (доступные каждому) они используют, как их настраивают и, главное, почему до сих пор не перешли на Golang. Кроме того, Алексей расскажет, как не биться головами в одной кодовой базе модульного монолита, сколько нужно железа и в каком окружении работает их софт, как они масштабируются на пиках и не тратят лишнего на железо. Все технологии открыты, и любой разработчик может повторить такой путь.

4️⃣ Кто это? Что это? Учим VLM узнавать лица, картины и достопримечательности. Завен Мартиросян (Сбер)

Мультимодальные модели видят мир, но часто не узнают его. Они могут описать текстуру камня на фасаде собора, но не сказать, что это Нотр-Дам. Завен с командой взялись за эту проблему «узнавания» и провели серию экспериментов, чтобы научить VLM запоминать ключевые сущности: от шедевров живописи до лиц знаменитостей. В докладе вы узнаете, какие подходы провалились, а какой рецепт обучения позволил им добиться значительного прироста в качестве.

Не упускайте возможность пообщаться с коллегами, найти единомышленников, обсудить стек и поспорить о лучшем языке для highload — присоединяйтесь к нам на HighLoad++ 2025 🖐️

➡️ Узнать подробнее о программе конференции и забронировать билет можно на сайте
Please open Telegram to view this post
VIEW IN TELEGRAM
2👍21😎1
Веб-скраперы — это боты, которые автоматически собирают информацию с сайтов. Иногда они делают это вполне безобидно — например, для мониторинга цен. А иногда вредят: копируют ваш каталог, перегружают сервер или крадут данные.

Эксперт Арсений Савин знает, как бороться с такими ботами — почти два года он занимается разработкой таких скраперов в компании Effective, и хорошо изучил, как они работают и как их остановить.

Подробности в статье
🔥4❤‍🔥3👍2🤝1
Расскажите о своем решении IT-сообществу

На HighLoad++ 2025 мы проведем Open Source Трибуну — специальную секцию, где разработчики, тимлиды, СТО, архитекторы и комьюнити-энтузиасты представят свои проекты сообществу.

Если у вас есть:
🟣библиотека или инструмент, который упрощает жизнь другим разработчикам;
🟣решение для работы с высоконагруженными системами;
🟣сервис, утилита или фреймворк, которым может пользоваться комьюнити;
🟣проект, который уже нашел первых пользователей и продолжает развиваться ⤵️

.. подавайте заявку. Мы соберем проекты со всей страны, дадим экспертам и разработчикам проголосовать, а лучшие решения прозвучат на HighLoad++ 2025.

🔥 Участники, чьи заявки пройдут голосование, получат:
🟣билет на HighLoad++ 2025,
🟣возможность презентовать свое решение топовым разработчикам,
🟣признание и поддержку комьюнити,
🟣упоминание на медиаплощадках конференции.

🖐️ Мы ждем ваши заявки до 30 сентября, отправить которые можно на сайте
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥32🤩1