🛩 FlightRecorder в проде

В Go 1.25 в стандартную библиотеку завезли trace.FlightRecorder — кольцевой буфер трассировки, который постоянно крутится в памяти, а по команде Snapshot() отдаёт последние N секунд событий рантайма. Идея: сэмплирующий профайлер видит «среднюю температуру», а тут вы получаете полную картину именно того момента, когда всё пошло не так.

Пара примеров:

▪️ Ловля хвостовых задержек

Мидлварь замеряет время обработки запроса, и если оно перевалило за исторический p95 (или прилетела 500-ка) — асинхронно дёргается снапшот.

Бинарный дамп улетает в S3, ссылка логируется в Grafana. Сработал алерт → кликнули по ссылке → скачали дамп → go tool trace slow-trace.out.

▪️ Проблемы шедулера и GC

Всё, что живёт между сэмплами профайлера: залипания горутин, GC assist, вытеснение горутин с P — на трассе это видно, в профиле нет.

Но есть и обратная сторона: формат данных не дружит с Pyroscope и Datadog, поэтому дамп нельзя просто открыть в дашборде — приходится вручную гонять go tool по конкретному поду. А когда подов больше тысячи, удовольствие ниже среднего. Инструмент мощный, эргономика — пока нет.

💬 А вы пробовали FlightRecorder? Для чего включали, что нашли такого, чего не показал pprof, и как вытаскивали трейсы с прода?

📍 Навигация: Вакансии • Задачи • Собесы

🐸 Библиотека Go-разработчика

#GoToProduction

📍 Навигация: Вакансии • Задачи • Собесы

🐸 Библиотека Go-разработчика

#GoGiggle

⭐️ Тип в композитных литералах станет необязательным

Предложение №12854 висело в трекере с 2015 года и наконец получило статус accepted.

Теперь тип литерала можно будет опускать везде, где компилятор выводит его из контекста:

var x []string = {"a", "b", "c"}
return {}, err
compress.NewReader(r, {Level: compress.BestSpeed})
items = append(items, {id, obj, false})

Запись a := {1, 2, 3} останется ошибкой, слева нет явного типа и выводить нечего.

Выигрывают табличные тесты, структуры опций и код с protobuf, где имена типов повторяются десятками. Спор о читаемости команда закрыла так. gofmt не будет принудительно удалять типы, стиль сложится сам, а gopls получит подсказки, которые покажут пропавшее имя типа прямо в редакторе.

В Go 1.27 фича не попадёт. Изменение в компиляторе простое, но нужно обновить экосистему инструментов, поэтому ориентир это Go 1.28.

📍 Навигация: Вакансии • Задачи • Собесы

🐸 Библиотека Go-разработчика

📰 Дайджест недели

Здесь нет дождей, здесь только новости

— Go теперь компилирует TypeScript

Microsoft выкатила TypeScript 7.0 — компилятор целиком переписан с TS на Go. Итог: сборки быстрее в 8-12 раз при меньшем потреблении памяти на 6-26%

— Ускорение in-memory кеша до 8 раз

— Фреймворк, где файловая система это карта маршрутов

— Результат джуна близок к нулю

— Бонусы-призраки и грейды из параллельной вселенной

📍 Навигация: Вакансии • Задачи • Собесы

🐸 Библиотека Go-разработчика

#GoLive

💬 События публикуются дважды

Сервис сохраняет заказ в БД и сразу публикует событие OrderCreated. Выглядит логично, но БД и очередь это две отдельные системы.

Что может произойти: БД коммитилась, но публикация упала. Заказ есть, события нет. Клиент повторяет запрос из за таймаута. Событие публикуется еще раз. Нижестоящий сервис видит два события и создает два заказа вместо одного.

➡️ Решение: Outbox паттерн

Сохраняем заказ и событие в одной БД транзакции. Отдельный диспетчер читает неотправленные события и публикует их позже. Если диспетчер упадет или повторится, событие уже в БД и не потеряется.

// В одной транзакции
BEGIN
  INSERT INTO orders ...
  INSERT INTO outbox ...
COMMIT

// Отдельно
func dispatchOutbox() {
  events := store.GetUnsent()
  for _, e := range events {
    publisher.Send(e)
    store.MarkSent(e.ID)
  }
}

➡️ Ключевые моменты

Каждое событие должно иметь уникальный ID. Потребители должны быть идемпотентные (игнорировать дубликаты). Outbox паттерн гарантирует, что событие не потеряется, но не гарантирует ровно одну доставку. Это нормально, если потребители правильно обрабатывают дубликаты.

➡️ Что делать

Добавьте таблицу outbox. Вставляйте заказ и событие одной транзакцией. Запустите диспетчер, который периодически отправляет события из outbox. Добавьте уникальный event_id потребителям для фильтрации дубликатов.

Граница между микросервисами это самое опасное место. Outbox паттерн это простой способ сделать ее безопаснее.

📍 Навигация: Вакансии • Задачи • Собесы

🐸 Библиотека Go-разработчика

#GoToProduction

🎸 Конференция, которая заканчивается концертом

ИТ-Пикник 2026 — это не только доклады. Музыкальный хедлайнер — LAB, шоу Антона Беляева и команды Therr Maitz: популярные треки в новых аранжировках с оркестром и хором. А ещё ИТ-Квартирник — отдельная сцена для музыкантов из мира технологий, где семь команд из опен-колла борются за право выйти на главную сцену с Pompeya.

➡️ Собрали всё, что известно о фестивале

📍 Навигация: Вакансии • Задачи • Собесы

🐸 Библиотека Go-разработчика

📍 Навигация: Вакансии • Задачи • Собесы

🐸 Библиотека Go-разработчика

#GoGiggle

⭐️ Пишем долгоживущую программу на Go с GOGC=off. Часть 1, GOMEMLIMIT

Короткий ответ: да, но не так, как обычно себе это представляют. Полностью выключенный сборщик мусора почти всегда означает, что программа рано или поздно съест всю память. Работающие варианты сводятся к тому, что GC не выключается совсем, а перестаёт запускаться по росту кучи и начинает запускаться по вашим правилам.

В этой части разберём, что делает GOGC=off, почему наивный вариант падает, и самый практичный способ жить без сборок, связку с GOMEMLIMIT.

➡️ Что делает GOGC

GOGC задаёт, насколько куча должна вырасти относительно живых данных, прежде чем начнётся следующий цикл сборки. При значении по умолчанию 100 сборка стартует, когда куча удвоилась относительно объёма живых объектов после прошлого цикла. При GOGC=200 цикл будет реже и памяти уйдёт больше. При GOGC=off триггер по росту кучи пропадает совсем.

То же самое можно сделать из кода:

import "runtime/debug"

func main() {
    debug.SetGCPercent(-1) // эквивалент GOGC=off
    // ...
}

Важно понимать, что аллокатор при этом никуда не девается. Программа продолжает выделять память, просто освобождать её никто не будет. Каждый временный слайс, каждая строка от fmt.Sprintf, каждый заголовок HTTP запроса остаются в куче навсегда. Для батча, который живёт три секунды и завершается, это идеально. Для сервиса, который работает неделями, это утечка по определению.

➡️ Почему наивный вариант падает

Возьмём типичный HTTP сервис. Даже если ваш собственный код не аллоцирует, стандартная библиотека аллоцирует за вас. net/http создаёт объекты на каждый запрос, encoding/json создаёт их на каждый декод, драйвер базы создаёт их на каждый ряд. При тысяче запросов в секунду и паре килобайт мусора на запрос вы получаете около двух мегабайт в секунду, то есть примерно семь гигабайт в час. Дальше приходит OOM killer.

Поэтому вопрос не в том, можно ли выключить GC, а в том, чем заменить триггер, который вы выключили.

➡️ GOMEMLIMIT как замена триггера

GOMEMLIMIT — самый практичный подход и он появился в Go 1.19. Комбинация GOGC=off и GOMEMLIMIT даёт сборщик, который не реагирует на рост кучи вообще, но запускается, когда потребление памяти приближается к заданному лимиту.

GOGC=off GOMEMLIMIT=4GiB ./myservice

Или из кода:

debug.SetGCPercent(-1)
debug.SetMemoryLimit(4 << 30) // 4 GiB

Что вы получаете. Пока памяти хватает, циклов сборки нет совсем, а значит нет накладных расходов на маркировку и барьеры записи. Как только программа подходит к лимиту, GC включается и удерживает потребление около него. Куча живёт в стабильном состоянии, а не пилой от нуля до удвоения.

Что вы теряете. Если объём живых данных сам по себе дорастает до лимита, GC начнёт запускаться непрерывно и программа уйдёт в смерть от сборки, когда почти всё время уходит на бесполезные циклы. Лимит поэтому ставят с запасом относительно ожидаемого объёма живых данных, а не впритык к памяти контейнера. Разумная практика ставить GOMEMLIMIT процентов на десять ниже лимита пода, чтобы GC успел среагировать раньше, чем это сделает cgroup.

Ещё одна тонкость. GOMEMLIMIT учитывает всю память рантайма, включая стеки горутин и служебные структуры, но не учитывает то, что выделено вне рантайма, например через cgo или mmap. Если такого много, лимит надо занижать дополнительно.

➡️ Про ballast

Раньше был популярен трюк с большим фиктивным слайсом, который выделяли на старте, чтобы поднять порог срабатывания GC. Сейчас он не нужен. GOMEMLIMIT решает ту же задачу.

Итог первой части

GOGC=off сам по себе это не оптимизация, а отложенный OOM. Но GOGC=off вместе с GOMEMLIMIT вполне живёт в проде годами. Сборщик молчит на нормальной нагрузке и вступает в дело только у границы, которую вы задали сами.

Во второй части посмотрим на два более жёстких варианта. Ручные вызовы runtime.GC() в окнах простоя и код, который вообще не аллоцирует после старта.

📍 Навигация: Вакансии • Задачи • Собесы

🐸 Библиотека Go-разработчика

#GoDeep

🔒 age, шифрование файлов без конфигов и без GPG

Надо зашифровать бэкап, дамп базы или файл с секретами. Классический ответ это GPG, а вместе с ним keyring, сеть доверия, десяток флагов и вывод, который не прочитать без документации. Для одной операции это перебор.

age делает ровно эту задачу и ничего больше. Инструмент шифрования файлов, формат и Go библиотека от Филиппо Вальсорды. Маленькие явные ключи, никаких опций конфигурации, поведение в духе UNIX. Формат описан спецификацией age-encryption.org/v1.

Базовый сценарий

Три команды:

$ age-keygen -o key.txt
Public key: age1ql3z7hjy54pw3hyww5ayyfg7zqgvc7w3j2elw8zmrj2kg5sfn9aqmcac8p

$ tar cvz ~/data | age -r age1ql3z7... > data.tar.gz.age

$ age -d -i key.txt data.tar.gz.age > data.tar.gz

Публичный ключ это одна строка с префиксом age1, приватный одна строка с префиксом AGE-SECRET-KEY-1. Никакого keyring и никакого состояния на диске кроме файла с ключом.

Что ещё умеет

Флаг -r можно повторять, тогда файл расшифрует любой из получателей. Список получателей удобнее держать файлом и передавать через -R. Флаг -p шифрует паролем, причём при пустом вводе age сгенерирует стойкую фразу сам. Флаг -a даёт текстовый PEM вывод, если файл надо вставить в письмо или в YAML. При расшифровке тип файла определяется автоматически.

Приятно, что можно шифровать на обычные SSH ключи:

$ age -R ~/.ssh/id_ed25519.pub example.jpg > example.jpg.age
$ age -d -i ~/.ssh/id_ed25519 example.jpg.age > example.jpg

Отсюда трюк с GitHub, где публичные ключи лежат по адресу вида github.com/username.keys:

$ curl https://github.com/benjojo.keys | age -R - example.jpg > example.jpg.age

С версии 1.3.0 есть гибридные постквантовые ключи через age-keygen -pq. Цена в том, что публичный ключ получателя разрастается примерно до двух тысяч символов.

Как библиотека

CLI это обёртка над пакетом filippo.io/age:

recipient, _ := age.ParseX25519Recipient(pubKey)

out := &bytes.Buffer{}
w, err := age.Encrypt(out, recipient)
if err != nil {
    log.Fatal(err)
}
io.WriteString(w, "секретные данные")
w.Close() // обязателен, иначе не запишется финальный блок

Всё построено на io.Reader и io.Writer, поэтому поток по сети шифруется так же, как строка в памяти. Расшифровка через age.Decrypt с age.ParseX25519Identity.

Ставится из репозиториев почти везде, либо командой go install filippo.io/age/cmd/...@latest.

age стоит брать, когда нужно зашифровать файл и не хочется тащить модель доверия GPG. Подписей, отзыва ключей и сети доверия здесь нет и не будет. Это не замена GPG во всём, а замена в той задаче, ради которой его чаще всего и запускают.

➡️ Репозиторий

📍 Навигация: Вакансии • Задачи • Собесы

🐸 Библиотека Go-разработчика

#GoToProduction

😋 Топ-вакансий для Go-разработчиков за неделю

Go-разработчик — от 365 000 ₽, Удаленно (Москва)

Golang разработчик — офис в Москве

Senior Backend Engineer — от 450 000 ₽, удаленно (Москва)

➡️ Еще больше топовых вакансий — в нашем канале Go jobs

🐸 Библиотека Go-разработчика

#GoWork

⭐️ Пишем долгоживущую программу на Go с GOGC=off. Часть 2, ручной GC и код без аллокаций

В первой части мы разобрали связку GOGC=off и GOMEMLIMIT. Она подходит большинству сервисов и не требует переписывать код. Но есть задачи, где даже редкие циклы сборки в неудачный момент неприемлемы. Торговый бот в момент котировки, игровой сервер внутри тика, обработчик, у которого хвостовые задержки важнее среднего времени ответа.

Для таких случаев есть два более жёстких варианта.

➡️ Вариант первый, ручные циклы в окнах простоя

Идея простая. Вы выключаете автоматический триггер и запускаете сборку сами, но только тогда, когда пауза никому не мешает. Между тиками, между батчами, вне торговой сессии:

debug.SetGCPercent(-1)

for {
    batch := queue.Fetch()
    process(batch) // на этом участке GC не вмешивается

    if idle() {
        runtime.GC()
        debug.FreeOSMemory() // ещё и вернуть память операционной системе
    }
}


runtime.GC() выполняет полный цикл синхронно и возвращает управление, когда он закончен. debug.FreeOSMemory() делает то же самое и дополнительно отдаёт освободившиеся страницы ОС, что полезно, если вы платите за резидентную память, а не за виртуальную.

Выигрыш в том, что паузы переезжают туда, где они бесплатны. Хвост распределения задержек становится заметно ровнее, потому что в горячем пути нет ни маркировки, ни барьеров записи.

Риск в том, что окно простоя может не наступить. Всплеск нагрузки, и память растёт без ограничений. Поэтому такую схему почти всегда страхуют. Либо тем же GOMEMLIMIT как аварийным тормозом, либо явной проверкой порога:

var m runtime.MemStats

func maybeCollect(limit uint64) {
    runtime.ReadMemStats(&m) // это stop the world, не вызывайте в горячем цикле
    if m.HeapAlloc > limit {
        runtime.GC()
    }
}


runtime.ReadMemStats сам по себе останавливает мир, так что вызывать его надо по таймеру раз в секунду, а не на каждой итерации.

➡️ Вариант второй, программа без аллокаций

Теоретически самый чистый путь. Если после инициализации программа не аллоцирует в куче вообще, сборщику нечего собирать и GOGC=off безопасен буквально навсегда.

Это означает выделение всех буферов на старте, переиспользование через sync.Pool или собственные пулы, отказ от fmt в горячем пути, отказ от интерфейсов там, где значение убегает в кучу, работу со срезами фиксированной ёмкости вместо растущего append.

Проверять это надо не на глаз, а инструментами:

go build -gcflags='-m' ./...   // что именно убегает в кучу
go test -bench=. -benchmem     // столбец allocs/op должен быть нулевым

И регрессионный тест, который падает, как только счётчик аллокаций перестал быть нулём:

func TestNoAllocs(t *testing.T) {
    allocs := testing.AllocsPerRun(1000, func() {
        process(input) // горячий путь
    })
    if allocs != 0 {
        t.Fatalf("ожидали 0 аллокаций, получили %v", allocs)
    }
}

Честное предупреждение. Держать такое состояние в живом проекте тяжело. Одна безобидная строка логирования, один err.Error() в неудачном месте, и аллокации возвращаются. Обычно так пишут узкое ядро системы, а весь остальной сервис живёт с обычным GC.

Когда всё это оправдано

Выключать сборщик стоит только после измерений. Профиль показывает заметное время в runtime.gcBgMarkWorker, трассировка показывает всплески задержек ровно на циклах сборки, или программа настолько короткоживущая, что сборка просто не успевает окупиться.
Во всех остальных случаях достаточно поднять GOGC до 200 или 400. Это даёт большую часть выигрыша и не создаёт риска OOM.

Долгоживущая программа с GOGC=off возможна, если вы не оставляете систему без тормозов совсем. GOMEMLIMIT подходит почти всем и не требует менять код. Ручные вызовы runtime.GC() в окнах простоя дают самые ровные задержки, но нуждаются в страховке по памяти. Код без аллокаций работает вечно, но живёт только под постоянным присмотром бенчмарков.

📍 Навигация: Вакансии • Задачи • Собесы

🐸 Библиотека Go-разработчика

#GoDeep

🧑‍💻 В Go захотели поддержку GOARM64=v9.6

В трекере Go появилось предложение №80402. Разработчик просит добавить новое значение переменной GOARM64 со значением v9.6 и тег сборки arm64.v9.6, чтобы тулчейн умел собирать под архитектуру Armv9.6-A.

Вместе с версией предлагают включать набор инструкций FEAT_CMPBR автоматически. Он объединяет сравнение и условный переход в одну операцию, в Armv9.6-A обязателен, поэтому отдельная опция не нужна. По умолчанию поведение не меняется, значение пригодится тем, кто собирает под свежие чипы на Armv9.6-A.

📍 Навигация: Вакансии • Задачи • Собесы

🐸 Библиотека Go-разработчика

#GoLive