Ввиду того, что ваш покорный слуга живет и работает в Штатах, последние несколько дней прибываю в Рождественских каникулах.
Поэтому было затишье в этом канале.
LinkedIn в твиторе для инженеров https://twitter.Com/LinkedInEng в выложил несколько интересных видосов

-история развития stream processing framework Apache Samsa
- все что вы хотели знать про Consumer Groups
- подробно о том, как работает Controller в Kafka кластере
- много мякотки на тему дисковой подсистемы - JBOD и Kafka

Напоминаю, что у нас появился чат https://xn--r1a.website/proKafka

Привет, зафигачил тут простую сетку для kubernetes, никаких роутов и политик, все поды и хосты помещаются в один L2-домен. Если кому интересно и хочет потестить, вот ссылка:
https://github.com/kvaps/bridget

Цикл о построении системы распределенных логов. Где под логом понимается упорядоченная структура данных, состоящая из immutable events с возможностью только добавления

В первой части рассказаны основы того, как делать лог по частям

Вторая часть про репликацию

Блогпост о том, как использовать HAProxy в качестве ingress-controller для Kubernetes. С примерами конфигурации

https://www.haproxy.com/blog/haproxy_ingress_controller_for_kubernetes/

#haproxy #kubernetes

Также рекомендую заглянуть в DevOps дайджест на DOU

Давайте без шуток про "прошлогодний" — они каждый год унылы одинаково

А вот тут Кафка в картинках для самых маленьких (I kid you not)!
Местами присутствуют косяки небольшие (типа offsets уже не хранятся в zookeeper), но выглядит достаточно интересно и весело


https://medium.com/learning-with-diagrams/learning-w-diagrams-intro-to-kafka-510c8f4d7030

Azure team рассказывает про всякие use cases Кафки. Маркетинг? Может быть, но все равно очень интересный взгляд использование технологии

https://youtu.be/gttwnNDHuZ4

https://www.robustperception.io/scaling-and-federating-prometheus/ ?

А в канун нового года Cindy Sridharan опубликовала просто гигантскую статью про различные подходы к тестированию микросервисов

https://goo.gl/msjUvq

Jaana B. Dogan, SRE из Google опубликовала небольшую статью про observability для микросервисов и его отличия от observability для монолитных продуктов.

https://goo.gl/39Trmo

Я наконец-то выспался с начала года! Негативная сторона в том, что сейчас очень лениво разбирать какие-то крупные статьи, потому ловите shell скриптик, который позволяет загнать в Terraform GitHub организацию, включая:
- публичные репы
- приватные репы
- репы команд
- сами команды
- членство в командах
- собсно юзеров

Если вы используете GitHub в работе, может быть очень даже интересно:

https://github.com/chrisanthropic/terraform-import-github-organization

Не маєте CSP на своєму веб ресурсі? (як і Амазон, до речі) Не контролюєте що можна відправляти користувачу? Чи хочете отримати кольорове логування у терміналі через один з 400,000 неперевірених npm пакетів? Тоді, на хвилі нещодавних інтригуючих подій, радимо почитати цю статтю :)

Надіслав @vladimir4152 через @itkpi_suggest_bot

https://hackernoon.com/im-harvesting-credit-card-numbers-and-passwords-from-your-site-here-s-how-9a8cb347c5b5

Оч прикольная статья от DataDog о том, как мониторить PostgreSQL:
https://www.datadoghq.com/blog/postgresql-monitoring/

Кратко описано, как PostgreSQL вообще записывает данные, на какие метрики стоит обращать внимание, и что они вообще значат. Тажке рассказали, какие выводы можно сделать по каждой из метрик и что предпринять в тех или иных ситуациях

#postgresql #database

http://danielfm.me/posts/painless-nginx-ingress.html тут есть неплохая статья

У меня сегодня будет JavaDay!

Первая статья, которой я хочу поделиться — записки SRE из Google Andrew Brampton о том, как жить с Java в продакшене. Главное, когда читаешь материалы от Google, помнить, что ты не Google :)
https://www.javaadvent.com/2017/12/running-java-in-production.html/amp

Дальше Daniel Bryant рассказывает, как запускать Java приложения в Docker и оркестрировать это счастье с помощью Kubernetes. При чём, рассказано на примере minicube, что прикольно, потому что убирает зависимости в виде тех или иных облачных сервисов:
https://www.oreilly.com/ideas/how-to-manage-docker-containers-in-kubernetes-with-java

И более низкоуровневая движуха — серия статей на 5-10 минут, в которых описана "анатомия" JVM. Там ещё прикольная табличка, которая отражает, какие темы покрывает та или иная статья:
https://shipilev.net/jvm-anatomy-park/

Enjoy!

#java

Ops School — весьма комплексная подборка материалов для изучения.

https://goo.gl/FhyA7V

Хорошая вводная статья от Daniel Bryant про деплой Java приложений с помощью Docker и Kubernetes.

https://goo.gl/zFfnc2