Forwarded from Українська девопсарня
В рамках постинга всякой фигни — статья на википедии о SysRq клавише на клавиатуре, при помощи которой можно делать кучу крутых штук в линуксе. Например отправить sigterm всем процессам в текущей виртуальной консоли, сделать sync для всех примонтированных фс или сделать трейс.
https://en.wikipedia.org/wiki/Magic_SysRq_key
https://en.wikipedia.org/wiki/Magic_SysRq_key
Forwarded from Українська девопсарня
Вышла 4-я часть замечательное серии о IO. Первые три уже проскакивали в этом дайждесте.
Собственно автор, как и обещал, рассказывает о B-tree c картинками и пояснениями. Написанно супер круто и вообще must read.
Собственно автор, как и обещал, рассказывает о B-tree c картинками и пояснениями. Написанно супер круто и вообще must read.
Medium
On Disk IO, Part 4: B-Trees and RUM Conjecture
If you like the series, check out my upcoming book on Database Internals!
Forwarded from Uncel Duk
GitHub
GitHub - openvstorage/alba: Open vStorage ALBA (alternate backend) creates a replicated or flexible network raid’ed object storage…
Open vStorage ALBA (alternate backend) creates a replicated or flexible network raid’ed object storage backend out of Seagate Kinetic drives and local disk supporting compression, encryption. - op...
Forwarded from J
хз чо такое.
У супермикры вот такое видел)
https://www.supermicro.nl/white_paper/white_paper_An_Object_Storage_Solution_For_Data_Archive_using_Supermicro_SSG-5018D8-AR12L_and_OpenIO_SDS.pdf
У супермикры вот такое видел)
https://www.supermicro.nl/white_paper/white_paper_An_Object_Storage_Solution_For_Data_Archive_using_Supermicro_SSG-5018D8-AR12L_and_OpenIO_SDS.pdf
Forwarded from Українська девопсарня
На CatOps опубликовали интересный пост о SO_REUSEPORT (https://xn--r1a.website/catops/329). Собственно хочу в догонку скинуть старый пост из github о том что не все так хорошо с SO_REUSEPORT на примере Haproxy.
Если коротко, то между прекращением приема сообщений и закрытием сокета может пройти какое-то время (несколько миллисекунд) и все подключения за этот период будут сброшены, потому что старый демон их уже не обрабатывает, но еще не закрыл сокет.
Вариант решения от Haproxy — дропать syn запросы на этот период. Вариант решения от GitHub (и nginx) использовать отдельный демон, который будет держать сокет открытым.
Если коротко, то между прекращением приема сообщений и закрытием сокета может пройти какое-то время (несколько миллисекунд) и все подключения за этот период будут сброшены, потому что старый демон их уже не обрабатывает, но еще не закрыл сокет.
Вариант решения от Haproxy — дропать syn запросы на этот период. Вариант решения от GitHub (и nginx) использовать отдельный демон, который будет держать сокет открытым.
Telegram
CatOps
В версии ядра Linux 3.9 (ага, давно) добавили такую фичу для сокетов как SO_REUSEPORT aka port sharding. Смысл в том, что несколько процессов могут слушать один и тот же порт, а ядро само разрулит, кому что посылать. Ну код должен со своей стороны эту фичу…
Forwarded from DevOps Deflope News
Отличная подборка материалов по дизайну отказоустойчивых систем. С графиками, ссылками на доп. материалы и карточками Anki для изучения.
Есть также перевод на русский.
https://goo.gl/kreXbJ
Есть также перевод на русский.
https://goo.gl/kreXbJ
GitHub
GitHub - donnemartin/system-design-primer: Learn how to design large-scale systems. Prep for the system design interview. Includes…
Learn how to design large-scale systems. Prep for the system design interview. Includes Anki flashcards. - donnemartin/system-design-primer
Forwarded from DevOps News
Опубликованы видеозаписи докладов с LISA17, проходившей в конце октября в Сан Франциско.
Конференция посвящена масштабированию и эксплуатации распределенных систем и является одно из старейших в своем роде.
Playlist на youtube: https://www.youtube.com/playlist?list=PLbRoZ5Rrl5lfzbd-NnFFBOwZs2He4PBH7
Сайт конференции (с abstract докладов): https://www.usenix.org/conference/lisa17/conference-program
#videos #conferece #video #youtube #lisa17 #lisa #scaling #usenix
Конференция посвящена масштабированию и эксплуатации распределенных систем и является одно из старейших в своем роде.
Playlist на youtube: https://www.youtube.com/playlist?list=PLbRoZ5Rrl5lfzbd-NnFFBOwZs2He4PBH7
Сайт конференции (с abstract докладов): https://www.usenix.org/conference/lisa17/conference-program
#videos #conferece #video #youtube #lisa17 #lisa #scaling #usenix
YouTube
LISA17 - YouTube
Forwarded from DevOps News
И аналогично про SRECon17 Europe.
Конференция посвящена SRE и DevOps практикам, архитектуре систем и всему с этим связанному.
Playlist: https://www.youtube.com/playlist?list=PLbRoZ5Rrl5lcIFf9w5z2s4csaS_nIs3_Z
#videos #conferece #video #youtube #srecon17eu #srecon17 #srecon #usenix
Конференция посвящена SRE и DevOps практикам, архитектуре систем и всему с этим связанному.
Playlist: https://www.youtube.com/playlist?list=PLbRoZ5Rrl5lcIFf9w5z2s4csaS_nIs3_Z
#videos #conferece #video #youtube #srecon17eu #srecon17 #srecon #usenix
YouTube
SREcon17 Europe/Middle East/Africa - YouTube
Forwarded from CatOps
А тут ещё подъехали свежие анонсы от Microsoft:
- В статусе Preview запустался Azure DevOps Projects
- В Visual Studio (и, вроде, Visual Studio Code) хотят добавить Connected environment for AKS. AKS — это, напомню, менеджед-Кубернетис сервис от Microsoft. Чтобы вот сразу разрабатывать cloud-native приложения и смотреть, что будет не отходя от IDE
- В CI/CD pipeline от M$ добавили macOS, как целевую ОС, что хорошо
Я отобрал только пару анонсов, больше можно глянуть тут: https://habrahabr.ru/company/microsoft/blog/342516/
Вообще, у меня тут мало новостей по Azure, потому что сам с ним не работаю, так что за обновлениями особо не слежу. Если вам конкретно он интренес, можно подписаться на devdigest // azure там исключительно по этому продукту всё
Кстати, согласно исследованию долей рынка технологических гигантов США, у Microsoft самый диверсифицированный бизнес; а это значит, что если всё вдруг пойдёт по тому самому месту, у них больше шансов остаться на плаву.
Такие дела, коты
#azure #microsoft
- В статусе Preview запустался Azure DevOps Projects
- В Visual Studio (и, вроде, Visual Studio Code) хотят добавить Connected environment for AKS. AKS — это, напомню, менеджед-Кубернетис сервис от Microsoft. Чтобы вот сразу разрабатывать cloud-native приложения и смотреть, что будет не отходя от IDE
- В CI/CD pipeline от M$ добавили macOS, как целевую ОС, что хорошо
Я отобрал только пару анонсов, больше можно глянуть тут: https://habrahabr.ru/company/microsoft/blog/342516/
Вообще, у меня тут мало новостей по Azure, потому что сам с ним не работаю, так что за обновлениями особо не слежу. Если вам конкретно он интренес, можно подписаться на devdigest // azure там исключительно по этому продукту всё
Кстати, согласно исследованию долей рынка технологических гигантов США, у Microsoft самый диверсифицированный бизнес; а это значит, что если всё вдруг пойдёт по тому самому месту, у них больше шансов остаться на плаву.
Такие дела, коты
#azure #microsoft
Microsoft
Azure DevOps Projects | Microsoft Azure
Use Azure DevOps Projects and host your first web app on Azure in three easy steps.
Forwarded from CatOps
Я вам сегодня принёс презентацию Carlos Sanchez c Jokerconf об использовании Kubernetes в CI/CD
Скачать можно тут: https://pages.cloudbees.com/l/272242/2017-11-01/5xzmz
Я же в догонку прикреплю сам PDF
#slides #kubernetes
Скачать можно тут: https://pages.cloudbees.com/l/272242/2017-11-01/5xzmz
Я же в догонку прикреплю сам PDF
#slides #kubernetes
Forwarded from Вместе с Go (Kirill Danshin)
OpenEBS - контейнеризированное блочное хранилище на Go для облачных или других окружений с per container (per pod) QoS SLAs с множеством плюшек https://github.com/openebs/openebs
GitHub
GitHub - openebs/openebs: A popular & widely deployed Open Source Container Native Storage platform for Stateful Persistent Applications…
A popular & widely deployed Open Source Container Native Storage platform for Stateful Persistent Applications on Kubernetes. - openebs/openebs
Forwarded from Vlad
Docker Blog
User-guided caching in Docker for Mac
[This post was written by Jeremy Yallop and David Sheets.] Recent Docker releases (17.04 CE Edge onwards) bring significant performance improvements to bind-mounted directories on macOS. (Docker users on the stable channel will see the improvements in the…
Forwarded from CatOps
А почитайте про Canopy систему от Facebook для сквозного (end-to-end) анализа производительности
Это как раз и есть то, что назвали бы модным словом "observability", но в статье его ни разу не встречается (хаха!) и, честно говоря, от самого слова уже начинает дёргаться глазик
#monitoring #observability
Это как раз и есть то, что назвали бы модным словом "observability", но в статье его ни разу не встречается (хаха!) и, честно говоря, от самого слова уже начинает дёргаться глазик
#monitoring #observability
the morning paper
Canopy: an end-to-end performance tracing and analysis system
Canopy: an end-to-end performance tracing and analysis system Kaldor et al., SOSP’17 In 2014, Facebook published their work on ‘The Mystery Machine,’ describing an approach to end-to-end performanc…
Forwarded from CatOps
Joe Beda объясняет, какие процессы происходят в брюхе у Kubernetes:
https://www.cncf.io/blog/2017/11/07/joe-beda-explains-inner-workings-kubernetes/
Статья расчитана на людей, которые только начали знакомитьс со зверем по имени Кубер, но всё равно интересная (потому что схемы!)
#kubernetes
https://www.cncf.io/blog/2017/11/07/joe-beda-explains-inner-workings-kubernetes/
Статья расчитана на людей, которые только начали знакомитьс со зверем по имени Кубер, но всё равно интересная (потому что схемы!)
#kubernetes
Cloud Native Computing Foundation
Joe Beda explains some of the inner workings of Kubernetes | Cloud Native Computing Foundation
In this blog series originally posted on Heptio, Joe Beda (CTO of Heptio and starter of Google Compute Engine, Kubernetes and Google Container Engine) dives into some of the inner workings of…
Forwarded from CatOps
Сравнение SSH и OpenVPN для туннелирования. Хотя сравнивать эти два решения не совсем корректно, туннели действительно можно строить обеими вариантами. Хотя, если вам необходим туннель лишь на один порт, выгода SSH очевидна. Кроме того, можно исползовать Sshuttle — как написал сам разработчик — VPN для бедных
И бонусом: tinyFecVPN — VPN решение для тех у кого бедное соединение (к сожалению, игра слов очевидна только в английском). tinyFecVPN исользует кодирование Рида-Соломона для исправления ошибок в сетях с потерями за счёт пропускной способности. Аж реально захотелось потестировать это чудо где-нибудь на даче с еле живым 3G интернетом через антенну из кофейной банки
#vpn #tunneling
И бонусом: tinyFecVPN — VPN решение для тех у кого бедное соединение (к сожалению, игра слов очевидна только в английском). tinyFecVPN исользует кодирование Рида-Соломона для исправления ошибок в сетях с потерями за счёт пропускной способности. Аж реально захотелось потестировать это чудо где-нибудь на даче с еле живым 3G интернетом через антенну из кофейной банки
#vpn #tunneling
BackSlasher
SSH vs OpenVPN for Tunneling
Update 28.01.16 I found some sites referring to this post. Below are the common complaints I saw, and my replies:
Forwarded from CatOps
Ещё один туториал по Python
Говорят, хороший. По крайней мере был в трендах Hackernews
#python #education
Говорят, хороший. По крайней мере был в трендах Hackernews
#python #education
GitHub
GitHub - norvig/pytudes: Python programs, usually short, of considerable difficulty, to perfect particular skills.
Python programs, usually short, of considerable difficulty, to perfect particular skills. - norvig/pytudes
Forwarded from Українська девопсарня
Вышла в свет интересная утилита для управления овнершипом инстансов и IAM политиками в AWS даже если у вас несколько аккаунтов: https://github.com/RiotGames/cloud-inquisitor
Кроме этого тула умеет присасываться к логам и даже какие-то простенькие чеки.
Кроме этого тула умеет присасываться к логам и даже какие-то простенькие чеки.
GitHub
GitHub - RiotGames/cloud-inquisitor: Enforce ownership and data security within AWS
Enforce ownership and data security within AWS. Contribute to RiotGames/cloud-inquisitor development by creating an account on GitHub.