Forwarded from HABR FEED + OPENNET
Что нужно знать об архитектуре ClickHouse, чтобы его эффективно использовать. Алексей Зателепин
https://habr.com/ru/post/509540/?utm_source=habrahabr&utm_medium=rss&utm_campaign=509540
Tags: IT-инфраструктура, Open source, Администрирование баз данных, Высокая производительность, Хранение данных, clickhouse
Author chemtech #habr
https://habr.com/ru/post/509540/?utm_source=habrahabr&utm_medium=rss&utm_campaign=509540
Tags: IT-инфраструктура, Open source, Администрирование баз данных, Высокая производительность, Хранение данных, clickhouse
Author chemtech #habr
Хабр
Что нужно знать об архитектуре ClickHouse, чтобы его эффективно использовать. Алексей Зателепин (2018г)
ClickHouse — высокопроизводительная аналитическая база данных с открытыми исходниками, разработанная в Яндексе. Изначально ClickHouse создавался для задач Яндекс.Метрики, но постепенно нашёл...
Forwarded from VK Cloud
Mail.ru Cloud Solutions анонсирует решение по автоматизации развертывания гибридного облака на базе технологии Amazon Web Services
Новое решение позволяет российским и международным компаниям, работающим в России, автоматически разворачивать федеративные кластеры Kubernetes одновременно на мощностях Amazon Web Services (AWS) и MCS.
Клиенты MCS смогут создать гибридное облако с помощью решения, протестированного обоими провайдерами и отвечающего их стандартам. MCS автоматически предоставляет защищенное VPN-соединение между облачными инфраструктурами. Использование федерации упростит централизованное управление кластерами и позволит равномерно распределить нагрузку на сеть, а также минимизировать задержки при передаче данных.
Статья на хабре про детали решения: https://habr.com/ru/company/mailru/news/t/509684/
Подробнее о Mail.ru Cloud Containers: https://mcs.mail.ru/containers/
Новое решение позволяет российским и международным компаниям, работающим в России, автоматически разворачивать федеративные кластеры Kubernetes одновременно на мощностях Amazon Web Services (AWS) и MCS.
Клиенты MCS смогут создать гибридное облако с помощью решения, протестированного обоими провайдерами и отвечающего их стандартам. MCS автоматически предоставляет защищенное VPN-соединение между облачными инфраструктурами. Использование федерации упростит централизованное управление кластерами и позволит равномерно распределить нагрузку на сеть, а также минимизировать задержки при передаче данных.
Статья на хабре про детали решения: https://habr.com/ru/company/mailru/news/t/509684/
Подробнее о Mail.ru Cloud Containers: https://mcs.mail.ru/containers/
Хабр
Решение MCS по автоматизации развертывания гибридного облака на базе технологии AWS
Платформа Mail.ru Cloud Solutions (MCS) запустила новое решение: оно позволяет российским и международным компаниям, работающим в России, автоматически разворачивать федеративные кластеры Kubernetes...
Forwarded from Типа про IT
Microsoft анонсировала релиз (превью) Pylance, более лучшего языкового сервера и расширения для Python в VS Code. Уверяют, что теперь поддержка Python не хуже, чем в вашей любимой IDE. Заодно завезли годный type checking (это если вы используете typing у себя в проекте, разумеется).
Я немного потестил и беспощадно лайкаю. Стало прям хорошо, по первому впечатлению — не хуже, чем с TypeScript. А TS в VS Code это как бы first-class citizen, на минуточку. Так что попробуйте, если тоже кодите в блокнотах в 2к20.
Я немного потестил и беспощадно лайкаю. Стало прям хорошо, по первому впечатлению — не хуже, чем с TypeScript. А TS в VS Code это как бы first-class citizen, на минуточку. Так что попробуйте, если тоже кодите в блокнотах в 2к20.
Forwarded from Технологический Болт Генона
Выложены доклады со swampUP 2020
https://www.youtube.com/playlist?list=PLY0Zjn5rFo4NEUdWHTtrYgn5W6IqY3ggL
Программа
https://swampup.jfrog.com/agenda/
https://www.youtube.com/playlist?list=PLY0Zjn5rFo4NEUdWHTtrYgn5W6IqY3ggL
Программа
https://swampup.jfrog.com/agenda/
Forwarded from DevOps Deflope News
Весьма полезная статья от Gruntwork про менеджмент секретов в Terraform коде.
http://amp.gs/2bmh
#gruntwork #terraform #article
http://amp.gs/2bmh
#gruntwork #terraform #article
Medium
A comprehensive guide to managing secrets in your Terraform code
One of the most common questions we get about using Terraform to manage infrastructure as code is how to handle secrets such as passwords…
Forwarded from DevOps Deflope News
Пример использования RED (Rate, Errors, Duration) метода для анализа MySQL перформанса в блоге Percona
http://amp.gs/2bmu
#percona #article #monitoring
http://amp.gs/2bmu
#percona #article #monitoring
Forwarded from DevOps&SRE Library
Code review checklist for distributed systems
- Define a path for error handlinghttps://www.kislayverma.com/post/code-review-checklist-for-distributed-systems
- Have a plan for recovery
- Always set timeouts on remote system calls
- Retry on timeout
- Use circuit breaker
- Don't handle timeouts like a failure
- Don't invoke remote systems inside transactions
- Use smart batching
- All APIs MUST be idempotent
- Define response time and throughput SLAs explicitly and code to adhere to them
- Define and limit batch APIs
- Think about Observability up-front
- Cache aggressively
- Consider unit of failure
- Isolate external domain objects at the edge of the system
- Sanitize input at every edge
- Never commit credentials
Forwarded from DevOps&SRE Library
Vector
A lightweight and ultra-fast tool for building observability pipelineshttps://github.com/timberio/vector
Forwarded from I hate overtime
#linux
Каким-то чудом не запостил сериал от Петра Зайцева(Percona) про то, как мерять перфоманс подсистем линукса. Как раз вышла новая часть про io
Каким-то чудом не запостил сериал от Петра Зайцева(Percona) про то, как мерять перфоманс подсистем линукса. Как раз вышла новая часть про io
ma.ttias.be
How to measure Linux Performance Avoiding Most Typical Mistakes: CPU
This post is the first in a four-part blog series by Peter Zaitsev, Percona Chief Executive Officer.
Forwarded from CatOps
Статья от Percona с советами по созданию дашбордов
В названии фигурирует Grafana, но советы на самом деле общее. Кому-то они могут показаться капитанскими, но я повидал слишком много непонятных, бесполезных и перегруженных дашбордов. Потому считаю необходимым запостить.
#observability
В названии фигурирует Grafana, но советы на самом деле общее. Кому-то они могут показаться капитанскими, но я повидал слишком много непонятных, бесполезных и перегруженных дашбордов. Потому считаю необходимым запостить.
#observability
Percona Database Performance Blog
Tips for Designing Grafana Dashboards
Peter Zaitsev share some of his considerations for designing Grafana Dashboards which will allow you to create better dashboards.
Forwarded from DevOps Deflope News
Отличный репозиторий с разными гайдами для Amazon Web Services (AWS)
https://github.com/open-guides/og-aws/
#guides #github
https://github.com/open-guides/og-aws/
#guides #github
GitHub
GitHub - open-guides/og-aws: 📙 Amazon Web Services — a practical guide
📙 Amazon Web Services — a practical guide. Contribute to open-guides/og-aws development by creating an account on GitHub.
Forwarded from Sergei Egorov
Forwarded from Мониторим ИТ
А вот подъехали видосы с прошедшей 25 июня конференции ElasticON. На ней сотрудники Elastic и приглашённые клиенты рассказывают о подходах к использованию Elastic Stack и кейсах.
Forwarded from GitHub'ненько
KeyDB is a high performance fork of Redis with a focus on multithreading
#kv #db #nosql
https://github.com/JohnSully/KeyDB
#kv #db #nosql
https://github.com/JohnSully/KeyDB
Forwarded from GitHub'ненько
Forwarded from Записки админа
Forwarded from Geeks (шапкер)
Как-то так случилось, что мимо меня прошла новость о том, что на свою персональную страничку гитхаба теперь можно добавить произвольное содержимое. Требуемые действия до безобразия крайне просты. Всего лишь необходимо создать новый репозиторий имя которого будет совпадать с именем аккаунта и добавить в него файл
README.md с краткой (или не очень краткой) информацией о себе или своих проектах. Именно содержимое данного файла будет отображаться не только на странице корневой папки данного репозитория, но и на вашей персональной странице. Но простота данного решения позволяет производить достаточно интересные трюки. Например, динамически обновлять страницу и отображать на ней ссылки на последние записи с вашего блога, реализовав сборку информации для readme-файла посредством Github Actions, либо любым другим ci-сервером на ваш вкус. Например, о решении подобного плана можно прочитать по ссылке https://simonwillison.net/2020/Jul/10/self-updating-profile-readme/Simon Willison’s Weblog
Building a self-updating profile README for GitHub
GitHub quietly released a new feature at some point in the past few days: profile READMEs. Create a repository with the same name as your GitHub account (in my case …