Кубертатный период
486 subscribers
148 photos
10 videos
3 files
320 links
DevOps Underdog
Download Telegram
Raft distributed consensus algorithm visualization

Протокол Raft используется для достижения консенсуса в Kubernetes (etcd)

http://thesecretlivesofdata.com/raft/
Мониторинг в Apache NiFi

NiFi предоставляет возможность сообщать о состоянии, статистике, показателях и информации мониторинга внешним службам с помощью интерфейса задач отчетности (Reporting Task).

Apache NiFi предоставляет несколько вариантов задач отчетности для поддержки внешних систем мониторинга, таких как Ambari, Grafana, Prometheus и т. д. Разработчик может создать пользовательскую задачу отчетности или настроить встроенные задачи для отправки метрик NiFi во внешние системы мониторинга.

https://habr.com/ru/company/neoflex/blog/695926/
Forwarded from AWS Notes
​​📓 Choosing the right AWS service to deploy your website or web application in the AWS Cloud — AWS Prescriptive Guidance:

https://docs.aws.amazon.com/prescriptive-guidance/latest/website-deployment-services

▫️ Static: S3 + CloudFront
▫️ JS framework + CI/CD: Amplify
▫️ Serverless + low-cost: API Gateway + Lambda + S3
▫️ WordPress/Drupal/Joomla: LightSail
▫️ Containers: App Runner or ECS or Fargate
▫️ Kubernetes: EKS
▫️ On-premises: EKS Anywhere or ECS Anywhere
▫️ Old-style managed environment: Beanstalk
▫️ Self-managed: EC2

#design
Forwarded from Технологии | Нейросети | NanoBanana
This media is not supported in your browser
VIEW IN TELEGRAM
🔥2🍾1
Жизнь DNS-запроса в Kubernetes

В Kubernetes запросы DNS следуют по определенному пути для разрешения IP-адреса имени хоста. В этом блоге вы шаг за шагом узнаете о жизни DNS-запроса в Kubernetes.

Service discovery в Kubernetes важнейший компонент общей архитектуры, который позволяет перенаправлять входящие запросы на правильные workloads, работающие в кластере. DNS играет ключевую роль в этом процессе.

Понимание того, как работает DNS и Service discovery в Kubernetes, может помочь при отладке. Это позволяет лучше понять поток трафика в кластере и диагностировать любые проблемы, которые могут возникнуть.
This media is not supported in your browser
VIEW IN TELEGRAM
Google Bard AI

Хорошая новость для пользоваталей Google Search Engine, так как Google решили запустить Bard AI, который представляет из себя аналог ChatGPT, позволяющую вам получать ответы в режиме диалога. Дата запуска Google Bard AI ожидается в феврале 2023 года.

https://blog.google/technology/ai/bard-google-ai-search-updates/
This media is not supported in your browser
VIEW IN TELEGRAM
Teller

Основная цель Teller — помочь разработчикам и предоставить безопасный способ использования секретов без hardcode их в исходном коде, оболочке или их неправильного размещения в неправильных файлах. С помощью файла teller.yaml вы можете настроить Teller для подключения к хранилищу секретов Vault, Consul, AWS Secret Manager, Google Secret Manager и многих других, чтобы безопасно извлекать из них секреты.

Teller имеет еще несколько функций, так как он может использоваться для целей DevSecOps в процессе CI для проверки секретов в исходном коде, а также используется в качестве инструмента, который позволяет не хранить секреты в файлах, логах и и т.д.
В дополнение, еще одна крутая тула для синхронизации секретов в Kubernetes из разных хранилищ секретов

External Secrets Operator - это оператор Kubernetes, который интегрирует внешние системы управления секретами, такие как AWS Secrets Manager, HashiCorp Vault, Google Secrets Manager, Azure Key Vault, IBM Cloud Secrets Manager и многие другие. Оператор считывает информацию из внешних API и автоматически вводит значения в Kubernetes Secret.
netshoot: a Docker + Kubernetes network trouble-shooting swiss-army container

Образ (container image) для поиска и устранения неисправностей в сетях Docker и Kubernetes. При понимании того, как работают сети Docker и Kubernetes, а также при наличии правильного набора инструментов, вы сможете устранять неполадки и решать эти сетевые проблемы.

Образ netshoot имеет набор инструментов для поиска и устранения неполадок в сети Docker. Наряду с этими инструментами поставляется набор вариантов использования, которые показывают, как этот контейнер можно использовать в реальных сценариях.

$ docker run -it --net container:<container_name> nicolaka/netshoot
👍1
Kube-DNS: The Essential Service for Kubernetes Clusters

 • Ensure that DNS records are configured correctly: If your DNS records are inaccurate, they may as well not exist at all, because your DNS server will provide bad information. Properly configure DNS records for all services in the cluster to ensure that requests for services reach the desired endpoints.
 • Monitor the health of kube-dns: Monitor the health of kube-dns by regularly checking its performance and functionality. The kube-dns troubleshooting strategies we outlined above can help with this purpose.
 • Configure a separate DNS zone for each environment: By configuring separate DNS zones for each environment, such as production and staging, you can better protect critical services from malicious attacks.
 • Use a resolver for external domains: For external domains, use a reliable DNS resolver to prevent potential outages. This can also help in some ways to keep the cluster secure by protecting it against malicious attacks.
This media is not supported in your browser
VIEW IN TELEGRAM
Spegel, mirror in Swedish, is a stateless cluster local OCI registry mirror.

• Locally cache images from external registries with no explicit configuration.
• Avoid cluster failure during external registry downtime.
• Improve image pull speed and pod startup time by pulling images from the local cache first.
• Avoid rate-limiting when pulling images from external registries (e.g. Docker Hub).
• Decrease egressing traffic outside of the clusters network.
• Increase image pull efficiency in edge node deployments.
Некоторые используют Helm + Kustomize для установки публичных Helm-чартов.

Есть идеи в чем преимущества? Почему не использовать только values файл?
Возможно, для правок манифестов без правки исходного чарта.

Эта комбинация может быть особенно полезна, когда вам нужно развернуть одно и то же приложение в разных средах с немного отличающимися конфигурациями. Вы можете использовать Helm для управления развертыванием, а Kustomize - для внесения необходимых изменений в конфигурацию для каждой среды.
👍1
Why I Will Never Use Alpine Linux Ever Again

Некоторые различия между Alpine и, например Ubuntu, связаны с тем, как musl (и, следовательно, также Alpine) обрабатывает DNS (это всегда DNS), более конкретно, musl (по замыслу) не поддерживает DNS-over-TCP. Обычно вы не замечаете этой разницы, потому что в большинстве случаев одного UDP-пакета (512 байт) достаточно для разрешения имен... и когда этого недостаточно, и ваше приложение (работающее на Kubernetes), которое ранее работало совершенно нормально в течение нескольких месяцев, внезапно начинает выбрасывать исключения "Unknown host" для одного конкретного узла (очень критического). Хуже всего то, что это может проявляться случайным образом в любое время, когда какое-либо изменение внешней сети приводит к тому, что разрешение какого-либо конкретного домена требует более 512 байт, доступных в одном UDP-пакете.
Устаревший реестр образов k8s.gcr.io будет заморожен с 3 апреля 2023 года

Образы для Kubernetes 1.27 не будут доступны в реестре образов k8s.gcr.io.

Начиная с Kubernetes 1.25, реестр образов контейнеров изменился с k8s.gcr.io на registry.k8s.io. Этот новый реестр распределяет нагрузку между несколькими облачными провайдерами и регионами, функционируя как своего рода сеть доставки контента (CDN) для образов контейнеров Kubernetes. Это изменение снижает зависимость проекта от одной сущности и обеспечивает более быструю загрузку для большого количества пользователей.

Тут есть описание причин принятого решения — https://github.com/kubernetes/k8s.io/wiki/New-Registry-url-for-Kubernetes-(registry.k8s.io)#why-a-new-url

Вкратце: теперь oci-proxy будет определять из какого облачного провайдера пришел запрос, и следовательно предлагать загрузить образы из этого же облака, с целью уменьшения накладных расходов на инфраструктуру сообщества, так как загружать образы из GCP в AWS выходит дорого с ростом использования Kubernetes.