Forwarded from GEEK EXPORT
🔎{Чтение на выходные: Как устроен Netflix}🧮
Занимательная статья про архитектуру самого крупного стриминг сервиса кино и сериалов. Будет интересно всем, кто хочет узнать про то, как спроектированы сложные распределенные системы.
Читать на Medium
Занимательная статья про архитектуру самого крупного стриминг сервиса кино и сериалов. Будет интересно всем, кто хочет узнать про то, как спроектированы сложные распределенные системы.
Читать на Medium
Medium
A Design Analysis of Cloud-based Microservices Architecture at Netflix
1. Introduction
Forwarded from Aleksey Beloliptsev
неплохой отчет по подготовке к AWS Advanced Networking Specialty Exam с flashcards и mindmap https://neckercube.com/posts/2020-12-18-how-i-passed-the-aws-advanced-networking-specialty-exam/ #exam #ANS
Neckercube
How I Passed the AWS Advanced Networking Specialty Exam
This post details the materials and methods I used to study for and pass the AWS Certified Advanced Networking Speciality ANS-C00 exam, and how you can save some money on the cost of the exam. I also include a mind map and flash cards I created while studying.…
Kong и App Mesh для микросервисов на EKS:
https://aws.amazon.com/blogs/containers/running-microservices-in-amazon-eks-with-aws-app-mesh-and-kong/
#EKS #AppMesh
https://aws.amazon.com/blogs/containers/running-microservices-in-amazon-eks-with-aws-app-mesh-and-kong/
#EKS #AppMesh
Amazon
Running microservices in Amazon EKS with AWS App Mesh and Kong | Amazon Web Services
This post was created in collaboration with Claudio Acquaviva, Solution Engineer, Kong, and Morgan Davies, Kong Alliances. A service mesh is transparent infrastructure layer that has become a common architectural pattern for intra-service communication. By…
EKS managed nodes + Spot-виртуалки
https://aws.amazon.com/blogs/containers/amazon-eks-now-supports-provisioning-and-managing-ec2-spot-instances-in-managed-node-groups/
Обратите внимание, теперь для того, чтобы крутить популярные Spot-нагрузки в EKS, не обязательно держать свои (self-managed) node-группы, а можно использовать встроенные (AWS managed), которые автоматически подключаются в кластер, что снимает болезненные проблемы, когда ноды не хотят присоединяться.
Так что теперь точно можно мигрировать.
#EKS #Spot
https://aws.amazon.com/blogs/containers/amazon-eks-now-supports-provisioning-and-managing-ec2-spot-instances-in-managed-node-groups/
Обратите внимание, теперь для того, чтобы крутить популярные Spot-нагрузки в EKS, не обязательно держать свои (self-managed) node-группы, а можно использовать встроенные (AWS managed), которые автоматически подключаются в кластер, что снимает болезненные проблемы, когда ноды не хотят присоединяться.
Так что теперь точно можно мигрировать.
#EKS #Spot
Amazon
Amazon EKS now supports provisioning and managing EC2 Spot Instances in managed node groups | Amazon Web Services
This post was contributed by Ran Sheinberg, Principal Solutions Architect and Deepthi Chelupati, Sr Product Manager Amazon Elastic Kubernetes Service (Amazon EKS) makes it easy to run upstream, secure, and highly available Kubernetes clusters on AWS. In 2019…
Forwarded from Sysadmin Tools 🇺🇦
Как в #aws запихнули Mac Mini ноды в #ec2
https://www.servethehome.com/how-aws-added-apple-mac-mini-nodes-to-ec2/
https://www.servethehome.com/how-aws-added-apple-mac-mini-nodes-to-ec2/
Forwarded from CloudTechRU
AWS анонсировал beta экзамен AWS Certified SysOps Administrator - Associate (SOA-C02)
Сдать можно будет с 16 февраля 2021 до 26 марта 2021. Стоимость $75.
https://email.awscloud.com/mo00kP00gmatEOanZRo0TM0
Сдать можно будет с 16 февраля 2021 до 26 марта 2021. Стоимость $75.
https://email.awscloud.com/mo00kP00gmatEOanZRo0TM0
🎄 С Новым Годом! 🎉
Прогнозы на AWS 2021
➡️ AWS Console Dark Mode
➡️ S3-файловая система для Лямбды
➡️ ECR репликация отдельных репозиториев
➡️ Поддержка SCP для CloudFormation
➡️ CDK 2.0 монорепо
➡️ Proton с поддержкой CDK, EKS и Jenkins
Свои прогнозы (и просто пожелания) пишите в комментариях.
Прогнозы на AWS 2021
➡️ AWS Console Dark Mode
➡️ S3-файловая система для Лямбды
➡️ ECR репликация отдельных репозиториев
➡️ Поддержка SCP для CloudFormation
➡️ CDK 2.0 монорепо
➡️ Proton с поддержкой CDK, EKS и Jenkins
Свои прогнозы (и просто пожелания) пишите в комментариях.
Получить в командной строке время создания текущего AWS аккаунта в формате мм/дд/гг:
AWS_ID=$(aws sts get-caller-identity --query Account --output text)
CREATED=$(aws organizations describe-account --account-id $AWS_ID --query Account.JoinedTimestamp --output text)
date -d $CREATED '+%D'
#aws_cli #query5 виртуалок обрабатывают статистические данные в 5 бакетах за 5 часов. Сколько часов понадобится 100 виртуалкам, чтобы обработать 100 бакетов?
Anonymous Quiz
69%
5
24%
100
7%
500
Каждая новая версия приложения генерит логи, объём которых удваивается каждый день и которые полностью заполняют ES объёмом 900 ГБ за 90 дней.
Сколько дней потребуется новой версии для заполнения ES объёмом 450ГБ?
Сколько дней потребуется новой версии для заполнения ES объёмом 450ГБ?
Anonymous Quiz
12%
39
21%
45
6%
60
62%
89
Slack: Customers may have trouble loading channels or connecting to Slack at this time.
https://status.slack.com/2021-01/9ecc1bc75347b6d1
https://status.slack.com/2021-01/9ecc1bc75347b6d1
Slack
Slack System Status
Resources for real-time and historical information about the Slack service.
В реальности много что упало, не только Slack. У меня iCloud работает почти нет.
https://downdetector.com/
https://downdetector.com/
Forwarded from Записки админа
⚙️ Не спите ещё? Тут кажется ещё одна рассылка намечается интересная. На этот раз по теме AWS. Предлагаю последить, вдруг что-то хорошее их этого выйдет - AWS Security Digest. AWS Security Digest Weekly Newsletter. #aws #security #напочитать
В документе AWS Service Terms в пункте
...we may store such AI Content in an AWS region outside of the AWS region where you are using such AI Service...
То бишь, ежели вы используете AI сервисы, то их данные могут быть сохранены вне региона, где вы работаете, что может нарушить compliance требования и про что хотя бы нужно знать.
На текущий момент AI сервисы это следующий список:
🔹 Amazon CodeGuru Profiler
🔹 Amazon CodeGuru Reviewer
🔹 Amazon Comprehend
🔹 Amazon Comprehend Medical
🔹 Amazon DevOps Guru
🔹 Amazon Forecast
🔹 Amazon HealthLake
🔹 Amazon Kendra
🔹 Amazon Lex
🔹 Amazon Lookout for Metrics
🔹 Amazon Personalize
🔹 Amazon Polly
🔹 Amazon Rekognition
🔹 Amazon Textract
🔹 Amazon Transcribe
🔹 Amazon Transcribe Medical
🔹 Amazon Translate
Амазону можно запретить использовать данные AI сервисов для улучшения их качества:
https://docs.aws.amazon.com/organizations/latest/userguide/orgs_manage_policies_ai-opt-out.html
Для этого нужно выполнить в management (главном) аккаунте специальные команды, которые добавят политики запрета к организации.
Про всё это и как такое сделать — в блоге крутейшего безопасника по AWS, Scott Piper:
https://summitroute.com/blog/2021/01/06/opting_out_of_aws_ai_data_usage/
В общем, всё как обычно — стоит читать мелкий шрифт в лицензионных соглашениях. 😀
#security
50.3 есть такая строчка:...we may store such AI Content in an AWS region outside of the AWS region where you are using such AI Service...
То бишь, ежели вы используете AI сервисы, то их данные могут быть сохранены вне региона, где вы работаете, что может нарушить compliance требования и про что хотя бы нужно знать.
На текущий момент AI сервисы это следующий список:
🔹 Amazon CodeGuru Profiler
🔹 Amazon CodeGuru Reviewer
🔹 Amazon Comprehend
🔹 Amazon Comprehend Medical
🔹 Amazon DevOps Guru
🔹 Amazon Forecast
🔹 Amazon HealthLake
🔹 Amazon Kendra
🔹 Amazon Lex
🔹 Amazon Lookout for Metrics
🔹 Amazon Personalize
🔹 Amazon Polly
🔹 Amazon Rekognition
🔹 Amazon Textract
🔹 Amazon Transcribe
🔹 Amazon Transcribe Medical
🔹 Amazon Translate
Амазону можно запретить использовать данные AI сервисов для улучшения их качества:
https://docs.aws.amazon.com/organizations/latest/userguide/orgs_manage_policies_ai-opt-out.html
Для этого нужно выполнить в management (главном) аккаунте специальные команды, которые добавят политики запрета к организации.
Про всё это и как такое сделать — в блоге крутейшего безопасника по AWS, Scott Piper:
https://summitroute.com/blog/2021/01/06/opting_out_of_aws_ai_data_usage/
В общем, всё как обычно — стоит читать мелкий шрифт в лицензионных соглашениях. 😀
#security
EC2 виртуалки — выбираем регион в Европе
На текущий момент в Европе уже есть 6 действующих регионов, а вскоре прибавется ещё парочка. Когда стоит вопрос о выборе региона, где размещать окружение, то обычно выбирают тот, который привычен. Исторически первым была Ирландия, после Франкфурт. Потому многие в наших широтах используют один из этих регионов, поднимая во Франкфурте, чтобы было "географически поближе" - пинг получше.
Однако ситуация меняется. На собственном опыте могу сказать, что появившийся два года назад Стокгольм давал пинг из Минска хуже, чем до привычного Франкфурта. Однако на текущий момент положение сильно изменилась — он теперь для меня однозначно лучший по пингу (в среднем на пару десятков процентов по сравнению следующим за ним Франкфуртом).
https://www.cloudping.info/
Вот характерная картинка, сделана прямо сейчас при написании поста, отражает обычный расклад (из Минска):
Вообще регионы по пингу подравнялись, частенько Париж и Лондон могут быть лучше Франкфурта. Потому у кого проекты локальные, т.е. не глобальные и нужно побыстрей из своей локации — стоит потестировать, прежние представления могут быть не верны.
Стоимость EC2
Однако есть ещё и стоимостной момент. Разброс цен на EC2 виртуалки есть и в купе с пингом вполне может заставить по-другому смотреть на выбор региона. Если взять Ирландию как 100% цены, то на текущий момент получается следующая картина:
Самый дорогой Франкфурт! Не знали, да? Я вот помнил, что он дорогой, однако уже подзабыл и считал самым дорогим недавно появившийся Милан. А вот и нет.
Однако интересно отметить относительно дешёвый Стокгольм. В случае Минска получается и дешевле и быстрей — хороший повод подумать. Особенно, если сидите во Фракфурте, то получаете при переезде в Стокгольм -10% в ценнике и при этом быстрей!
https://aws.amazon.com/ec2/pricing/on-demand/
Короче, всё течёт, всё меняется. И появляется повод сэкономить и ускориться!
#AWS_Region #cost_optimization #EC2
На текущий момент в Европе уже есть 6 действующих регионов, а вскоре прибавется ещё парочка. Когда стоит вопрос о выборе региона, где размещать окружение, то обычно выбирают тот, который привычен. Исторически первым была Ирландия, после Франкфурт. Потому многие в наших широтах используют один из этих регионов, поднимая во Франкфурте, чтобы было "географически поближе" - пинг получше.
Однако ситуация меняется. На собственном опыте могу сказать, что появившийся два года назад Стокгольм давал пинг из Минска хуже, чем до привычного Франкфурта. Однако на текущий момент положение сильно изменилась — он теперь для меня однозначно лучший по пингу (в среднем на пару десятков процентов по сравнению следующим за ним Франкфуртом).
https://www.cloudping.info/
Вот характерная картинка, сделана прямо сейчас при написании поста, отражает обычный расклад (из Минска):
Ireland 67 msLondon 49 msFrankfurt 46 msParis 57 msStockholm 34 msВообще регионы по пингу подравнялись, частенько Париж и Лондон могут быть лучше Франкфурта. Потому у кого проекты локальные, т.е. не глобальные и нужно побыстрей из своей локации — стоит потестировать, прежние представления могут быть не верны.
Стоимость EC2
Однако есть ещё и стоимостной момент. Разброс цен на EC2 виртуалки есть и в купе с пингом вполне может заставить по-другому смотреть на выбор региона. Если взять Ирландию как 100% цены, то на текущий момент получается следующая картина:
Stockholm 94.7%Ireland 100.0%London 103.5%Paris 103.5%Milan 105.0%Frankfurt 105.3%Самый дорогой Франкфурт! Не знали, да? Я вот помнил, что он дорогой, однако уже подзабыл и считал самым дорогим недавно появившийся Милан. А вот и нет.
Однако интересно отметить относительно дешёвый Стокгольм. В случае Минска получается и дешевле и быстрей — хороший повод подумать. Особенно, если сидите во Фракфурте, то получаете при переезде в Стокгольм -10% в ценнике и при этом быстрей!
https://aws.amazon.com/ec2/pricing/on-demand/
Короче, всё течёт, всё меняется. И появляется повод сэкономить и ускориться!
#AWS_Region #cost_optimization #EC2
CloudFormation vs Terraform
Впервые за время с появления Terraform, команда CloudFormation обогнала по количеству поддерживаемых ресурсов (664 ресурса) команду Terraform (654 ресурса).
Сверху — за последнее время, снизу — за всё время.
И вновь продолжается бой!
Первоисточник:
https://twitter.com/iann0036/status/1347381025723203585
#CloudFormation #Terraform
Впервые за время с появления Terraform, команда CloudFormation обогнала по количеству поддерживаемых ресурсов (664 ресурса) команду Terraform (654 ресурса).
Сверху — за последнее время, снизу — за всё время.
И вновь продолжается бой!
Первоисточник:
https://twitter.com/iann0036/status/1347381025723203585
#CloudFormation #Terraform
Forwarded from CloudTechRU
Забирайте бесплатный курс "Terraform - From Zero to Certified Professional. HashiCorp Certified: Terraform Associate and much more" от Дениса Астахова.
На русском у Дениса лучше выходит. Это как сериалы в переводе Кураж Бомбей смотреть, когда перевод лучше оригинала )
Ссылка доступна 3 дня.
https://www.udemy.com/course/terraformcertified/?couponCode=TERRAFORM-ON-ENGLISH
На русском у Дениса лучше выходит. Это как сериалы в переводе Кураж Бомбей смотреть, когда перевод лучше оригинала )
Ссылка доступна 3 дня.
https://www.udemy.com/course/terraformcertified/?couponCode=TERRAFORM-ON-ENGLISH
Udemy
Terraform - From Zero to Certified Professional
2023 HashiCorp Certified: Terraform Associate and much more