​​AWS re:Invent 2021 — DevOps and Developer Productivity

https://www.youtube.com/playlist?list=PL2yQDdvlhXf8IJuIGCoPbO2HXxWFFml8Z

1 Using feature flags to avoid downtime during migrations
2 The journey from telemetry to business metrics
3 OutSystems and AWS: The modern application platform for the cloud
4 On AWS, details matter: Why full-stack observability wins
5 Deploying container applications with cloud-native CI/CD pipelines
6 Enterprise networking and SD-WAN with Cisco and AWS
7 Enabling decentralized development teams with a shared services platform
8 Incorporating continuous resilience in your development ecosystem
9 Observing your applications from development through production
10 Write, deploy, and provision cloud resources with AWS Developer Tools
11 Infrastructure as code and modern data resilience on AWS
12 Modern and confident: DevSecOps for enhanced cloud security
13 Slack is the digital HQ for AWS developers and DevOps teams
14 How to reuse patterns when developing infrastructure as code
15 Amazon Builders' Library: Operational Excellence at Amazon
16 Best practices for securing your software delivery lifecycle
17 Building with the new AWS SDKs for Rust, Kotlin, and Swift
18 Cloud-native operations: Agility and speed through distributed ownership
19 Automating cross-account CI/CD pipelines [repeat]
20 Automating cross-account CI/CD pipelines [repeat]
21 What's new with AWS CloudFormation and AWS CDK
22 DevOps revolution [repeat]

#reInvent #videos #devops

​​Reminder, AWS Tech Conference June 30 Online, and great news - now with Dr. Werner Vogels himself!

Hey there! With our friends from AWS User Group, we want to invite you to a special AWS Tech Conference #StandWithUkraine🇺🇦

🔥Dr. Werner Vogels, CTO at Amazon will be a keynote!
He’ll talk about Next-Gen Cloud Computing.

Also, 12 speakers from AWS, AWS User Groups, AWS heroes and Ukrainian AWS professionals will talk about #DevOps, #data та #backend.

Some of the topics: scaling AWS Infrastructure, enabling public API in days with AWS Athena, AWS WAF & Firewall Manager, Serverless patterns, IT transformation in multi-cloud era, choosing the right data store.

When? June 30
Where? Online

How to join?
👉🏻Register for free: https://bit.ly/3HFXw4u

OR buy a charity ticket - all profit will go to Ukrainian charity funds.

​​A very useful set of ready-made instructions for devops on AWS:

https://docs.aws.amazon.com/prescriptive-guidance/latest/patterns/welcome.html

All popular topics with specific implementation steps:

🔸Analytics
🔸Cloud-native
🔸Containers & microservices
🔸Cost management
🔸Data lakes
🔸Databases
🔸DevOps
🔸End-user computing
🔸Hybrid cloud
🔸Infrastructure
🔸IoT
🔸Machine learning & AI
🔸Management & governance
🔸Messaging & communications
🔸Migration
🔸Modernization
🔸Networking
🔸Operating systems
🔸Operations
🔸Security, identity, compliance
🔸Serverless
🔸Software development & testing
🔸Storage & backup
🔸Websites & web apps

#devops

Несколько месяцев как учу студентов AWS DevOps. С нуля, то есть совсем — абсолютно без опыта, да ещё и без желания учиться. 😀

Какие выводы сделал для себя, перелопатив кучи материалов, просмотрев сотни часов видео, курсов на бесплатных и платных платформах.

🔸 У новичков (кто реально с нуля) шансов найти что-то адекватное по столь популярной теме DevOps (специфика AWS уже вторично):

▪️ из бесплатного-доступного — шансов 0-5%
▪️ из платного — 10-15%

🔸 Научить с полного нуля можно кого угодно — опыт, прошлое образование, пол не имеют значения — это факт.

🔸 Рулят у студентов не способности, интеллект и прочие "этому дано", а самоконтроль и целеустремлённость.

🔸 Вариант самообразования — любые курсы платные/бесплатные и т.п. — подходят лишь ~15%. Остальные 85% без самоконтроля и вдолгую, в результате просто оставят негативные комментарии о желающих лишь заработать на них преподавателях, школах, курсах, академиях и т.д. Причём тоже будут правы и примерно с тем же раскладом.


Преподавательского опыта не было совсем, вышеописанные оценки сделаны больше со стороны студентов, к которым и отношу и себя, лишь с поправкой "с опытом".

#devops #курсы

В продолжение темы по обучению AWS DevOps совсем начинающих зафиксирую для себя некоторые выводы по материалу и инструментам.

▪️ Пожалел, что давал сначала Linux и спустя некоторое время добавил сети. Для совсем нулей нужно начинать сразу и то и то, либо даже сначала лишь сети.

▪️ Был прав, что практически с самого начала стал давать Terraform (@ThomasStorm, сначала кратко, но был CloudFormation, чеслово! 😀) — даже без понимания основ, привычка у студентов мыслить и действовать в рамках IaC рулит.

▪️ С первого урока использовал CloudShell как базовый инструмент.
➕ Плюсы: CloudShell — лучший способ сразу подружиться и с AWS Console, и с Linux, и с AWS CLI/Terraform/CDK.
➖ Минусы — привыкают и всё делают через CloudShell, у которого есть некоторые ограничения по сравнению с обычными виртуалками.

▪️ Linux учили на RedHat, чтобы после было легче освоить Amazon Linux. Получилось проще, да, но можно-нужно сразу давать Amazon Linux.

▪️ Cети по курсам подготовки к CCNA — вне конкуренции, лишь нужно отсеивать вещи чисто по Cisco.

▪️ Адекватной информации на русском мало, но студенты однозначно предпочитают материал на родном, даже имея английский на intermediate уровне.

▪️ Адекватной информации на русском мало, но по некоторым темам она таки есть и местами даже самая лучшая.

▪️ Материалы на английском необходимо отбирать по произношению — нэйтив спикеры чаще хуже для понимания, нежели материал от не носителей языка.

▪️ Чем больше в курсе анимации, тем обычно он качественнее и круче.

Потому лайфхак для тех, кто выбирает платные курсы — смотрите, сколько там мультиков. Именно мультиков, то бишь анимации (причём не спецэффектов и не видео) — значит автор вложился и это точно будет круто, если вы как раз с нуля.

#devops

AWS DevOps для совсем начинающих

Вы почему-то решили (захотели, пришлось) стать девопсом. Не я вам судья 😀, но могу рассказать про Top10, что нужно изучить.

1️⃣ Networking
2️⃣ Linux
3️⃣ Git
4️⃣ Bash
5️⃣ Python или/плюс другой язык
6️⃣ IaC — Terraform или/плюс AWS CDK/CloudFormation
7️⃣ Containers — Docker и после Kubernetes
8️⃣ CI/CD — Jenkins или другие CI инструменты
9️⃣ Архитектура и подходы к проектированию
🔟 Agile и процессы в организации

Другие вещи — базы данных, безопасность и прочие обязательные для DevOps элементы также подразумеваются, но думаю, что и этих 10 достаточно, чтобы испугаться и передумать. 😁

В любом случае поделюсь опытом по подбору материала для новичков. Не знаю как такое подойдёт именно для самостоятельного изучения, ибо искал именно материал на основе которого можно научить, то бишь предполагается фильтрация и разъяснение. Очень редкие вещи в чистом виде можно дать на изучение — реально лишнее отбивает желание учиться, т.к. реально непонятно даже продвинутому, а новички-то думают, что это они тормоза и не могут знать, что это авторы курсов несут какую-то дичь.

1. Networking

Сети, если не было опыта и нет понимания — номер один в этом списке. После уже Linux и остальные. Нумерация выше была условная, но сети и линуксы — выделяются как реально главное. И то, с чего нужно начинать.

Что читать-смотреть-изучать по сетям. Рекомендую начать с ICND1 — начальная часть подготовки к Cisco сертификации CCNA. Это не для того, чтобы бегать с бухтой по офису с кусачками в руках. Это потому что у Cisco давно отработанный процесс обучения с нуля обслуживанию их сложной техники и нам как раз подойдёт начальная часть, где лишь потребуется выкинуть чисто Cisco специфику типа настройки их конкретных маршрутизаторов, ОС и других специфичных вещей.

Например, использовал следующий список курсов:

▪️ Cisco CCNA / ICND1 (100-105) Complete Course: Sims and GNS3 - Part 1
▫️ https://learning.oreilly.com/videos/cisco-ccna/9781838646028/

С этого отлично начать совсем нулям в сетях — здесь не бьют сходу наотмашь сразу всеми семью "осями" 😀 прямо на первом же уроке. Лёгкие и понятные мультики вводят в курс.

Правда после автор, наверняка не любивший математику, предлагает свою особую методологию исчисления подсетей, а нам такая специфика вообще незачем, потому это правильно пропустить.

Альтернативный вариант, где как раз классически сразу берут быка за OSI:

▪️ CCENT ICND1 100-105
▫️ https://www.oreilly.com/videos/ccent-icnd1-100-105/9780134664330/

Конечно, есть кучи других способов разобраться с сетями, в том числе на русском, например:

▪️ Сети для самых маленьких.
▫️ https://linkmeup.ru/blog/1188/

На самом деле название слишком громкое и тут снова сходу OSI в полный рост со всей братией. Если это не пугает — можно попробовать.

Есть также кучи отдельных видео от реально талантливых людей, но так, чтобы полноценный курс, по которому можно спрашивать и объяснять, при этом не академический и убийственный для новичков — не шибко много нашёл. Буду признателен, если подскажете бесплатные и доступные к просмотру варианты. При этом легальные, например, видео с O'Reilly доступно в РБ/РФ и можно посмотреть бесплатно некоторое время, чтобы понять, подойдёт тебе этот курс или нет.

#devops #начинающим

AWS DevOps — Networking

В дополнение по сетям, а заодно, чтобы показать, как выглядят качественные курсы "с мультиками".

Andrian Cantril пару месяцев назад стал активно выкладывать свои видео в открытый доступ:

https://www.youtube.com/c/LearnCantrill

В частности по Networking там уже два десятка видео:

1 Intro into networking fundamentals.
2 Networking Fundamentals: OSI 7 - Layer 1 - the physical layer
3 Networking Fundamentals: OSI 7 - Layer 2 - the data link layer - Part 1
4 Networking Fundamentals: OSI 7 - Layer 2 - the data link layer - Part 2
5 Networking Fundamentals: OSI 7 - Layer 3 - the network layer - Part 1
6 Networking Fundamentals: OSI 7 - Layer 3 - the network layer - Part 2
7 Networking Fundamentals: OSI 7 - Layer 3 - the network layer - Part 3
8 Decimal to Binary Conversion (IP Addressing)
9 Networking Fundamentals: OSI 7 - Layer 4&5 - Transport & Session Layers - Part 1
10 Networking Fundamentals: OSI 7 - Layer 4&5 - Transport & Session Layers - Part 2
11 Networking Fundamentals: Network Address Translation (NAT) - PART2
12 Networking Fundamentals: Network Address Translation (NAT) - PART1
13 Stateful vs Stateless Firewalls
14 IP Sec VPN Fundamentals
15 Jumbo Frames and MTU
16 Fibre-optic Cables 101
17 BGP Communities
18 Application (Layer 7) Firewalls - What they are and how they work

https://www.youtube.com/watch?v=6hPMdpk9qA4&list=PLTk5ZYSbd9Mi_ya5tVFD8NFfU1YZOyml1

Сам не видел его полные-платные курсы, потому не могу комментировать, но люди, кому доверяю, их категорически советуют. Оценивая то, что у него есть на YouTube, могу сказать, что это очень качественный материал.

Однако, всё же, Cisco курсы из прошлого поста для тех, кто с нуля, определённо лучше и этот playlist правильней смотреть после них, например, для закрепления материала. Ну, или тем, кто уже имеет какой-то опыт и кто не вздрагивает при упоминании OSI Layers. 😁

p.s. В дополнение там же у него по сетям есть playlist Advanced Networking из которого стоит взять также A Deep Dive into AWS Transit Gateway и Advanced VPC Routing in AWS.

#devops #начинающим #networking

AWS DevOps — Linux

Linux вместе с сетями — главное для DevOps вообще и для начинающих есть то, с чего следует начинать. Упоминал, что если совсем уж нет представления о сетях — лучше начать с них. Если же есть какие-то знания-опыт — начинаем с Linux.

Учитывая тот факт, что Amazon Linux построен на базе RedHat, даю и рекомендую изучать Linux на базе подготовки к сертификации RHCSA:

https://www.redhat.com/en/services/certification/rhcsa

Курсов для подготовки к нему много и не стоит пугаться, что в описании ко многим указывается что-то типа "год опыта работы системным администратором". Во-первых, это не так. 🙂 Во-вторых, главное — какая-то система, план подачи материала, лабы, охват работы Linux с разных сторон.

Конечно же крайне важно сразу совмещать с практикой, но для совсем начинающих возникает проблема курицы и яйца — чтобы знать, нужно практиковаться, а чтобы практиковаться, нужно хоть что-то знать. Потому на первом этапе лабы (их наличие) критично. Простые, понятные, легко выполняемые, повторимые.

Пересмотрев немало курсов, рекомендую для начинающих курсы по Linux от Sander van Vugt — он даёт их больше двадцати лет и это не просто так. Например, здесь:

https://www.oreilly.com/videos/red-hat-certified/9780135656495/

Они не идеальны, но отработаны, есть чёткая программа, что критично именно для тех, кто с нуля. У других есть крутые вещи, но подавляющее большинство изначально предполагает наличие знаний/опыта у обучающегося.

Альтернативой может быть подготовка к сдаче сертификации на LFCS:

https://training.linuxfoundation.org/certification/linux-foundation-certified-sysadmin-lfcs/

Особых отличий у них реальности нет, а курс LFCS от вышеупомянутого автора в реальности полная копия его курса для RHCSA с упоминанием Ubuntu в одном из уроков на пару минут. 😀

После прохождения основного курса по Linux (даю с ориентацией именно на облака/AWS, потому выбрасываю или проходим лишь для информации чисто локальное применение и специфику RedHat инструментов), очень рекомендую его же курс Linux Under the Hood — при некоторой сложности полезен для новичков, т.к. объясняет важные вещи (и даже знающим может быть полезен).

Ещё раз отмечу, что по Linux в интернете много всего, однако стройной, доступной именно с нуля и при этом относительно компактной программы, не обнаружил и вышеперечисленные ближе именно к такому желаемому варианту. Опять же автор из Нидерландов и у него понятный английский даже совсем начинающим в нём.

В дополнение на YouTube из моря по Linux вообще и RHCSA в частности посоветую этот канал:

https://www.youtube.com/c/theurbanpenguin/search?query=rhcsa

p.s. Напишите, пожалуйста, ваши рекомендации по изучению Linux для начинающих с нуля — мне и многим другим точно будет полезно. 😀

#devops #начинающим #linux

Не изобретайте велосипед — просто используйте контейнеры и запускайте проект!

#курсы #devops #пятничное

​​ChatGPT-3 для DevOps и обучения DevOps

Если вы ещё не пробовали использовать ChatGPT-3, то обязательно попробуйте:

https://chat.openai.com/

Возможности его можно посмотреть в многочисленных обзорах, тут же хочу отметить кратко рассказать о применимость для DevOps как с точки зрения уже работающего в этой сфере, так и с позиции кандидата, изучающего DevOps или с нуля начинающего изучать эту тему.

Всех девопсов скоро заменят на ИИ

Краткий ответ — нет. Развёрнутый — нет, всех не заменят. 😁

Грядут серьёзные изменения

Если же серьёзно, то мы находимся в точке резкого увеличения производительности труда, радикального изменения во многих сферах обучения, когда классические методы образования будут вынуждены приспособиться к ещё на порядок увеличившейся простотой доступа к информации.

Это приведёт к изменениям в процессе найма, если процесс происходит удалённо, т.к. задавать по чеклисту вопросы будет малоэффективно ввиду слишком большого количества способов на них получить адекватный ответ в ChatGPT.

PromptOps

На первый план при использовании ChatGPT выходит то, как вы умеете спрашивать, то есть формировать запрос. Тут ведь вопрос уже не половина, а 100% ответа, а правильно поставленный запрос даст не только адекватный, но и качественный ответ.

Уже совсем скоро негодование по поводу поверхностности знаний начинающих перейдёт на новый уровень, т.к. теперь часть работ можно выполнять вообще без знаний — ведь всё можно спросить у ChatGPT-3.

Незачем гуглить ошибку и читать StackOverfllow — вставляем в ChatGPT-3, который поймёт из неё контекст, напишет когда и почему так бывает, а также даст ответ. Если это нельзя сделать — так и напишет, что может быть особенно полезно.

ChatGPT-3 говнокодит не точен

Это правда, ChatGPT-3 ошибается, по опыту оценю ошибки в 10-15%+. Главное — он хорошо генерирует конструкции, на базе которых уже можно сделать нужное, что особенно круто для самообучения (к тому же он всегда поясняет что-как работает).

Крутые вещи ChatGPT-3 для DevOps

▫️ Объяснение ошибок
▫️ Конвертация скриптов из одного языка программирования в другой
▫️ Генерация случайных данных для тестов в любом формате
▫️ Сравнение продуктов/подходов/технологий с аргументаций плюсов и минусов, рекомендаций выбору и подведению выводов
▫️ Поможет придумать имя переменной (постоянно использую 😁)

ChatGPT-3 напишет за вас

➖ Контракт о найме
➖ Письмо шефу с просьбой о повышении зарплаты
➖ Объяснительную, почему упал прод
➖ Резюме

Недостатки ChatGPT-3

▫️ Он не в курсе о том, что было в этом и прошлом году, т.к. был натренирован на данных до 2021-го года
▫️ Он хорош в конкретных областях, крут в генерации идей, но этим и может быть плох — он может придумать то, чего не знает.

p.s. ChatGPT-3 доступен не во всех странах (без дополнительных усилий), с 18 февраля стал официально доступен в Украине. 🇺🇦

#chatgpt #devops

Универсальные ответы для собесов по DevOps

... Что ...?

— «Docker» (40%)
— «Kubernetes» (40%)
— «Зависит от контекста» (20%)


... Почему?

— «Так исторически сложилось» (100%)

#devops #design

Вот у меня также, только 200 лет и вопрос про что такое девопс.

https://www.youtube.com/watch?v=eSqexFg74F8

#devops #interview #пятничное

It works.

#devops #friday

📚 Два главных документа которые должен знать каждый грамотный AWS DevOps Engineer:

1️⃣ AWS CAF (AWS Cloud Adoption Framework)
2️⃣ AWS WAF (Well-Architected Framework)

Это немалый объём и в реальности не два документа. Но это база. © Настоящая база, которая не про айноды. 😁

Можно спорить про применимость это для начинающих, хотя WAF (не который firewall) точно показан с самого начала и в режиме pocket book на все случаи.

Обязательно рекомендуется продвинутым. Особенно, если нужно прокачаться в ширину, а не глубину.

#design #CAF #WAF #devops

​​Не сомневайтесь, у вас всё получится.

#DevOps

AI + DevOps = не всё так однозначно

Исследование показало, что AI-инструменты увеличивают количество ошибок и уязвимостей в коде. Основная проблема заключается в том, что качество генерируемого кода не всегда соответствует профессиональным стандартам, что требует тщательной проверки людьми.

https://devops.com/study-finds-no-devops-productivity-gains-from-generative-ai/

В общем, коллеги, можно расслабиться, всех не уволят. А если и уволят, то не всех. Но это не точно.

#DevOps #AI

AI заменит девопсов.

Потребуется лишь детально и точно описать, как разворачивать и поддерживать инфраструктуру и безопасность, как собирать и выкатывать билды, чего хотят разработчики и тестировщики, менеджеры и клиенты.

И всё. После этого всех уволят.

#AI #DevOps

Разработчикам про DevOps.

https://www.youtube.com/watch?v=7O1eUI744Ng

В том числе узнаете:

▫️ Правильное определение DevOps — что от вас скрывали.
▫️ Как бесплатно использовать AWS годами.
▫️ Кого заменит AI и когда. Спойлер: всех не заменят!

#video #DevOps