UndeRcode 2.0 - DevOps/AI
700 subscribers
365 photos
84 videos
7 files
329 links
DevOps, AI, IT - все самое интересное

По всем вопросам: https://xn--r1a.website/Fam1nor
Download Telegram
В Японии установили новый рекорд скорости интернета — 1 миллион гигабайт в секунду.

Этого хватит, чтобы загрузить 10 000 фильмов 4K всего за секунду. Авторы спроектировали для этого специальное волокно, в котором 19 каналов, работающих параллельно. Трафик хотят использовать для ИИ, VR и других технологий будущего.

Когда до нас дойдут технологии?
4😱1
ОКАК: Яндекс Карты внедрили новую технологию маршрутизации для пешеходов и велосипедистов — алгоритм теперь учитывает не только расстояние и скорость.

🟢Алгоритм анализирует по анонимным данным популярность маршрутов и больше не ведет короткими проходами через дворы, которые почему-то все обходят стороной.

🟢 Внедрили ML-модель, которая при расчете времени еще и учитывает рельеф, светофоры, повороты и даже время суток. Точность выросла на 45%.

Успели к началу сезона выкатить апдейты 🤩
Please open Telegram to view this post
VIEW IN TELEGRAM
👍1
26 сетевых протоколов, которые нужно знать

FTP (20/21, TCP) — Протокол передачи файлов: используется для передачи файлов между клиентом и сервером.

SFTP (22, TCP) — Защищённый протокол передачи файлов: FTP по SSH для безопасной передачи файлов.

TFTP (69, UDP) — Упрощённый протокол передачи файлов: простой, незащищённый протокол передачи файлов.

SSH (22, TCP) — Secure Shell: защищённый удалённый вход и выполнение команд.

TELNET (23, TCP) — Teletype Network: незащищённый удалённый вход и выполнение команд.

SMTP (25, TCP) — Простой протокол передачи почты: используется для отправки электронной почты.

SMTPS (587, TCP) — SMTP через TLS: SMTP поверх Transport Layer Security (TLS) для защищённой передачи электронной почты.

POP3 (110, TCP) — Post Office Protocol v3: получение электронной почты путём её загрузки с сервера.

POP3S (995, TCP) — POP3 через SSL: защищённый POP3 для получения электронной почты.

IMAP (143, TCP) — Протокол доступа к сообщениям Интернета: доступ к электронной почте напрямую на сервере.

IMAPS (995, TCP) — IMAP через SSL: защищённый IMAP-доступ к почте.

HTTP (80, TCP) — Протокол передачи гипертекста: незащищённый веб-сёрфинг.

HTTPS (443, TCP) — Безопасный протокол передачи гипертекста: защищённый веб-сёрфинг через SSL или TLS.

DNS (53, TCP/UDP)
— Система доменных имён: используется для преобразования доменных имён в IP-адреса.

DHCP (67/68, UDP) — Протокол динамической настройки хоста: используется для динамического назначения IP-адресов.

NTP (123, UDP) — Протокол сетевого времени: синхронизация часов по сети.

LDAP (389, TCP) — Протокол лёгкого доступа к каталогам: доступ и управление информацией каталогов.

LDAPS (636, TCP/UDP) — LDAP через SSL: используется для защищённого доступа к LDAP.

SNMP (161/162, UDP) — Протокол простого управления сетью: используется для мониторинга и управления сетевыми устройствами.

SYSLOG (514, UDP) — Системное логирование: протокол и система журналирования сетевых событий.

SMB (445, TCP) — Протокол серверных сообщений: совместное использование файлов и сетевые коммуникации.

SQL (1433, TCP) — Язык структурированных запросов (SQL): управление БД от Microsoft.

SQLNET (1521, TCP) — SQLNET (служба Oracle Network): обеспечивает взаимодействие клиентов Oracle SQL с сервером баз данных Oracle.

MySQL (3306, TCP) — MySQL: сервер базы данных MySQL.

RDP (3389, TCP/UDP) — Протокол удалённого рабочего стола: удалённый доступ к рабочему столу.

SIP (5060/5061, TCP/UDP) — Протокол установления сеансов: используется для управления мультимедийными сессиями связи.
🔥5
Время полезных шпаргалок: нашёл огромную шпаргалку по командам Linux на русском языке.

Тут собраны все основные команды и консольные утилиты Linux. Приятный бонус — можно скачать в формате PDF.

Автоматом летит в сохранёнки.
❤‍🔥3🔥2
🧠 Как узнать ВСЁ о железе и системе в Linux за 5 минут

Привет, линукс-мастер! 🐧

Хочешь быстро получить полную информацию о процессоре, памяти, дисках, устройствах USB и прочем железе в системе? Лови топ команд для диагностики без лишних движений:

⚙️ Системная информация
- uname -a — версия ядра и архитектура системы.

🖥️ Информация о железе
- lspci — список всех устройств на шинах PCI.
- lsusb — список USB-контроллеров и устройств.
- lshw — детальное описание железа.
- hwinfo — альтернатива lshw с расширенными данными.
- dmidecode — чтение таблицы DMI/SMBIOS (информация о BIOS, материнке, памяти).

🧠 Процессор и память
- lscpu — характеристики процессора.
- free -h — текущая загрузка ОЗУ.
- cat /proc/cpuinfo — подробности о CPU.

🛠️ Диски и файловые системы
- lsblk — список всех блочных устройств.
- blkid — метки разделов и UUID.
- fdisk -l, gdisk -l, parted -l — разметка дисков.
- df -h — свободное место на дисках.
- mount — список смонтированных разделов.

🔥 Дополнительно
- dmesg — лог загрузки ядра и сообщения устройств.
- hdparm -I /dev/sdX — характеристики жестких дисков.
- inxi -Fxz — сводный отчёт о системе и железе.

🛡️ Все команды работают в терминале, без GUI. Удобно для серверов, VPS и быстрой диагностики локальных машин.
🔥41
Памятка по командам в k8s. Мелочь, но на тестах без инета может выручить знатно :)
👍2💯1
Как можно получить $2500 от OpenAI

В кредитах на использование их через API.

Подавайтесь через сайт майкрософт:
https://www.microsoft.com/en-us/startups

- Срок: 6 месяцев, потом сгорает
- Дают даже под идею

Другие бонусы:
- $1000 на Azure Credits
- $25000 (или $700) для платежей через Stripe без комиссии
- $1500 на Miro
- Скидка 50% на Stripe Atlas
- GitHub Enterprise на год
- И еще куча всего

Решение по заявке — за 3 рабочих дня. Грант выдают примерно через неделю.

Делал в марте, как сейчас не знаю, но говорят все еще работает
❤‍🔥2🔥1
«Бесконечный» ИИ-агент Flowith Neo стал доступен для всех пользователей. Бот работает без ограничений по времени и задачам и помнит весь контекст.

Нейронка генерирует изображения, видео, речь, музыку и 3D-графику. Создаёт веб-страницы, сложные игры и даже управляет вашим браузером.

Пробуем здесь. Пригласительные коды больше не нужны.
👍2
Осталось 30 человек до раздачи следующего курса. Раздам в этот раз следующий курс от одной школы. Курс хороший, сам покупал и проходил, помогает быстро въехать в тему 🤟
🔥6
Ребята, курс грузится💪
Please open Telegram to view this post
VIEW IN TELEGRAM
🫡4🔥3
А пока я загружаю курс, можете пройти вот эту годноту

Основы сетевых технологий для разработчиков, DevOps и платформенных инженеров

Краткий курс с множеством иллюстраций по уровням Ethernet и IP (L2/L3) в компьютерных сетях. Включает множество практических лабораторных работ.

Забираем здесь
❤‍🔥4
AWK: Шпаргалка мастера — 15 команд, которые должен знать DevOps & Linux-администратор

1. Базовый вывод
Вывести первый столбец файла:
awk '{print $1}' file.txt

Извлекает и печатает первое поле из каждой строки.

2. Вывод определенных столбцов
Вывести 1-й и 3-й столбцы, разделенные -:
awk '{print $1 "-" $3}' file.txt

Полезно для обработки структурированных данных.

3. Разделитель полей (-F)
Вывести 1-й и 2-й столбцы из CSV-файла:
awk -F ',' '{print $1, $2}' file.csv

-F задает разделитель, здесь это запятая.

4. Фильтрация строк по шаблону
Найти строки, содержащие "error":
awk '/error/ {print}' log.txt

Работает как grep, но гибче

5. Фильтрация по значению столбца
Вывести строки, где 3-й столбец равен "admin":
awk '$3 == "admin"' users.txt

Быстрая фильтрация структурированных файлов.

6. Поиск по регулярному выражению
Вывести строки, где 2-й столбец содержит "fail":
awk '$2 ~ /fail/' log.txt

~ означает соответствие регулярному выражению.

7. Нумерация строк
awk '{print NR, $0}' file.txt

NR (Number of Record) добавляет номера строк.

8. Подсчет строк в файле
awk 'END {print NR}' file.txt

END выполняется после обработки всех строк.

9. Суммирование значений в столбце
Просуммировать все значения 2-го столбца:
awk '{sum+=$2} END {print sum}' data.txt

Агрегация числовых данных.

10. Поиск максимального значения в столбце
awk '$2 > max {max=$2} END {print max}' data.txt

Находит наибольшее число во 2-м столбце.

11. Вывод последней строки файла
awk 'END {print}' file.txt

Аналог tail -n 1, но гибче

12. Замена слова в файле
Заменить "error" на "warning":
awk '{gsub("error", "warning"); print}' log.txt

gsub выполняет глобальную замену.

13. Вывод только уникальных строк
awk '!seen[$0]++' file.txt

Удаляет дубликаты строк, как sort -u.

14. Вывод нечетных/четных строк
Вывести нечетные строки:
awk 'NR % 2 == 1' file.txt

Измените % 2 == 0 для четных строк.

15. Мониторинг логов в реальном времени
tail -f logfile | awk '/error/ {print}'

Онлайн-фильтрация логов
👍2
Сегодня еще будут результаты конкурса на консультацию. Проведу в 23-00 плюс-минус по МСК.
🔥1
🚀 Ультимативный ИИ гайд: как за 2 недели догнать передовые исследования в Искусственном Интеллекте

Структурированный гид от Генри Ши по самым важным материалам в сфере ИИ.

🎯 С чего начать:
• Neural Network → LLM Series от 3Blue1Brown

📚 Обзорные статьи 2024 года:
• LLM Survey (Февраль 2024)
• Agent Survey (2023)
• Prompt Engineering Survey (2024)

🔬 Ключевые исследования:

Базовые модели:
• Transformers (2017) - фундаментальная архитектура, self-attention
• Scaling Laws - масштабирование языковых моделей
• GPT-3 (2020) - фундаментальная модель
• LoRA (2021) - эффективная донастройка моделей
• Training Compute-Optimal LLMs (2022) - оптимальные
• RLHF (2022) - обучение с человеческой обратной связью
• DPO (2023) - исключаем RL/Reward модель
• LLM-as-Judge (2023) - на равне с человеческой оценкой
• MoE (2024) - микс экспертов

Рассуждения и планирование:
AlphaZero/MuZero (2017/2019) - RL без предварительных знаний
CoT (Chain of Thought) / ToT (Tree of Thoughts) / GoT (Graph of Thoughts) (2022/2023/2023) - цепочки рассуждений
ReACT (2022) - генерация рассуждений с действиями
• Let’s Verify Step by Step (2023) - процесс важнее результата
• ARC-Prize (2024) - новейшие методы решения ARC-AGI задач
• Scaling Test-Time Compute (2024) - отношение между скоростью инференса и pretraining compute

Практические применения:
• Toolformer (2023) - использование инструментов для LLM
• GPT4 (2023) - высокоуровневой обзор GPT4
• Llama 3 (2024) - детали архитектуры от Meta
• Gemini 1.5 (2024) - мультимодальность с контекстом 10M токенов
• DeepSeek v3 (2024) - создание топовой open-source модели
• SWE-Agent (2024) / OpenHands (2024) - агенты для разработки ПО

Бенчмарки:
• SWE-Bench (2023) - разработка в реальном мире
• Chatbot Arena (2024) - Elo рейтинги основанные на живых предпочтениях людей

🎓 Курсы и видео:
• 3Blue1Brown - математические основы
• Строим LLM с нуля #1 Бестселлер
• Andrej Karpathy: "Zero to Hero"
• Yannic Kilcher Paper Explanations
• Noam Brown (o1 founder) on Planning in AI
• Stanford: создание LLM
• Why You’re Not Too Old to Pivot Into AI (motivation)

🌐 Полезные ресурсы:
• Full Stack Deep Learning - курсы по созданию ИИ-продуктов
• Prompting Guide - техники промптинга с примерами
• 2025 AI Engineer Reading List - longer reading list, broken out by focus area
• State of Generative Models 2024 - саммери по текущим LLM

💡 Дополнительно:
• Vision Transformer (2021)
• Latent Diffusion (2021) - текст-в-картинку

👨‍💻 Научные статьи (для начинающих):
• Chain of Thought (2022)
• SELF-REFINE (2023)

Советую загружать каждую из статей по отдельности https://notebooklm.google/ и изучать - слушать подкаст, задавать вопросы и тп.

Ссылка на оригинальную статью: https://github.com/henrythe9th/AI-Crash-Course/blob/main/README.md
🔥1