AI: що таке той MCP?
Щось всі навколо тільки і говорять що про море про MCP – тож прийшов час і самому розібратись в темі. Отже, сьогодні розберемося з основними поняттями – “що воно взагалі таке”, потім напишемо власний “мікро-MCP сервер”, а в наступному пості – щось більш реальне, про роботу з VictoriaLogs. Contents - Обмеження LLM - And so……
https://rtfm.co.ua/ai-shho-take-toj-mcp/
#AI #MCP #Python
Щось всі навколо тільки і говорять що про море про MCP – тож прийшов час і самому розібратись в темі. Отже, сьогодні розберемося з основними поняттями – “що воно взагалі таке”, потім напишемо власний “мікро-MCP сервер”, а в наступному пості – щось більш реальне, про роботу з VictoriaLogs. Contents - Обмеження LLM - And so……
https://rtfm.co.ua/ai-shho-take-toj-mcp/
#AI #MCP #Python
RTFM: Linux, DevOps та системне адміністрування | DevOps-інжиніринг та системне адміністрування. Випадки з практики.
AI: що таке той MCP?
Розбираємось з Model Context Protocol - компоненти та архітектура, пишемо власний простий MCP-сервер, та підключаємо його до IDE
🔥13👍8👎1
AI: пишемо MCP-сервер для VictoriaLogs
В попередньому матеріалі розібрались з тим, що таке MCP взагалі, і створили дуже простенький сервер, який підключили до Windsurf – див. AI: що таке той MCP? Тепер – давайте спробуємо створити щось більш корисне, наприклад – MCP-сервер, який буде підключатись до VictoriaLogs та отримувати якісь дані. Насправді команда VictoriaMetrcis вже робить власний, тому тут ми…
https://rtfm.co.ua/ai-pishemo-mcp-server-dlya-victorialogs/
#AI #MCP #Python #VictoriaLogs
В попередньому матеріалі розібрались з тим, що таке MCP взагалі, і створили дуже простенький сервер, який підключили до Windsurf – див. AI: що таке той MCP? Тепер – давайте спробуємо створити щось більш корисне, наприклад – MCP-сервер, який буде підключатись до VictoriaLogs та отримувати якісь дані. Насправді команда VictoriaMetrcis вже робить власний, тому тут ми…
https://rtfm.co.ua/ai-pishemo-mcp-server-dlya-victorialogs/
#AI #MCP #Python #VictoriaLogs
RTFM: Linux, DevOps та системне адміністрування | DevOps-інжиніринг та системне адміністрування. Випадки з практики.
AI: пишемо MCP-сервер для VictoriaLogs
Продовження знайомства з Model Context Protocol - пишемо власний MCP-сервер на Python для роботи з VictoriaLogs
👍8❤1
AI: знайомство з Ollama для локального запуску LLM
Дуже хочеться покрутити якісь LLM локально, бо це дасть змогу краще зрозуміти нюанси їхньої роботи Це як знайомитись з AWS до цього не мавши справу з хоча б VirutalBox – робота з AWs Console чи API не дасть розуміння того, що відбувається під капотом. До того ж локальна модель – це безкоштовно, дасть змогу потюнити…
https://rtfm.co.ua/ai-znajomstvo-z-ollama-dlya-lokalnogo-zapusku-llm/
#AI #LLM #Ollama
Дуже хочеться покрутити якісь LLM локально, бо це дасть змогу краще зрозуміти нюанси їхньої роботи Це як знайомитись з AWS до цього не мавши справу з хоча б VirutalBox – робота з AWs Console чи API не дасть розуміння того, що відбувається під капотом. До того ж локальна модель – це безкоштовно, дасть змогу потюнити…
https://rtfm.co.ua/ai-znajomstvo-z-ollama-dlya-lokalnogo-zapusku-llm/
#AI #LLM #Ollama
RTFM: Linux, DevOps та системне адміністрування | DevOps-інжиніринг та системне адміністрування. Випадки з практики.
AI: знайомство з Ollama для локального запуску LLM
Знайомство з Ollama, запуск локальних моделей, зборка власної моделі з Modelfile та підключення з Roo Code
🔥7👍1
Arize Phoenix: сервіс моніторингу LLM – запуск в Kubernetes
Прийшла задачка підняти для проекту цікавий сервіс Arize Phoenix для моніторингу і тюнингу використання LLM. За сам сервіс багато не скажу, бо не користувався, але його запуск вийшов доволі цікавим. Що будемо робити – спочатку з Helm запустимо тестовий варіант, подивитись як воно взагалі виглядає, потім зробимо повноцінну автоматизацію – Terraform для всяких сікретів, Helm…
https://rtfm.co.ua/arize-phoenix-servis-monitoringu-llm-zapusk-v-kubernetes/
#AI #AWS #Helm #Terraform
Прийшла задачка підняти для проекту цікавий сервіс Arize Phoenix для моніторингу і тюнингу використання LLM. За сам сервіс багато не скажу, бо не користувався, але його запуск вийшов доволі цікавим. Що будемо робити – спочатку з Helm запустимо тестовий варіант, подивитись як воно взагалі виглядає, потім зробимо повноцінну автоматизацію – Terraform для всяких сікретів, Helm…
https://rtfm.co.ua/arize-phoenix-servis-monitoringu-llm-zapusk-v-kubernetes/
#AI #AWS #Helm #Terraform
RTFM: Linux, DevOps та системне адміністрування | DevOps-інжиніринг та системне адміністрування. Випадки з практики.
Arize Phoenix: сервіс моніторингу LLM – запуск в Kubernetes
Запуск Arize Phoenix для моніторингу LLM в Kubernetes - AWS Secrets з Terraform, деплой Phoenix з Helm, створення Kubernetes Secrets з External Secrets Operator
🔥6
Claude Code: створення Kubernetes debugging AI Agent для VictoriaMetrics
https://rtfm.co.ua/claude-code-stvorennya-kubernetes-debugging-ai-agent-dlya-victoriametrics/
#AI #Claude_Code #Kubernetes #VictoriaMetrics
https://rtfm.co.ua/claude-code-stvorennya-kubernetes-debugging-ai-agent-dlya-victoriametrics/
#AI #Claude_Code #Kubernetes #VictoriaMetrics
RTFM: Linux, DevOps та системне адміністрування | DevOps-інжиніринг та системне адміністрування. Випадки з практики.
Claude Code: створення Kubernetes debugging AI Agent для VictoriaMetrics
Створення Claude Code Markeplace та Claude Code Plugin з власним AI Agent для Kubernetes debugging з використанням VictoriaMetrics Skills
🔥14❤2
Hermes Agent: запуск AI Agent у FreeBSD Jail з Bastille
https://rtfm.co.ua/hermes-agent-zapusk-ai-agent-u-freebsd-jail-z-bastille/
#AI #FreeBSD #FreeBSD_Jails #Hermes_Agent
https://rtfm.co.ua/hermes-agent-zapusk-ai-agent-u-freebsd-jail-z-bastille/
#AI #FreeBSD #FreeBSD_Jails #Hermes_Agent
RTFM: Linux, DevOps та системне адміністрування | DevOps-інжиніринг та системне адміністрування. Випадки з практики.
Hermes Agent: запуск AI Agent у FreeBSD Jail з Bastille
Hermes Agent у FreeBSD Jail з Bastille - установка, налаштування залежностей та запуск AI-агента на домашньому NAS
🔥6👍2
LiteLLM: AI Gateway для LLM – overview можливостей
https://rtfm.co.ua/litellm-ai-gateway-for-llms-features-overview-2/
#AI #LiteLLM #LLM #monitoring #Security #VictoriaTraces
https://rtfm.co.ua/litellm-ai-gateway-for-llms-features-overview-2/
#AI #LiteLLM #LLM #monitoring #Security #VictoriaTraces
RTFM: Linux, DevOps та системне адміністрування | DevOps-інжиніринг та системне адміністрування. Випадки з практики.
LiteLLM: AI Gateway для LLM – overview можливостей
Перше знайомство з LiteLLM AI Gateway - запуск в Docker, OpenTelemetry трейси у VictoriaTraces, доступи та ліміти через Virtual Keys, Teams та бюджети
❤4
Claude Code: моніторинг з OpenTelemetry та VictoriaMetrics
https://rtfm.co.ua/v2draft-claude-telemetry/
#AI #Claude_Code #monitoring #VictoriaMetrics
https://rtfm.co.ua/v2draft-claude-telemetry/
#AI #Claude_Code #monitoring #VictoriaMetrics
RTFM: Linux, DevOps та системне адміністрування | DevOps-інжиніринг та системне адміністрування. Випадки з практики.
Claude Code: моніторинг з OpenTelemetry та VictoriaMetrics
Моніторинг Claude Code для Organization та managed settings - OpenTelemetry метрики, трейси й логи та VictoriaMetrics, VictoriaTraces і VictoriaLogs.
🔥9
LiteLLM: метрики, traces та інтеграція з VictoriaMetrics Stack
https://rtfm.co.ua/litellm-metrics-traces-victoriastack/
#AI #LiteLLM #monitoring #observability #VictoriaMetrics #VictoriaTraces
https://rtfm.co.ua/litellm-metrics-traces-victoriastack/
#AI #LiteLLM #monitoring #observability #VictoriaMetrics #VictoriaTraces
RTFM: Linux, DevOps та системне адміністрування | DevOps-інжиніринг та системне адміністрування. Випадки з практики.
LiteLLM: метрики, traces та інтеграція з VictoriaMetrics Stack
Налаштування збору метрик та traces з LiteLLM до VictoriaMetrics та VictoriaTraces. Важливі параметри LiteLLM, головні метрики та трейси і їхні атрибути.
🔥3
LiteLLM: моніторинг з VictoriaMetrics – алерти та Grafana
https://rtfm.co.ua/litellm-victoriastack-alerty-ta-grafana/
#AI #LiteLLM #monitoring #VictoriaMetrics
https://rtfm.co.ua/litellm-victoriastack-alerty-ta-grafana/
#AI #LiteLLM #monitoring #VictoriaMetrics
RTFM: Linux, DevOps та системне адміністрування | DevOps-інжиніринг та системне адміністрування. Випадки з практики.
LiteLLM: моніторинг з VictoriaMetrics – алерти та Grafana
Налаштування базового моніторингу AI Gateway LiteLLM з VictoriaMetrics - приклади створення алертів та Grafana dashboards.
🔥4
LiteLLM: OpenRouter та налаштування Fallbacks
https://rtfm.co.ua/litellm-openrouter-and-fallbacks/
#AI #LiteLLM
https://rtfm.co.ua/litellm-openrouter-and-fallbacks/
#AI #LiteLLM
RTFM: Linux, DevOps та системне адміністрування | DevOps-інжиніринг та системне адміністрування. Випадки з практики.
LiteLLM: OpenRouter та налаштування Fallbacks
Використання моделей в OpenRouter та налаштування Fallbacks та роутингу для LiteLLM
👍3
LiteLLM: метрики, traces та дебаг exception_class=”ValueError”
https://rtfm.co.ua/litellm-valueerror-victoriametrics/
#AI #LiteLLM #monitoring #observability #VictoriaMetrics
https://rtfm.co.ua/litellm-valueerror-victoriametrics/
#AI #LiteLLM #monitoring #observability #VictoriaMetrics
RTFM: Linux, DevOps та системне адміністрування | DevOps-інжиніринг та системне адміністрування. Випадки з практики.
LiteLLM: метрики, traces та дебаг exception_class=”ValueError”
Пошук причини exception_class="ValueError" в LiteLLM з VictoriaMetrics, VictoriaTraces і VictoriaLogs, та деякі нюанси створення LiteLLM метрик і трейсів
🔥5
llama.cpp: метрики та моніторинг з VictoriaMetrics
https://rtfm.co.ua/llama-cpp-victoriametrics/
#AI #llama_cpp #monitoring #VictoriaMetrics
https://rtfm.co.ua/llama-cpp-victoriametrics/
#AI #llama_cpp #monitoring #VictoriaMetrics
RTFM: Linux, DevOps та системне адміністрування | DevOps-інжиніринг та системне адміністрування. Випадки з практики.
llama.cpp: метрики та моніторинг з VictoriaMetrics
Налаштування моніторинг llama.cpp та LLM з VictoriaMetrics - основні метрики та деталі роботи з llama.cpp і /metrics
🔥3
LiteLLM: Traffic Mirroring та Batch Completions і трафік до двох провайдерів
https://rtfm.co.ua/litellm-traffic-mirroring-and-batch-completions/
#AI #LiteLLM #observability #OpenTelemetry #VictoriaTraces
https://rtfm.co.ua/litellm-traffic-mirroring-and-batch-completions/
#AI #LiteLLM #observability #OpenTelemetry #VictoriaTraces
RTFM: Linux, DevOps та системне адміністрування | DevOps-інжиніринг та системне адміністрування. Випадки з практики.
LiteLLM: Traffic Mirroring та Batch Completions і трафік до двох провайдерів
Практичний тест LiteLLM Traffic Mirroring та Batch Completions - два провайдери, дві відповіді й неочікувана поведінка логів і трейсів
🔥4
LiteLLM: Custom Callback для traffic mirroring та OTel tracing до VictoriaTraces
https://rtfm.co.ua/litellm-custom-callbacks-victoriatraces/
#AI #LiteLLM #LLM #LLMOps #monitoring #OpenTelemetry #Python #VictoriaTraces
https://rtfm.co.ua/litellm-custom-callbacks-victoriatraces/
#AI #LiteLLM #LLM #LLMOps #monitoring #OpenTelemetry #Python #VictoriaTraces
RTFM: Linux, DevOps та системне адміністрування | DevOps-інжиніринг та системне адміністрування. Випадки з практики.
LiteLLM: Custom Callback для traffic mirroring та OTel tracing до VictoriaTraces
Написання власного LiteLLM Custom Callback на Python для реалізації traffic mirroring на self-hosted LLM та налаштування OTel tracing з custom span до VictoriaTraces
LiteLLM: Custom Callback та LLM Evaluations з Judge LLM
https://rtfm.co.ua/llm-evaluation-with-judge-llm/
#AI #LiteLLM #LLM #LLMOps #observability #Python #VictoriaMetrics #VictoriaTraces
https://rtfm.co.ua/llm-evaluation-with-judge-llm/
#AI #LiteLLM #LLM #LLMOps #observability #Python #VictoriaMetrics #VictoriaTraces
RTFM: Linux, DevOps та системне адміністрування | DevOps-інжиніринг та системне адміністрування. Випадки з практики.
LiteLLM: Custom Callback та LLM Evaluations з Judge LLM
Реалізація Traffic mirroring та LLM Evaluations з LiteLLM і Judge LLM - оцінка відповідей self-hosted LLM, метрики у VictoriaMetrics та traces у VictoriaTraces
😎2❤1
LiteLLM: дебаг AI Cost Monitoring з VictoriaMetrics
https://rtfm.co.ua/litellm-llm-costs-debugging/
#AI #LiteLLM #LLM #LLMOps #OpenAI #OpenRouter #VictoriaMetrics #VictoriaTraces
https://rtfm.co.ua/litellm-llm-costs-debugging/
#AI #LiteLLM #LLM #LLMOps #OpenAI #OpenRouter #VictoriaMetrics #VictoriaTraces
RTFM: Linux, DevOps та системне адміністрування | DevOps-інжиніринг та системне адміністрування. Випадки з практики.
LiteLLM: дебаг AI Cost Monitoring з VictoriaMetrics
Приклад дебагу витрат на OpenAI та OpenRouter з LiteLLM AI Gateway та VictoriaMetrics і VictoriaTraces