DevOps Portal | Linux

Docker 101: Фоновые контейнеры, логи и потоки STDIO Продолжаем серию "Знакомство с Docker". В продакшене чаще всего приходится иметь дело с фоновыми контейнерами. Практикуемся в получении их логов и повторном подключении к потокам STDIO: https://labs.iximiuz.com/challenges/docker-101-container-run-in-background 👉 DevOps Portal

На Stepik вышла программа «DevOps с нуля: от Linux до Kubernetes» Это комплексная программа из 5 практических курсов по ключевым технологиям DevOps: Linux, Git, Docker, GitLab CI/CD, Kubernetes Вы последовательно пройдёте путь от работы в Linux и управления…

Как получить доступ к сервису, запущенному на Docker-хосте, из контейнера? Продолжаем серию про Docker Networking. Если известен IP-адрес одного из сетевых интерфейсов хоста, всё просто. Но что делать, если он неизвестен? Задача 1: https://labs.iximiuz.com/challenges/docker-networking-connect-app-to-host-service Задача 2: https://labs.iximiuz.com/challenges/docker-networking-reach-host-service-bound-to-localhost 👉 DevOps Portal

В этом туториале показано, как мигрировать кластер EKS с выведенного из эксплуатации контроллера ingress-nginx на Gateway API. Разбираются CRD контроллера AWS Load Balancer Controller и переключение трафика без простоя (zero-downtime). ➜ https://medium.com/@douglas0n/migrating-from-ingress-nginx-to-gateway-api-on-eks-0a514952e91b 👉 DevOps Portal

Fluentd vs Fluent Bit: что выбрать для Kubernetes? Краткое сравнение 👇 Fluentd: - Полноценный инструмент для обработки логов. - Написан на Ruby (с расширениями на C). - Справляется с высокими нагрузками и сложной маршрутизацией логов. - Лучше всего подходит для централизованного сбора и обработки логов. - Потребляет больше ресурсов (CPU и памяти). Используйте Fluentd, если вам нужны продвинутые возможности фильтрации, парсинга и маршрутизации логов в больших масштабах. Fluent Bit: - Легковес…

В этом кейсе рассказывается, как платёжная компания перестроила процесс деплоя на Kubernetes, внедрив GitOps с Argo CD. Теперь каждое изменение в продакшене оформляется в виде Git-коммита, который проходит код-ревью, а подготовка к аудитам PCI перестаёт быть гаданием. ➤ https://dodopayments.com/engineering/deployment-pipeline-gitops-argocd-kubernetes 👉 DevOps Portal

Подготовлены две новые практические задачи для освоения сетевого взаимодействия контейнеров: Лёгкая: перенаправить запросы контейнера без изменения кода приложения — https://labs.iximiuz.com/challenges/docker-networking-redirect-app-to-request-sink Сложная: перехватить и проанализировать зашифрованный трафик подозрительного контейнера — https://labs.iximiuz.com/challenges/docker-networking-intercept-encrypted-traffic Удачного хакинга! 👉 DevOps Portal

DevOps-инструмент недели: Kubetail Отладка по логам нескольких подов Kubernetes может быть неудобной. Приходится запускать kubectl logs, переключаться между подами и разбираться, что пошло не так. Ситуация усложняется, когда у приложения несколько реплик. Здесь на помощь приходит Kubetail — опенсорсный дашборд для просмотра логов Kubernetes в реальном времени, который позволяет собирать логи нескольких подов в одном интерфейсе. Основные возможности: • Просмотр логов нескольких подов и контей…

На Stepik вышла программа «DevOps с нуля: от Linux до Kubernetes» Это комплексная программа из 5 практических курсов по ключевым технологиям DevOps: Linux, Git, Docker, GitLab CI/CD, Kubernetes Вы последовательно пройдёте путь от работы в Linux и управления кодом через Git до контейнеризации приложений, настройки CI/CD-пайплайнов и развёртывания в Kubernetes. Что вы изучите: • работу с Linux и командной строкой • Git и контроль версий в реальных проектах • создание Docker-образов и запуск кон…

ИИ-агенты для DevOps-инженеров: объяснение принципов работы ИИ-агенты становятся важной частью DevOps и платформенной инженерии. Но прежде чем создавать собственного агента, необходимо разобраться, что именно делает приложение агентом. В отличие от традиционного приложения, которое следует фиксированному набору инструкций, ИИ-агент может самостоятельно решать, что делать дальше, на основе полученной информации. В одном из недавних выпусков рассылки разобрали ключевые концепции ИИ-агентов, вкл…

В этом туториале показано, как развернуть мультитенантную платформу Apache Spark в Kubernetes с использованием Spark Operator, Volcano, Helm, Airflow, общих образов, ограничений на рабочие нагрузки и мониторинга. ➜ https://medium.com/towards-data-engineering/building-a-production-grade-apache-spark-platform-on-kubernetes-2984e083dd71 👉 DevOps Portal

Yahont - полноценная опенсорс-платформа для корпоративного поиска и ИИ-агентов, ориентированная на быстрое развертывание внутри периметра компании Знания команды разбросаны по различным источникам и приложениям, а отдавать их на обработку внешнему ИИ-сервису не всегда можно. Yahont ищет по всем вашим источникам и отвечает со ссылками на документы. Работает у вас на сервере в Docker Compose. Что умеет👇 - Подключается к Confluence, Jira, GitHub, GitLab, Google Drive, Gmail, Яндекс Почта/Диск, Ma…

Сетевые основы 101: Как работает маршрутизация трафика Знаете ли вы, что компьютеры могут обмениваться данными только с соседями (участниками одной подсети)? Но как тогда мы передаём пакеты через Интернет? Именно здесь вступает в игру маршрутизация. Узнайте больше: https://labs.iximiuz.com/challenges/networking-configure-basic-routing 👉 DevOps Portal

DevOps-инструмент недели: kube-green Окружения для разработки и тестирования часто работают 24/7, даже когда ими никто не пользуется. В результате простаивающие поды продолжают работать по ночам и выходным, а инфраструктура продолжает потреблять деньги. Можно написать скрипты, которые будут ежедневно масштабировать рабочие нагрузки до нуля, а затем восстанавливать их. Но управлять этим в нескольких неймспейсах может быть непросто. Здесь на помощь приходит kube-green. kube-green — опенсорсны…

Изучение Linux через устранение неполадок на серверах Подборка практических сценариев по диагностике и устранению проблем, которые помогут прокачать навыки работы с Linux: - Демон отправки логов, который не запускается — https://labs.iximiuz.com/challenges/linux-strace-failing-daemon - Демон конвертации изображений с отсутствующими зависимостями — https://labs.iximiuz.com/challenges/linux-missing-shared-library - Воркер-сервис, который постоянно исчезает — https://labs.iximiuz.com/challenges/l…

В этом кейсе показано, как WSC Sports полностью перестроила модель деплоя: от пайплайнов с helm upgrade до полноценного GitOps на базе ArgoCD ApplicationSets. Рассматриваются: - Архитектура монорепозитория с единым Helm-чартом; - Теневые деплои; - AppProjects; - Механизмы заморозки кода в CI. ➜ https://medium.com/@elad320011/gitops-at-enterprise-scale-inside-wsc-sports-deployment-platform-5ee373431309 👉 DevOps Portal

Kubernetes: Client-Side Apply vs Server-Side Apply При выполнении команды kubectl apply по умолчанию используется Client-Side Apply (CSA). При использовании Client-Side Apply утилита kubectl анализирует манифест, ранее применённую конфигурацию и текущее состояние объекта в кластере. На основе этих данных kubectl определяет, что изменилось, и отправляет необходимый патч на API-сервер Kubernetes. Server-Side Apply (SSA) работает иначе. При выполнении команды kubectl apply --server-side операц…

DevOps-инструмент недели: Popeye Со временем в Kubernetes-кластерах могут накапливаться неиспользуемые ресурсы: например, ConfigMaps и Secrets, которые больше никому не нужны, или Services, не связанные ни с одним Pod. Сегодня они могут не вызывать проблем, но со временем способны привести к сбоям, уязвимостям в безопасности и неэффективному расходованию ресурсов. Искать такие ресурсы вручную по всем namespaces неудобно. Здесь и помогает Popeye. Popeye — опенсорсный инструмент от создателя k…

Интересный и полезный опенсорс-инструмент Как часто приходилось открывать консоль AWS и другие инструменты, чтобы ответить на простые вопросы: - У каких ресурсов отсутствуют обязательные метки? - Есть ли хранилища, доступные публично? - В каких неймспейсах Kubernetes отсутствуют NetworkPolicy? И так далее... Ответы на эти вопросы есть, но для их поиска часто приходится переключаться между сервисами, проверять несколько аккаунтов или писать скрипты. А что, если на эти вопросы можно было бы отв…

В этом туториале показано, как разворачивать и масштабировать большие языковые модели (LLM) в Kubernetes с помощью KServe, использовать KEDA для масштабирования в зависимости от нагрузки и запускать инференс через vLLM ➜ https://medium.com/@sowmithdurusoju/serving-llms-at-scale-a-practical-guide-with-kserve-keda-vllm-kubernetes-e93ba6b1a65e 👉 DevOps Portal