В этом переводе рассказываем о том, как настроить автомасштабирование контроллера Ingress с использованием Prometheus, KEDA и Locust для генерации трафика.
Чтобы настроить автомасштабирование на основе входящих запросов, необходимо следующее:
Метрики (например, количество запросов в секунду).
Коллектор метрик (для хранения метрик).
Автоскейлер (для обработки данных).
Давайте начнём с метрик.
Можно настроить nginx-ingress для отображения метрик Prometheus. Для подсчета количества активных запросов можно использовать nginx_connections_active.
Далее необходимо найти способ получения метрик. Как вы уже догадались, для этого можно установить Prometheus. Поскольку Nginx-ingress использует аннотации для Prometheus, я установил сервер без оператора Kubernetes.
$ helm repo add prometheus-community https://prometheus-community.github.io/helm-charts
"prometheus-community" has been added to your repositories
$ helm install prometheus prometheus-community/prometheus
NAME: prometheus
NAMESPACE: default
STATUS: deployed
REVISION: 1
TEST SUITE: NoneЯ использовал Locust для генерации трафика на Ingress, чтобы проверить, все ли работает гладко. Открыв приборную панель Prometheus, я проверил, что метрики увеличиваются по мере увеличения трафика на контроллере.
Последним пазлом стал автоскейлер. Я решил выбрать KEDA, потому что:
Это автоскейлер с сервером метрик (поэтому мне не нужно устанавливать два разных инструмента).
Он проще в настройке, чем адаптер Prometheus.
Я могу использовать Horizontal Pod Autoscaler с PromQL.
После установки KEDA мне оставалось только создать объект ScaledObject, настроить источник метрик (Prometheus) и масштабировать подсистемы (с помощью запроса PromQL).
KEDA автоматически создает для меня HPA. Я повторил тесты с Locust и наблюдал, как увеличивается количество реплик по мере увеличения трафика на контроллере Nginx Ingress!
Можно ли распространить этот паттерн на любое другое приложение? Можно ли автомасштабировать все микросервисы по количеству поступающих запросов?
Если они не предоставляют метрики, то ответ отрицательный. Однако существует обходной путь.
KEDA поставляется с HTTP-надстройкой для обеспечения масштабирования по протоколу HTTP. Как это работает? KEDA ижектит прокси sidecar в ваш pod, чтобы весь HTTP-трафик маршрутизировался первым. Затем он измеряет количество запросов и выдает метрики. Имея под рукой эти данные, можно запустить автоскейлер.
Однако KEDA — не единственный вариант. Можно установить Prometheus Adapter. Метрики будут поступать из Nginx в Prometheus, а затем адаптер сделает их доступными для Kubernetes. Оттуда они потребляются Horizontal Pod Autoscaler.
Лучше ли это, чем KEDA? Они похожи, поскольку оба должны запрашивать и буферизовать метрики из Prometheus. Однако KEDA является подключаемой, а Adapter работает исключительно с Prometheus.
Есть ли конкурент у KEDA?
Перспективный проект под названием Custom Pod Autoscaler призван сделать автоскейлер подключаемым. Однако проект в большей степени ориентирован на то, как эти поды должны масштабироваться (т.е. на алгоритм), а не на сбор метрик.
Эти ссылки могут быть полезными для дальнейшего изучения темы:
https://keda.sh/docs/2.10/scalers/prometheus/
https://sysdig.com/blog/kubernetes-hpa-prometheus/
https://github.com/nginxinc/nginx-prometheus-exporter#exported-metrics
https://learnk8s.io/scaling-celery-rabbitmq-kubernetes
Если вы хотите еще больше узнать об автосклейниге приложений в кластере Kubernetes и научиться подключать кастомные метрики, то приходите в Слёрм на курс Kubernetes: Мега. На нём вы:
Изучите тонкости установки и конфигурации production-ready кластера.
Разберетесь с механизмами стабильности, безопасности и отказоустойчивости.
Научитесь работать с масштабированием.
Разберёте стратегические задачи инфраструктуры.
Это продвинутый курс для тех, кто уже работал с Kubernetes и уже готов заглянуть под капот и решать задачи, связанные с тонкой настройкой.
Интересные статьи
Интересные статьи
