Все что должен знать DevOps про PostgreSQL

• Всем привет! Рады Вам представить цикл вебинаров на тему “Что должен знать Ops из области Dev”. Начнем с задач DBA, которые приходится решать DevOps инженеру на примере самой популярной СУБД PostgreSQL

• Осуществить развертывание СУБД PostgreSQL в Bare metal, Docker и Kubernetes
• Использовать команды управления и SQL для создания и анализа структур, данных и управление правами
• Использовать операторы PostgreSQL для автоматизации развертывания приложений в Kubernetes
• Использовать пулер соединений PgBouncer для оптимизации подключений к PostgreSQL
• Настроить мониторинг СУБД PostgreSQL
• Настроить резервное копирование СУБД PostgreSQL

• https://youtu.be/cOZDowgRPwY
• https://rutube.ru/video/private/151d3c5e41168ada2155847351f58dce/
• Тэги: PostgreSQL, Kubernetes, CloudNativePG

• Система Kubernetes (4Gb на узел) и rancher local-path-provisioner (default-class)
• Добавление узла через Kubespray !!! 4Gb и в haproxy !!!

• ingress-nginx с use-forwarded-headers (Работа с готовыми Charts)
• haproxy

• Практические примеры Keycloak
• Видео уроки

• Развернуть PostgreSQL baremetal на Linux Debian/Ubuntu на gate
• Подключиться локально через Клиент psql и создать объекты для сервиса Keycloak, обсудить https://www.zabbix.com/download
• Настроить Подключение по сети и проверить через Клиент psql на server
• Обсудить PgBouncer
• Развернуть Keycloak в варианте Bare metal

server:~/keycloak-22.0.5# KEYCLOAK_ADMIN=admin KEYCLOAK_ADMIN_PASSWORD='strongpassword' KC_DB=postgres KC_DB_URL=jdbc:postgresql://gate:5432/keycloak KC_DB_USERNAME=keycloak KC_DB_PASSWORD='strongpassword' bin/kc.sh start-dev

• Через Клиент psql убеждаемся в появлении схемы и данных приложения Keycloak
• Провести Базовая конфигурация и сделать pg_dump

• Обсудить Потоковая репликация
• Обсудить Barman

• !!! Обсудить и предложить сделать самостоятельно !!!
• Развернуть сервис PostgreSQL в Docker совместно с Keycloak, через docker-compose (без ssl)

• Для демонстрации можно использовать rancher local-path-provisioner как default-class

• Развернуть сервис PostgreSQL в Kubernetes
• Выполнить pg_restore)
• Развернуть Keycloak в Kubernetes, добавить запись в DNS, подключиться через Решение HAProxy с clientN и проверить Базовая конфигурация

• Развернуть на server Клиент pgadmin и подключить к PostgreSQL в Kubernetes через port-forward

• Сделать резервную копию pg_dumpall,

• Удалить PostgreSQL из кластера Kubernetes

kube1:~# kubectl delete ns my-postgres-ns

• Добавить оператор CloudNativePG в кластер Kubernetes
• Развернуть кластер PostgreSQL для приложения Keycloak
• Установить Плагин cnpg и проверить состояние кластера

• Развернуть и проверить работу S3 Сервис MinIO
• Настроить CloudNativePG Backup в него, (immediate Backup проводить после появления в архиве wal файлов, проверить наличие требуемых из backup.info)

• Восстановить базу Keycloak из pg_dumpall
• Настроить Keycloak в Kubernetes на работу с CloudNativePG

• Удаление узла

kube1# kubectl cnpg status my-pgcluster -n my-pgcluster-ns

kube1# kubectl -n my-pgcluster-ns delete pvc my-pgcluster-1

kube1# kubectl -n my-pgcluster-ns delete pod my-pgcluster-1

kube1# kubectl -n my-pgcluster-ns get pods --watch

kube1:~# time kubectl delete ns my-pgcluster-ns
real    4m11.523s

• Использовать CloudNativePG Recovery для восстановления кластера CloudNativePG для приложения Keycloak из резервной копии S3 Сервис MinIO
• Вернуть CloudNativePG Backup

• Добавить CloudNativePG PgBouncer и подключить Keycloak в Kubernetes через него

• Настроить CloudNativePG Monitoring

• Выполнить все, что решили “обсудить” на 2-м шаге