Differences

This shows you the differences between two versions of the page.

--- решение_drbd [2020/04/14 16:37]
val
+++ решение_drbd [2024/11/28 04:39] (current)
val [Запуск сервиса]
@@ Line 1: / Line 1: @@
 ====== Решение DRBD ======
-  * [[http://www.drbd.org/]]
+  * [[https://ru.wikipedia.org/wiki/DRBD|wikipedia DRBD]]
-  * [[http://help.ubuntu.ru/wiki/руководство_по_ubuntu_server/кластеризация/drbd|DRBD (Руководство по Ubuntu Server)]]
+  * [[https://help.ubuntu.ru/wiki/руководство_по_ubuntu_server/кластеризация/drbd|DRBD (Руководство по Ubuntu Server)]]
+  * [[https://github.com/sbuelow/zabbix-template-drbd|sbuelow/zabbix-template-drbd]]
+  * [[https://sidmid.ru/1-%D0%BD%D0%B0%D1%81%D1%82%D1%80%D0%BE%D0%B9%D0%BA%D0%B0-drbd9/|НАСТРОЙКА DRBD9]]
+  * [[https://www.theurbanpenguin.com/create-3-node-drbd-9-cluster-using-drbd-manage/|Create a 3 Node DRBD 9 Cluster Using DRBD Manage]]
 ===== Подготовка узлов =====
@@ Line 8: / Line 12: @@
 <code>
-root@nodeN:~# lshw -C disk
+root@nodeN:~# lsblk
 root@nodeN:~# mkdir /disk2
@@ Line 15: / Line 19: @@
 ===== Установка и настройка =====
-  * В Debian 10 потянет exim
+  * В Debian для использования postfix надо предварительно [[Сервис MTA#Установка и настройка MTA на обработку почты домена hostname]]
+  * В Ubuntu postfix по умолчание, запустится визард
 <code>
+Лучше на каждом узле отдельно
 root@nodeN:~# apt install drbd-utils
-root@nodeN:~# cat /etc/drbd.d/global_common.conf
-</code><code>
-...
-        startup {
-...
-                wfc-timeout 30;
-        }
-...
-</code><code>
 root@nodeN:~# cat /etc/drbd.d/r0.res
 </code><code>
 resource r0 {
+        syncer { rate 1000M; }
+        handlers {
+                split-brain "/usr/lib/drbd/notify-split-brain.sh root";
+        }
         on node1.corpX.un {
                 device /dev/drbd0;
                 disk /dev/sdb;
 #                disk /dev/sdb1;
-                address 10.Z.M.100+X:7788;
+#                address 10.Z.M.100+X:7788;
+                address 192.168.X.1:7788;
                 meta-disk internal;
         }
@@ Line 43: / Line 46: @@
                 disk /dev/sdb;
 #                disk /dev/sdb1;
-                address 10.Z.M.200+X:7788;
+#                address 10.Z.M.200+X:7788;
+                address 192.168.X.2:7788;
                 meta-disk internal;
         }
 }
-</code><code>
+</code>
+===== Инициализация =====
+<code>
 root@nodeN:~# drbdadm create-md r0
 </code>
-**Одновременно на двух узлах**
+**одновременно на двух узлах**
 <code>
 root@nodeN:~# service drbd start
@@ Line 57: / Line 64: @@
 </code><code>
 root@node1:~# drbdadm -- --overwrite-data-of-peer primary r0
+</code>
+===== Мониторинг =====
+<code>
 root@nodeN:~# cat /proc/drbd
 root@nodeN:~# watch cat /proc/drbd
+root@nodeN:~# drbdadm sh-resources
+root@nodeN:~# drbdadm cstate r0
+root@nodeN:~# drbdadm dstate r0
+root@nodeN:~# drbdadm role r0
 </code>
-Можно не ожидая синхронизации:
+===== Форматирование раздела =====
+**можно не ожидая окончания синхронизации**
 <code>
 root@node1:~# mkfs.ext4 /dev/drbd0
 root@node1:~# mount /dev/drbd0 /disk2
+root@node1:~# mount | grep ext
 </code>
 ===== Смена ролей узлов =====
-**после окончания синхронизации**
+  * Может потребоваться включить в blacklist для [[Сервис multipath]]
+  * !!! можно не дожидаясь окончания синхронизации
 <code>
@@ Line 105: / Line 129: @@
 <code>
+nodeN# mail
 nodeN# service drbd stop
 </code>
-Выбираем узел, данные которого будут затерты.
+Выбираем узел, данные которого будут затерты (Для поиска и "спасения" модифицированных файлов можно воспользоваться [[Команда find]])
 <code>
 nodeZ# drbdadm invalidate r0
@@ Line 115: / Line 141: @@
 root@nodeN:~# service drbd start
 </code>
+Дополнительные команды
+<code>
+nodeN# drbdadm detach r0 --force
+nodeZ# drbdadm invalidate r0
+nodeN# drbdadm connect r0
+</code>
 ===== DRBD и Heartbeat =====
@@ Line 132: / Line 165: @@
   * [[https://www.theurbanpenguin.com/drbd-pacemaker-ha-cluster-ubuntu-16-04/|DRBD Pacemaker HA Cluster on Ubuntu 16.04]]
+==== Запуск сервиса ====
 <code>
 root@nodeN:~# apt install psmisc   #fuser
@@ Line 144: / Line 178: @@
 ms ms_drbd_r0 pr_drbd_r0 meta master-max="1" master-node-max="1" clone-max="2" clone-node-max="1" notify="true"
+#clone ms_drbd_r0 pr_drbd_r0 meta clone-max=2 clone-node-max=1 notify=true promotable=true
 commit
-exit
+quit
 </code><code>
 node1# crm status
 node1# cat /proc/drbd
+</code>
+  * Можно использовать для [[Сервис iSCSI#iSCSI target]]
+==== Монтирование раздела ====
+<code>
 node1# crm configure
 </code><code>
@@ Line 161: / Line 200: @@
 commit
-exit
+quit
 </code><code>
-node1# crm resource move pr_fs_r0 node1.corpX.un
+node1# mount | grep ext
+</code>
+==== Перемещение раздела ====
+<code>
+node1# crm resource move pr_fs_r0 node1
+node1# crm configure location cli-prefer-pr_fs_r0 pr_fs_r0 role=Started inf: node1
 node1# crm configure show
 node1# crm configure delete cli-prefer-pr_fs_r0
-node1# mount | grep ext
 </code>
@@ Line 183: / Line 228: @@
 nodeZ# service pacemaker start
-node1# crm resource cleanup pr_fs_r0
+nodeM# crm resource cleanup pr_fs_r0   # Может не понадобиться
+</code>
+===== Конфигурация с двумя primaries =====
+  * [[https://habr.com/ru/post/445612/|Кластерное хранилище для небольших web-кластеров на базе drbd+ocfs2]]
+  * [[Сервис OCFS2]]
+  * Пакет Pacemaker [[Пакет Pacemaker#Запуск после монтирования файловых систем]]
+<code>
+root@nodeN:~# cat /etc/drbd.d/r0.res
+</code><code>
+resource r0 {
+...
+        startup {
+                become-primary-on both;
+                wfc-timeout 1;
+        }
+        net {
+                allow-two-primaries;
+                after-sb-0pri discard-zero-changes;
+                after-sb-1pri discard-secondary;
+                after-sb-2pri disconnect;
+        }
+...
+}
+</code><code>
+...
+node2# drbdadm primary r0
+nodeN# systemctl enable drbd
 </code>

Методические материалы Лохтурова Вячеслава

User Tools

Site Tools

Differences

Page Tools