Различия

Здесь показаны различия между двумя версиями данной страницы.

--- создание_отказоустойчивых_linux_решений [2019/04/22 09:40]
val [6.3 Настройка SAN сервера iSCSI]
+++ создание_отказоустойчивых_linux_решений [2020/06/17 13:21] (текущий)
val [Лабораторные работы]
@@ Строка 3: / Строка 3: @@
 ===== Программа курса =====
-  * [[http://www.specialist.ru/course/un5|Linux/FreeBSD. Уровень 3. Создание отказоустойчивых кластерных решений]]
+  * https://global.gotomeeting.com/join/531493949
+  * [[http://www.specialist.ru/course/un5|Linux. Уровень 6. Создание отказоустойчивых кластерных решений.]]
 ===== Цель курса =====
 Научиться настраивать отказоустойчивую конфигурацию сервисов Linux.
+===== Модуль 0. Подготовка стенда в классе =====
+  * Узнать свой номер стенда
+  * Удалить виртуалки
+  * Удалить профили putty
+  * Отключить не используемые адаптеры
+  * Записать логин пароль и IP (сообщить преподавателю) рабочей станции
+  * Проверить наличие дистрибутивов и образов
 ===== Модуль 1. Развертывание систем и сети кластера =====
@@ Строка 19: / Строка 29: @@
 ==== Лабораторные работы ====
-=== 1.1 Настройка систем ===
+=== 1.0 Импорт VM Linux ===
+=== 1.1 Аппаратная настройка систем ===
   * Адаптер 1 - eth0 - Внутренняя сеть (LAN)
@@ Строка 26: / Строка 38: @@
   * Адаптер 4 - eth3 - Сетевой мост (ISP2)
   * Добавить жесткий диск 2Gb
+=== 1.2 Настройка сети систем ===
+  * Методическая рекомендация - настроить только первый узел (node1). Второй узел настроить в следующем модуле.
 <code>
+node1# ifconfig eth2 inet 10.5.7.100+X/24
 nodeN# cat /etc/hostname
 </code><code>
@@ Строка 80: / Строка 98: @@
 ...
 export http_proxy=http://proxy:3128/
+export EDITOR=nano
 ...
 </code><code>
 nodeN# init 6
-...
-nodeN# apt update
 </code>
-=== 1.2 Тестирование ===
+=== 1.3 Тестирование настроек сети ===
 <code>
-nodeN# ping node1
+nodeN# ping proxy
-nodeN# ping node2
+nodeN# apt update
-nodeN# ping proxy
 </code>
@@ Строка 120: / Строка 133: @@
 <code>
+node2# ifconfig eth0 inet 192.168.X.2/24
+node1# ping node2
 node1# ssh-keygen
 ...
@@ Строка 132: / Строка 149: @@
 <code>
 node1# scp /etc/hosts node2:/etc/
+node1# scp /etc/resolv.conf node2:/etc/
+node1# scp /etc/sysctl.conf node2:/etc/
+node1# scp .bashrc node2:
+node1# scp /etc/hostname node2:/etc/
+node1# scp /etc/network/interfaces node2:/etc/network/
 </code>
+  * Павим файлы конфигурации на node2, перезапускаем, тестируем сеть
+  * [[Настройка командных интерпретаторов#bash]] алиасы и функции
 === 2.2 С использованием пакета CSYNC2 ===
@@ Строка 141: / Строка 171: @@
   * Устанавливаем и ЗАПУСКАЕМ на двух узлаx, настраиваем на node1
 <code>
-node1# sh dns.sh
+node1# sh conf/dns.sh
 node1# cat /etc/bind/corpX.un
@@ Строка 155: / Строка 185: @@
 gate      A       192.168.X.254
 </code><code>
-node2# apt install bind9
+node1# ssn2 apt install bind9
 </code>
@@ Строка 162: / Строка 192: @@
 <code>
-node1# csync2 -xvv
+node1# csync2 -xv
-node1# host node1
+nodeN# host ns
-node1# host node2
-node1# host ns
 </code>
 === 2.3 С использованием пакета Ansible ===
@@ Строка 193: / Строка 219: @@
   * man dhcpd.conf (Dhcp Failover)
 ==== Лабораторные работы ====
+=== 3.0 Импорт VM Windows ===
 === 3.1 Отказоустойчивый DHCP сервер ===
@@ Строка 198: / Строка 226: @@
   * [[Сервис DHCP#Установка]] cервиса DHCP
 <code>
-nodeN# sh dhcp.sh
+nodeN# sh conf/dhcp.sh
 </code>
   * [[Сервис DHCP#Отказоустойчивая конфигурация]] cервиса DHCP
   * [[Сервис DHCP#Проверка конфигурации и запуск]] cервиса DHCP
@@ Строка 216: / Строка 245: @@
 <code>
+# ntpdate -u proxy
 # grep dhcp /var/log/syslog
 </code>
@@ Строка 269: / Строка 300: @@
 ip addr del 172.16.1.X/24 dev eth1
-route delete default
 route add default gw 192.168.X.254
 </code><code>
@@ Строка 293: / Строка 323: @@
 === 4.3.2 Модификация настроек dns сервера ===
 <code>
-# cat named.conf
+# cat /etc/bind/named.conf
 </code><code>
 ...
@@ Строка 425: / Строка 455: @@
 ISP=''
-route add default gw 172.16.1.254 || exit 0
+route add default gw 172.16.1.254
 ping -c3 ya.ru && ISP=ISP1
@@ Строка 450: / Строка 480: @@
 masternode# /root/select_isp.sh
+masternode# cat /tmp/current_isp
 nodeN# crontab -l
@@ Строка 505: / Строка 537: @@
 <code>
-node1# cat corpX.un
+node1# cat /etc/bind/corpX.un
 </code><code>
 ...
 www     A       192.168.X.10
 </code><code>
-node1# csync2 -xvv
+node1# csync2 -xv
 </code>
   * На обоих узлах [[Сервис HTTP#Установка и запуск сервера Apache]] (можно через Ansible)
-  * На обоих узлах создаем пользователя user1 с uid=10001 ([[Управление учетными записями в Linux]], [[Управление учетными записями в FreeBSD]]) (можно через Ansible)
+  * На обоих узлах создаем пользователя user1 с uid=10001 ([[Управление учетными записями в Linux]]) (можно через Ansible)
   * На обоих узлах включаем [[Сервис HTTP#Использование домашних каталогов]] (можно через Ansible)
   * [[Сервис Ansible]]
   * Устанавливаем сервер ftp на node1 и запускаем его ([[Сервис FTP#Сервер ftp]])
   * Создаем тестовую www страницу для пользователя user1 используя протокол ftp на node1
+<code>
+Каталог: public_html
+Файл:    index.html
+</code>
 === 5.1.2 Синхронизация пользовательских данных ===
@@ Строка 524: / Строка 560: @@
   * [[Пакет RSYNC]]
   * Можно автоматизировать, ([[Планирование выполнения заданий в Linux]]), но, пока не нужно.
 ==== 5.2 Автоматизация смены ролей узлов кластера ====
@@ Строка 546: / Строка 581: @@
   * [[Пакет HEARTBEAT]] (Демонстрирует преподаватель в методических целях)
   * [[Пакет Corosync]]
-  * [[Пакет Pacemaker]]
+  * [[Пакет Pacemaker]] (для pacemaker 2.X выполните начало лабораторной 5.2.3)
 === 5.2.3 Автоматическую синхронизация домашних каталогов ===
@@ Строка 552: / Строка 587: @@
   * Настроить автоматическую синхронизацию домашних каталогов с мастер узла на резервный
 <code>
+node2# ssh-keygen
+node2# ssh-copy-id node1
 nodeN# crontab -l
 </code><code>
@@ Строка 589: / Строка 628: @@
 ==== 6.2 Автоматизация смены ролей узлов кластера  ====
+  * Pacemaker [[Пакет Pacemaker#Удаление ресурсов]]
   * [[Решение DRBD#DRBD и Pacemaker]]
 ==== 6.3 Настройка SAN сервера iSCSI ====
-  * Определяем, на каком узле смонтирован зеркалируемый раздел
+  * Демонстрирует преподаватель
   * Устанавливаем на оба узла пакет [[Сервис iSCSI#iSCSI target]]
-  * Отключаем авто запуск сервиса
-  * Останавливаем группу ресурсов кластера и удаляем ee [[Пакет Pacemaker#Управление ресурсами]]
 <code>
@@ Строка 603: / Строка 641: @@
 node1# crm configure
-crm(live)configure# primitive pr_istgt lsb:istgt
+crm(live)configure# primitive pr_srv_istgt lsb:istgt
-crm(live)configure# primitive pr_ip ocf:heartbeat:IPaddr2 params ip=192.168.X.15 cidr_netmask=32 nic=eth0
+crm(live)configure# primitive pr_ip_istgt ocf:heartbeat:IPaddr2 params ip=192.168.X.15 cidr_netmask=32 nic=eth0
-crm(live)configure# group gr_ip_fs pr_ip pr_fs_r0 pr_istgt
+crm(live)configure# group gr_ip_fs pr_fs_r0 pr_ip_istgt pr_srv_istgt
 crm(live)configure# commit
@@ Строка 616: / Строка 654: @@
 ==== 6.4 Настройка NAS сервера SMB/CIFS ====
-  * Устанавливаем на оба узла пакет samba ([[Файловый сервер SAMBA]])
+  * В зону corpX.un добавляем запись fs A 192.168.X.20
+<code>
+node1# cat /etc/bind/corpX.un
+</code><code>
+...
+fs     A       192.168.X.20
+</code><code>
+node1# csync2 -xv
+</code>
+  * Устанавливаем на оба узла (лучше, отдельно на каждом) пакет samba ([[Файловый сервер SAMBA]])
   * Отключаем автоматический запуск сервиса
@@ Строка 630: / Строка 679: @@
   * Копируем на BACKUP узел файл конфигурации samba
   * Настраиваем менеджер кластера на монтирование на мастер узле зеркалируемого раздела в каталог /disk2, назначение ip адреса 192.168.X.20 и запуск сервера samba
-  * Останавливаем группу ресурсов кластера и удаляем ее [[Пакет Pacemaker#Управление ресурсами]]
 <code>
-crm(live)configure# primitive pr_smbd systemd:smbd
+node1# crm configure
+crm(live)configure# primitive pr_srv_smbd systemd:smbd
+crm(live)configure# primitive pr_ip_smbd ocf:heartbeat:IPaddr2 params ip=192.168.X.20 cidr_netmask=32 nic=eth0
+crm(live)configure# group gr_ip_fs pr_fs_r0 pr_ip_smbd pr_srv_smbd
+или
 crm(live)configure# edit gr_ip_fs
@@ Строка 644: / Строка 700: @@
 <code>
 master# cat /proc/drbd
+master# crm_mon -1
 </code>
   * Останавливаем MASTER сервер и дожидаемся монтирования на SLAVE узле "половины" зеркалируемого раздела в каталог /disk2, назначение ip адреса 192.168.X.20 и запуск сервера samba
   * Запускаем бывший MASTER узел и дожидаемся восстановления целостности зеркала
+  * Останавливаем группу ресурсов кластера и удаляем ее [[Пакет Pacemaker#Удаление ресурсов]]
+<code>
+master# crm resource stop pr_srv_smbd pr_ip_smbd
+master# crm configure delete pr_srv_smbd pr_ip_smbd gr_ip_fs
+</code>
 ==== Вопросы ====
@@ Строка 669: / Строка 733: @@
 ==== 7.1 Linux Containers в зеркалируемом разделе ====
-=== 7.1.1 Настройка bridge на узлах и сервисах ===
+  * В зону corpX.un добавляем запись server A 192.168.X.30
-  * Отключение всех сервисов (особенно, ip, привязанного к eth), кроме зеркалируемого раздела [[Пакет Pacemaker#Управление ресурсами]]
 <code>
-node1# crm resource stop pr_ip pr_istgt pr_smbd
+node1# cat /etc/bind/corpX.un
+</code><code>
-node1# crm configure delete pr_ip pr_istgt pr_smbd gr_ip_fs
+...
+server     A       192.168.X.30
+</code><code>
+node1# csync2 -xv
 </code>
+=== 7.1.1 Настройка bridge на узлах и сервисах ===
   * [[Технология LXC#Подготовка сети]] для LXC
   * Сервис CARP и bridge
 <code>
+nodeN# apt install bridge-utils
 nodeN# cat /etc/network/interfaces
 </code><code>
@@ Строка 686: / Строка 757: @@
 auto br0
 iface br0 inet static
+        bridge_ports eth0
         address 192.168.X.N
         netmask 255.255.255.0
-        ucarp-vid 1
+...
-        ucarp-vip 192.168.X.254
-        ucarp-password secret
-        bridge_ports eth0
 iface br0:ucarp inet static
@@ Строка 717: / Строка 787: @@
 <code>
 nodeN# ps ax | grep carp
-nodeN# ifconfig | grep carp
-nodeN# ps ax | grep dh
+nodeN# ps ax | grep dhcp
-nodeN# ps ax | grep he
+node1# mount | grep ext
-nodeN# mount | grep ext
+nodeN# cat /proc/drbd
 </code>
+  * Может понадобиться [[Решение DRBD#Решение ситуации Split-Brain]]
 === 7.1.2 Подготовка виртуальных машин ===
@@ Строка 749: / Строка 821: @@
 root@node1.corpX.un:~# cp /etc/ssh/sshd_config /var/lib/lxc/server/rootfs/etc/ssh/sshd_config
-root@node1.corpX.un:~# cp /etc/hosts /var/lib/lxc/server/rootfs/etc/hosts
+root@node1.corpX.un:~# cp /etc/hosts /var/lib/lxc/server/rootfs/etc/
 root@node1.corpX.un:~# chroot /var/lib/lxc/server/rootfs/ /bin/bash
@@ Строка 757: / Строка 829: @@
 server:/# apt update
-server:/# apt purge resolvconf isc-dhcp-client
+server:/# apt purge isc-dhcp-client
 server:/# apt install nano vim iputils-ping
@@ Строка 774: / Строка 846: @@
 .168.X.30 server.corpX.un
-.Z.M.254 proxy
-</code><code>
-server:/# rm /etc/resolv.conf
-server:/# cat /etc/resolv.conf
-</code><code>
-search corpX.un
-nameserver 192.168.X.1
-nameserver 192.168.X.2
 </code><code>
 server:/# passwd
@@ Строка 794: / Строка 856: @@
 </code><code>
 ...
-lxc.network.type = veth
+lxc.net.0.type = veth
-lxc.network.link = br0
+lxc.net.0.link = br0
-lxc.network.flags = up
+lxc.net.0.flags = up
-lxc.network.ipv4 = 192.168.X.30/24
+lxc.net.0.ipv4.address = 192.168.X.30/24
-lxc.network.ipv4.gateway = 192.168.X.254
+lxc.net.0.ipv4.gateway = 192.168.X.254
 ...
 </code>
@@ Строка 819: / Строка 881: @@
 root@node1.corpX.un:~# systemctl start lxc@server
-debian9_nodeN# mkdir /etc/systemd/system/lxc@server.service.d/
-debian9_nodeN# cat /etc/systemd/system/lxc@server.service.d/kill_signal_fix.conf
-</code><code>
-[Service]
-KillSignal=SIGRTMIN+3
-</code><code>
 root@node1.corpX.un:~# systemctl stop lxc@server
 </code>
@@ Строка 834: / Строка 889: @@
 <code>
-NEW
 primitive pr_lxc_server systemd:lxc@server
 group gr_fs_lxc pr_fs_r0 pr_lxc_server
-OLD
-primitive pr_lxc_server systemd:lxc@server
-primitive pr_lxc_server ocf:heartbeat:lxc params container=server config=/var/lib/lxc/server/config
-order or_lxc_after_fs pr_fs_r0 pr_lxc_server
-colocation col_lxc_on_drbd inf: pr_lxc_server ms_drbd_r0:Master
-!!! Похоже порядок в группе имеет значение и здесь ошибка !!!
-group gr_lxc_fs pr_lxc_server pr_fs_r0
-crm_resource --resource pr_lxc_server --cleanup --node node45.bmstu.ru
-crm resource stop pr_lxc_server
-crm resource move pr_lxc_server node46.bmstu.ru
-crm resource move pr_fs_r0 node45.bmstu.ru
-systemctl start lxc@server
-/etc/init.d/lxc start server
 </code>

Методические материалы Лохтурова Вячеслава

Инструменты пользователя

Инструменты сайта

Различия

Инструменты страницы