Vu et Entendu... - Tag - Sun Fire

Synchronisation de répertoires distants

Pierre — Wed, 27 Oct 2004 13:31:00 +0000

ce billet fait suite à celui décrivant la sauvegarde système des domaines d'un SunFire 15K, et décrit la mise en place d'une synchronisation du répertoire de sauvegarde avec le deuxième SC du 15K

Description globale de la réplication

Plutôt que de sauvegarder sur bande les fichiers générés et de nécessiter une intervention manuelle, le répertoire de backup sera répliqué sur le deuxième system controller du SunFire 15K. La synchronisation des deux serveurs sera effectuée à l'aide de l'utilisatire rsync.

Dans la suite du document, on effectuera donc la synchronisation du sf15k01sc1 sur le sf15k01sc0. Le sf15k01sc0 sera donc considéré comme Maître et le sf15k01sc1 comme Esclave. En tout état de cause, toutes les modifications devront être faites sur le serveur maître (sf15k01sc0), sous peine d’être supprimées lors de la synchronisation.

Pré requis à la mise en place de cette réplication

La commande rsync doit être présente sur chacun des serveurs.
Un espace de stockage suffisant doit être créé sur chaque serveur
Les clefs ssh des utilisateurs effectuant cette réplication (root dans notre cas) doivent avoir été configurées pour permettre l'autologin.

Installation de rsync

La version de Solaris isntallée sur les SC n'inclut pas l'utilisatire rsync, par conséquent, celui ci sera installé depuis le package rsync-2.6.3-sol8-sparc-local librement téléchargeable sur le site Sunfreeware.com. A noter que le package popt-1.7-sol8-sparc-local doit également être installé.

L'installation du package se fait de façon classique :

Décompression des paquets :

gunzip /tmp/popt-1.7-sol8-sparc-local.gz
gunzip /tmp/rsync-2.6.3-sol8-sparc-local.gz

Puis installation de ceux ci à l'aide de la comande pkgadd :

pkgadd -d /tmp/popt-1.7-sol8-sparc-local
pkgadd -d /tmp/rsync-2.6.3-sol8-sparc-local

l'ensemble des données à synchroniser entre les deux SC sont situées dans le répertoire /export/install.

Configuration de l'autologin SSH

Création des clefs publiques et privés sur chaque serveur :

/usr/local/bin/ssh-keygen -t rsa

Puis copie de la clef publique dans le fichier authorized_keys du serveur distant afin de permettre l'autologin :

/usr/local/bin/ssh root@10.0.66.120 < .ssh/id_rsa.pub '[ ! -d ${HOME}/.ssh ] && mkdir -p ${HOME}/.ssh ;\ 
 cat  >> .ssh/authorized_keys'

L'opération est réalisée sur les deux SC et on vérifie que l'autologin est effectif.

Mise en place de la synchronisation

La synchronisation est effectuée depuis le (ou les serveur(s) esclave(s) à l'aide de la commande suivante :

/usr/local/bin/rsync -a --delete  --rsh="ssh -l root" root@10.0.147.212:/export/install/ /export/install/

On prendra bien soin de ne pas omettre le "/" final après chaque nom de répertoire afin de copier le contenu du répertoire, et nom le répertoire lui même, sans quoi, l'arborescence ne sera pas identique sur le serveur cible. La première exécution effectue la copie de tous les fichiers du serveur Maître vers le serveur Esclave et peut prendre un temps non négligeable. Les exécutions suivantes ne concerneront que les fichiers modifiés depuis la dernière synchronisation. Un nombre de fichiers élevé dans le répertoire conduira cependant à un temps d'exécution relativement important. Cette commande peut alors ête ajoutée à la crontab pour une exécution quotidienne.

L'option -a correspond au mode Archive et l'équivalent de l'ensemble des options : -rlptgoD L'option --delete permet la supression des fichiers qui ne sont pas présents sur le serveur maître, et nous assure d'avoir le même contenu sur l'ensemble des serveurs. L'ensemble des options existantes est décrite dans la page de man de rsync

Sauvegarde système d'un SunFire 15K

Pierre — Mon, 25 Oct 2004 14:32:00 +0000

Description des opérations nécessaires afin de mettre en place une sauvegarde système automatique de 6 domaines d'un SunFire 15K sous Solaris 9. Le principe consiste à effectuer une sauvegarde des File System / et /usr à l'aide de la commande ufsdump. Cependant, ne disposant pas de lecteur de bandes sur les domaines, chaque File system est sauvegardé dans un fichier compressé situé sur un des System Controller (SC) du 15K. Une synchronisation des deux System Controller est alors réalisée à l'aide de la commande rsync pour permettre une redondance des données.

Sur chaque System Controller

Création des répertoires

L'arborescence suivante est créée sous la racine /export/install/exploitation :

scripts :

Exécutables communs à tous les domaines

conf :

Fichiers de configuration communs à tous les domaines

cfg/host :

Fichiers de configuration spécifiques au serveur sauvegardé, un répertoire par domaine.

backup/host :

Emplacement des sauvegardes système, propre à chaque serveur,un répertoire par domaine.

La création des répertoires est réalisée à l'aide des commandes suivantes :

 
mkdir /export/install/exploitation/scripts
mkdir /export/install/exploitation/conf

for name in "host1 host2 host3 host4 host5 host6"
do
     mkdir -p /export/install/exploitation/backups/${name}
     mkdir /export/install/exploitation/cfg/${name}
done

Configuration du serveur NFS

Le fichier contenant la liste des File System à exporter doit éventuellement modifié afin de permettre le partage des répertoires créés ci dessus. On s"assurera que la ligne suivante est présente dans le fichier /etc/dfs/dfstab :

share -F nfs -o rw,anon=0 /export/install

Le cas échéant on modifiera le fichier en conséquences, et on réexportera le réperotire si celui ci l'était déjà :

unshare /export/install

share -F nfs -o rw,anon=0 /export/install

devient :

share -F nfs -o rw,anon=0 /export/install

Puis :

unshare /export/install/
share -F nfs -o rw,anon=0 /export/install

Mise en place d'une purge automatique des fichiers

Une purge automatique des fichiers de sauvegarde est mise en place afin de supprimer les anciens fichiers de sauvegarde. On ne conservera que deux exemplaires de la sauvegarde système de chaque domaien dans les répertoires /export/install/exploitation/backups/host.

Mise en place le l'utilitaire logrotate sur les SC

Récupération du package :

Le package logrotate est récupéré sur le site Sunfreeware.com Celui-ci est alors transféré sur chaque system controller du SUnfire 15K et sera installé de la même manière sur les deux. On installera le package dans la version suivante :logrotate-3.6.9-sol8-sparc-local.gz ainsi que la dépendance suivante : popt-1.7-sol8-sparc-local.gz

Installation du package

Les packages sont transférés via FTP sur chaque Sytem Controller :

cd /tmp
gunzip logrotate-3.6.9-sol8-sparc-local.gz
pkgadd -d logrotate-3.6.9-sol8-sparc-local

gunzip popt-1.7-sol8-sparc-local.gz
pkgadd -d popt-1.7-sol8-sparc-local

Configuration de logrotate

On ajoute le fichier backups dans le répertoire /etc/logrotate.d.

Configuration de la crontab

On ajoute le scipt logrotate dans le répertoire /etc/cron.d.

La crontab est éditée et la ligne qui suit est ajoutée pour une exécution quotidienne de la rotation des fichiers à 5h00 du matin.

0 5 * * *  /etc/cron.d/logrotate

Sur Chaque Domaine Sauvegardé

Mise en place de l'automontage des répertoires

Création des répertoires :

mkdir -p /adm/exploitation/backups
mkdir -p /adm/exploitation/scripts
mkdir -p /adm/exploitation/conf
mkdir -p /adm/exploitation/cfg

Configuration de l'automonteur :

echo "/adm/exploitation    auto_adm -nobrowse" >> /etc/auto_master

echo "scripts    -ro     sf15k01sc0:/export/install/exploitation/scripts" >> /etc/auto_adm
echo "backups            sf15k01sc0:/export/install/exploitation/backups/$(hostname)" >> /etc/auto_adm
echo "conf       -ro     sf15k01sc0:/export/install/exploitation/conf" >> /etc/auto_adm
echo "cfg                sf15k01sc0:/export/install/exploitation/cfg/$(hostname)" >> /etc/auto_adm

Mise en place de la sauvegarde automatisée

La sauvegarde du système est planifiée deux fois par mois à l'aide de la crontab. L'entrée suivante est donc ajoutée dans la crontab de chaque domaine :

0 1 20,5 * * /adm/exploitation/scripts/save_syst.ksh

Script de Sauvegarde et fichiers de configuration

Trois fichiers sont nécessaire au bon fonctionnement de la sauvegarde :

/adm/exploitation/scripts/save_syst.ksh : Exécutable lancé par la crontab, global à tous les domaines.

/adm/exploitation/cfg/save_syst.cfg : Fichier de configuration propre à chaque domaine.

/adm/exploitation/conf/save_syst.lst : Liste des File system à sauvegarder