Vu et Entendu... - Tag - Sauvegarde

Miroir ! Mon beau miroir !

Pierre — Sat, 16 Feb 2008 19:55:00 +0100

Saurais tu me restituer mon petit fichier si important que par mégarde j'ai effacé ?

Et oui ! Aujourd'hui c'est le jour des sauvegardes ! Enfin quand je dis c'est le jour... c'est surtout que jusqu'ici je vivais sans filets... et que j'étais à la merci d'une panne matérielle ou d'une erreur de manip !

J'ai donc décidé de profiter de mon disque réseau acquis récemment, pour automatiser les sauvegardes, à la fois de mon laptop, mais aussi de ma toute nouvelle Gandibox sur laquelle vous êtes actuellement, vous qui consultez ma prose !

Après plusieurs tentatives diverses et variées, mais non concluantes, j'ai finalement opté pour une sauvegarde via le protocole FTP à l'aide de l'outil lftp qui permet entre autres nombreuses fonctionnalités de faire des "miroirs" de ses répertoire de données ! La page de man est bien touffue, mais j'ai réussi à y dénicher les p'tites options qui vont bien ! Cela dit,j'aurais mieux fait de demander à mon ami Google qui m'aurait tout de suite donné la page qui va bien sur le Wiki d'Ubuntu... :-p D'un autre côté, ça m'a permis de confirmer que j'avais pas tout faux et de rajouter une ou deux p'tites options !

Et comme je suis un gars super sympa, je vais même vous faire part de mon p'tit script ! Rien de bien compliqué... par ailleurs une fois que la commande à lancer a été élaborée ! Le script est lancé toute les nuits et s'offre le luxe de faire un miroir par jour de la semaine, ce qui laisse un (tout petit) peu de temps de se retourner en cas de boulette ! Bien sûr la première exécution va prendre un peu de temps puisqu'il va falloir tout transférer... mais une fois que ce sera fait, ça devrait ronronner tranquillement ! Pour le moment les sauvegardes sont en cours... Il y a apparemment quelques soucis pour créer les fichiers comportant le caractère ":" .. bon y en a pas des masses non plus... mais faudra que je regarde ça de plus près !

Ci dessous le magnifique script :

#/bin/bash
# Script de Mirroring du systeme sur disque NAS à l'aide LFTP

LFTP=/usr/bin/lftp
JOUR=$(date +%a)

#Serveur FTP
HOST=ftp.nowhere.com

#Port du serveur FTP (21 par défaut)
PORT=21

#Liste des repertoires a Sauvegarder :
LISTE_REP="/etc /home /media /datas" 

#un miroir est genere pour chaque jour de la semaine
MIRRORDIR=/shares/FAT/Backup/laptop/miroir/$JOUR/


for repsource in $LISTE_REP
do
        $LFTP -p $PORT -e "mirror -e -R -p $repsource $MIRRORDIR;exit" $HOST
        if [ $? -ne 0 ]
        then 
                echo "Probleme lors du mirroring de $repsource sur $HOST dans $MIRRORDIR "
        else
                echo "Mirroring de $repsource effectue avec succes sur $HOST dans $MIRRORDIR"
        fi
done

Avant de le lancer, vérifier que les 4 variables HOST, PORT et LISTE_REP et MIRRORDIR sont correctement positionnées avec vos paramètres. Renseignez le fichier .netrc de l'utilisateur qui va lancer le script afin de permettre l'autologin. (c'est pas top... mais c'est toujours mieux que le mot de passe dans l'url de connexion... )

Le fichier .netrc doit être de la forme suivante :

machine ftp.nowhere.com
login user
password secret

Une fois que c'est fait vous pouvez, soit lancer le script manuellement... mais encore mieux le faire de façon automatique via la crontab !

Par exemple, pour lancer la sauvegarde tous les jours à 2 heures du matin (bien sûr il faut que ce soit une heure où votre PC est allumé.. et si possible pas trop utilisé !

0  2    * * *   /usr/local/bin/mirror_rep.sh

Et voilà le travail ! Au bout d'une semaine vous aurez 7 sauvegardes de vos données qui se mettront à jour toutes seules comme des grandes ! Elle est pas belle la vie ?

Mauvais présage...

Pierre — Mon, 27 Aug 2007 18:20:00 +0200

Suite à une sauvegarde préventive de mes données, 3 fichiers ne sont pas lisibles..

Et à chaque fois le même message d'erreur comme quoi un bloc de mon disque est défectueux... ça sent le sapin pour mon disque dur et je pense qu'il va falloir refaire un petit tour par l'atelier pour changer celui ci qui n'a visiblement pas apprécié son salto arrière... Cela dit, il n'y a aucune trace de choc... Ces erreurs ne peuvent donc pas être liées à ça, et c'est tout simplement une coïncidence que mon disque dur ait décidé de tomber en panne à ce moment là !

Bon ce qui me gonfle le plus dans cette histoire, c'est que je vais me retrouver sans PC pendant 3 semaines... Bah... je vais en profiter pour partir en vacances histoire de faire une petite cure de désintoxication

Grosse frayeur...

Pierre — Wed, 22 Aug 2007 07:54:00 +0200

A priori, plus de peur que de mal... A priori ! Croisons les doigts !!

Hier soirs, alors que j'étais tranquillement installé sur mon canapé regardant d'un oeil distrait ce qui passait à la télé sur une des multiples chaînes de la Magic Freebox, le PC portable sur les genoux en train de jouer à WoW^[1]^[2], le téléphone sonne. N'étant pas totalement autiste lorsque je joue et me laissant tout de même interrompre en cours de jeu (au risque de me retrouver en l'état de carpette quand je reviens :-p), je pose donc comme à mon habitude le PC portable sur le canapé et je me lève pour attraper le téléphone qui n'est bien entendu jamais à portée de main quand il sonne ! C'est là que le drame arrive... Je me prends malencontreusement les pieds dans le fil d'alimentation et j'entends un gros BOUM... En me retournant, je vois le PC par terre... à l'envers et capot fermé...:-( Bien entendu, je m'empresse de l'ouvrir tout en répondant au téléphone d'une voix toute tremblante...) et constate que l'écran est.... tout ce qu'il y a de plus noir (en fait le PC est en train de se mettre en veille). Je titille cependant le bouton d'alimentation avec insistance jusqu'à obtenir un beau BSOD^[3].... C'est pas bon ça en général... Je commence donc à virer de toutes les couleurs... flinguer un PC de cette manière me met hors de moi... Je force alors l'arrêt pour faire repartir la bête de zéro et, miracle de la technologie moderne, celui ci repart normalement ! Une fois démarré, je vérifie tout de même les logs du système... et là je lis les messages répéés suivants :

Le périphérique \Device\Harddisk0\DR0 comporte un bloc défectueux.

Oups... Le disque aurait pris un coup... Pas cool... Cela dit, le message n'est répété que 6 fois et qui plus est... seulement au démarrage. Il ne semble pas se reproduire par la suite. Le PC semble depuis fonctionner correctement. J'ai volontairement fait un redémarrage au cours duquel les messages d'erreur ne sont pas réapparus... je surveille tout de même régulièrement, et je vais rapidement sauvegarder l'ensemble de mes données... et surveiller que le disque ne donne pas d'autres signes de faiblesses... On n'est jamais trop prudent ! Et à l'avenir... j'essaierai de ne pas me précipiter sur le téléphone... ou alors je veillerai à ce qu'il n'y ait pas de fil tendu sur le passage... ça pourra aussi m'éviter de m'ouvrir le crâne sur mon bureau.. :-s

Notes

[1] World of Warcraft pour ceux qui n'auraient pas saisi !

[2] Oui, je sais... C'est mal !

[3] Blue Screen Of the Death

Tête sous l'eau...

Pierre — Tue, 17 Jul 2007 23:15:00 +0200

Et encore y en a qui continuent à appuyer...

La semaine précédente était déjà bien chargée en raison de la préparation d'une opération de migration de système ben sensible prévue le week end dernier... Ajoutez à celà des demandes diverses et variées toutes plu urgentes que les autres... La migration ne s'est pas vraiment passée comme prévu... vu qu'un petit malin avait jugé bon de faire une grosse boulette sur le serveur et de ne surtout rien dire à personne... Bien sûr on a appris ça qu'au petit matin après une bonne nuit de galère... Je vous dis pas les envies de meurtre qui me sont passées par la tête... Vaudrait mieux pas que je retrouve le coupable ! Pour ma part la journée commencée le semedi à 21 heures s'est terminée le dimanche à 15 heures.. Inutile de préciser que j'étais bon à ramasser à la petite cuillère... Bien entendu lundi et mardi ont été tout aussi intense ! Le pompon ça a été ce soir... Une réunion de débriefing avec les grands chefs auxquels il a fallu expliquer les tenants et aboutissants de l'histoire. Je suis pas certain qu'ils ont tout compris.. je suis d'ailleurs certain de l'inverse... En tout cas ils nous ont trouvé plein de solutions miracles ! Reste à voir si ça va améliorer les choses !

Bien entendu, pendant ce temps là, tous les autres projets ont des demandes plus urgentes les unes que les autres... Vivement les vacances ! :-p

500 Go !

Pierre — Mon, 28 May 2007 21:49:00 +0200

Depuis le temps que ç me trottait dans la tête, j'ai enfin investi dans un gros disque dur externe !

Cela dit, l'achat de ce disque dur Western Digital (le Modèle My Book Essential Edition de 500 Go) a été un peu précipité car ayant depuis quelques temps des problèmes d'affichages sur mon PC portable, je dois le ramener au service après vente selon le verdict annoncé par le constructeur Asus... En effet, avoir soudainement des zones de l'écran qui se remplissent de pixels rouges clignotants... ça n'a rien d'un fonctionnement normal... J'ai bien trouvé le moyen de faire disparaitre ces affreux pixels en réorientant l'écran.. mais bon... le plus rigolo c'est que ceux ci sont liés à l'image et non à la position sur l'écran...

Après un bref tout sur leur site, je me suis donc rendu rapidement à la Fnac afin de d'acheter mon disque. Certains me diront que j'aurai pu aller dans la Rue Montgallet toute proche, mais je leur rétorquerai qu'après comparaison... c'était moins cher (oh, pas beaucoup) à la Fnac !!

L'installation s'est déroulée sans aucun souci : On branche... et ça marche !! Et depuis.. ça sauvegarde ! Ca sauvegarde ! Et demain, je vais en profiter pour suvegarder le PC du bureau avant qu'il ne soit mis à jour !

Google Bookmarks Button

Pierre — Mon, 01 May 2006 21:09:00 +0000

Une extension Firefox bien pratique

C'est au cours de mes pérégrinations sur le net, en parcourant les nouvelles parues sur mes blogs favoris (Prendre un café en l'occurence] que je suis tombé dessus ... Et j'en ai profité pour l'installer de suite ! Il s'agit de l'extension Google Bookmarks Button pour Firefox. Pas de révolution en soit... Cette extension ajoute un bouton qui vous permet d'accéder simplement au service Google Bookmarks, qui comme son nom l'indique, vous permet de centraliser vos bookmarks sur votre compte Google... un peu à la manière de Del.icio.us, mais de façon privée et avec votre compte Google (celui gui vous sert pour Gmail, Google Calendar, Google Talk... et j'en passe !

Moi qui cherchais une solution simple, efficace et sécurisée pour la gestion de mes bookmarks... aurais-je trouvé la solution ultime ? Bon.. je suis condamné à utiliser Firefox... mais ça c'est pas grave !!

Sauvegardes externalisées...

Pierre — Mon, 30 Jan 2006 21:24:00 +0000

Un moyen tout simple de sauvegarder la base de données de son blog...

Qui n'a jamais pesté pour ne pas avoir fait de sauvegarde de sa base de ses données et n'a pas perdu totu ou partie de son labeur... J'ai moi même eu l'occasion de le faire il n'y a pas si longtemps que ça... ! ALors que ça fait partie de mon quotidien... (il faut vivre dangereusement... je sais ! :-D) J'avais déjà mis en place une sauvegarde régulière de ma base en local, mais suite à mes pérégrinations sur le net, je suis tombé sur cette procédure de sauvegarde très bien faite ! Il suffit d'avoir accès à son serveur via ssh ou telnet (c'est mal !) et de pouvoir utiliser la crontab du serveur sur lequel il est hébergé (ce qui est mon cas.. Ce serait dommage vu que le serveur est dans un de mes placards !

Alors... A vos sauvegardes !

Sauvegarde système d'un SunFire 15K

Pierre — Mon, 25 Oct 2004 14:32:00 +0000

Description des opérations nécessaires afin de mettre en place une sauvegarde système automatique de 6 domaines d'un SunFire 15K sous Solaris 9. Le principe consiste à effectuer une sauvegarde des File System / et /usr à l'aide de la commande ufsdump. Cependant, ne disposant pas de lecteur de bandes sur les domaines, chaque File system est sauvegardé dans un fichier compressé situé sur un des System Controller (SC) du 15K. Une synchronisation des deux System Controller est alors réalisée à l'aide de la commande rsync pour permettre une redondance des données.

Sur chaque System Controller

Création des répertoires

L'arborescence suivante est créée sous la racine /export/install/exploitation :

scripts :

Exécutables communs à tous les domaines

conf :

Fichiers de configuration communs à tous les domaines

cfg/host :

Fichiers de configuration spécifiques au serveur sauvegardé, un répertoire par domaine.

backup/host :

Emplacement des sauvegardes système, propre à chaque serveur,un répertoire par domaine.

La création des répertoires est réalisée à l'aide des commandes suivantes :

 
mkdir /export/install/exploitation/scripts
mkdir /export/install/exploitation/conf

for name in "host1 host2 host3 host4 host5 host6"
do
     mkdir -p /export/install/exploitation/backups/${name}
     mkdir /export/install/exploitation/cfg/${name}
done

Configuration du serveur NFS

Le fichier contenant la liste des File System à exporter doit éventuellement modifié afin de permettre le partage des répertoires créés ci dessus. On s"assurera que la ligne suivante est présente dans le fichier /etc/dfs/dfstab :

share -F nfs -o rw,anon=0 /export/install

Le cas échéant on modifiera le fichier en conséquences, et on réexportera le réperotire si celui ci l'était déjà :

unshare /export/install

share -F nfs -o rw,anon=0 /export/install

devient :

share -F nfs -o rw,anon=0 /export/install

Puis :

unshare /export/install/
share -F nfs -o rw,anon=0 /export/install

Mise en place d'une purge automatique des fichiers

Une purge automatique des fichiers de sauvegarde est mise en place afin de supprimer les anciens fichiers de sauvegarde. On ne conservera que deux exemplaires de la sauvegarde système de chaque domaien dans les répertoires /export/install/exploitation/backups/host.

Mise en place le l'utilitaire logrotate sur les SC

Récupération du package :

Le package logrotate est récupéré sur le site Sunfreeware.com Celui-ci est alors transféré sur chaque system controller du SUnfire 15K et sera installé de la même manière sur les deux. On installera le package dans la version suivante :logrotate-3.6.9-sol8-sparc-local.gz ainsi que la dépendance suivante : popt-1.7-sol8-sparc-local.gz

Installation du package

Les packages sont transférés via FTP sur chaque Sytem Controller :

cd /tmp
gunzip logrotate-3.6.9-sol8-sparc-local.gz
pkgadd -d logrotate-3.6.9-sol8-sparc-local

gunzip popt-1.7-sol8-sparc-local.gz
pkgadd -d popt-1.7-sol8-sparc-local

Configuration de logrotate

On ajoute le fichier backups dans le répertoire /etc/logrotate.d.

Configuration de la crontab

On ajoute le scipt logrotate dans le répertoire /etc/cron.d.

La crontab est éditée et la ligne qui suit est ajoutée pour une exécution quotidienne de la rotation des fichiers à 5h00 du matin.

0 5 * * *  /etc/cron.d/logrotate

Sur Chaque Domaine Sauvegardé

Mise en place de l'automontage des répertoires

Création des répertoires :

mkdir -p /adm/exploitation/backups
mkdir -p /adm/exploitation/scripts
mkdir -p /adm/exploitation/conf
mkdir -p /adm/exploitation/cfg

Configuration de l'automonteur :

echo "/adm/exploitation    auto_adm -nobrowse" >> /etc/auto_master

echo "scripts    -ro     sf15k01sc0:/export/install/exploitation/scripts" >> /etc/auto_adm
echo "backups            sf15k01sc0:/export/install/exploitation/backups/$(hostname)" >> /etc/auto_adm
echo "conf       -ro     sf15k01sc0:/export/install/exploitation/conf" >> /etc/auto_adm
echo "cfg                sf15k01sc0:/export/install/exploitation/cfg/$(hostname)" >> /etc/auto_adm

Mise en place de la sauvegarde automatisée

La sauvegarde du système est planifiée deux fois par mois à l'aide de la crontab. L'entrée suivante est donc ajoutée dans la crontab de chaque domaine :

0 1 20,5 * * /adm/exploitation/scripts/save_syst.ksh

Script de Sauvegarde et fichiers de configuration

Trois fichiers sont nécessaire au bon fonctionnement de la sauvegarde :

/adm/exploitation/scripts/save_syst.ksh : Exécutable lancé par la crontab, global à tous les domaines.

/adm/exploitation/cfg/save_syst.cfg : Fichier de configuration propre à chaque domaine.

/adm/exploitation/conf/save_syst.lst : Liste des File system à sauvegarder