Mon plan de sauvegarde actuel

Aujourd’hui 31 mars c’est le World Backup Day, c’est un bon moment pour parler un peu de mon plan de sauvegarde.

En gros qu’est ce que j’ai à sauvegarder? En local, j’ai ma machine principale, celle qui contient beaucoup de choses, pour ne pas dire tout, en particulier mes photos et mon catalogue Lightroom. Mais j’ai également les données de mon serveur dédié Kimsufi, à savoir les sites web que j’héberge qui ont besoin d’être sauvegardés bien entendu.

Pour commencer par le serveur, il y a plusieurs tâches qui s’occupent des backups, à commencer par une sauvegarde que j’appelle « system » et qui historise (par snapshots) principalement /etc . Ensuite, tous les jours un dump de toutes mes bases de données est fait, à cela s’ajoute un backup des sites web. Le tout est fait en local sur le serveur.

Côté maison, le système (Windows) est sur un petit SSD que je ne sauvegarde pas, les données par contre sont sur une pile RAID 1 de 2 disques de 1To (ce qui ne constitue pas une sauvegarde). Des backups quotidiens sont effectués sur un NAS Qnap (RAID 1).

Pour terminer, un autre cron sur le serveur copie via rsync les sauvegardes des sites web (et du système) sur le NAS tous les jours également.

Le petit point noir de mon plan est que je n’ai pas vraiment de sauvegardes externalisées de mes données, donc en cas de grosse catastrophe à la maison – genre incendie ou me faire tout voler – je peux tout perdre.

Le système de plugins de Munin

Munin l’outil de surveillance serveur possède un système de plugins plutôt intéressant, voyons comment l’utiliser.

Munin fonctionne avec des plugins afin de surveiller les différents éléments d’un système. Tous les plugins ne sont pas activés par défaut après une installation. Nous allons voir qu’il existe une commande bien pratique pour faire l’inventaire des plugins et voir s’ils sont compatibles avec le système surveillé.

Continue reading « Le système de plugins de Munin »

script : vérifier que rTorrent est lancé

Bash check_rtorrent.sh

Pour la gestion de mes torrents, j’utilise rTorrent, j’ai eu l’occasion d’en parler dans ce billet et celui-ci. Il s’agit d’un daemon très stable, mais pour des raisons X ou Y (genre redémarrage de la machine), j’oublie de le lancer. Pour palier à cela, j’ai écrit ce petit script qui vérifie que le programme est bien démarré, sinon il va tenter de le faire. Si tel est le cas, un email est envoyé pour signaler que rTorrent a été redémarré. Le tout est loggé.

# Fichier de log
LOGPATH="/home/fabien/bin/log/check_rtorrent.log"
# Email
EMAIL="fabien@feub.net"
SUBJECT="[check] rTorrent"
# Si pas de fichier de log, on le crée
if [ ! -f $LOGPATH ]
then
touch $LOGPATH
fi
echo -n $(date) " : Vérification que rTorrent est lancé..." >> $LOGPATH
if /sbin/pidof rtorrent
then
echo "en fonctionnement : OK" >> $LOGPATH
else
echo -n "non démarré..." >> $LOGPATH
echo -n "démarrage..." >> $LOGPATH
/home/fabien/bin/btlaunch.sh
echo "en fonctionnement : OK" >> $LOGPATH
mail -s "$SUBJECT" "$EMAIL" < $LOGPATH
fi

Télécharger check_rtorrent.sh

Pour automatiser cela, je l'ajoute dans mon crontab pour qu'il vérifie toutes les 5 minutes :

$ crontab -e
*/5 * * * * /home/fabien/bin/check_rtorrent.sh

clavicogyre ver 1.5

Amélioration de mon petit bash de sauvegarde

Je publie le petit script de backup maison que j’utilise depuis plusieurs années. Simple, à base de rsync au travers d’SSH, il propose un petit menu pour ne sauvegarder que certaines partie de votre home (Images, Documents, Musique, etc), et possède l’option –delete de rsync facultative :

#!/bin/bash

#======================================================================
# CLAVICOGYRE - Script de backup
#======================================================================
# by fabien a. [fabien@feub.net]
# http://feub.net/
#======================================================================
# This program is free software; you can redistribute it and/or
# modify it under the terms of the GNU General Public License
# as published by the Free Software Foundation; either version 2
# of the License, or (at your option) any later version.
#
# This program is distributed in the hope that it will be useful,
# but WITHOUT ANY WARRANTY; without even the implied warranty of
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
# GNU General Public License for more details.
#
# You should have received a copy of the GNU General Public License
# along with this program; if not, 
#  - write to the Free Software
#		Foundation, Inc.,
#		51 Franklin Street,
#		Fifth Floor,
#		Boston, MA  02110-1301
#		USA.
#		- See http://www.gnu.org/licenses/gpl.html
#======================================================================

# Numero de version
VERSION="ver 1.5.02 (01/08/2008)"

# Chemin vers le serveur
SSHPATH="utilisateur@serveur:"

# Chemins
PHOTOS_SOURCE="$HOME/lightroom/"
PHOTOS_CIBLE="$SSHPATH/home/fabien/Images/Photos"
PICTURES_SOURCE="$HOME/Pictures/"
PICTURES_CIBLE="$SSHPATH/home/fabien/Images"
DOCS_SOURCE="$HOME/Documents/"
DOCS_CIBLE="$SSHPATH/home/fabien/Documents"
MUSIC_SOURCE="$HOME/Music/iTunes/iTunes Music/"
MUSIC_CIBLE="$SSHPATH/backup/Musique"
WWW_SOURCE="$HOME/www/"
WWW_CIBLE="$SSHPATH/home/fabien/www"
DEV_SOURCE="$HOME/Dev/"
DEV_CIBLE="$SSHPATH/home/fabien/Dev"
BIN_SOURCE="$HOME/bin/"
BIN_CIBLE="$SSHPATH/home/fabien/Backup/bin"
RESSOURCES_SOURCE="$HOME/Resources/"
RESSOURCES_CIBLE="$SSHPATH/home/fabien/Resources"

# Date d'execution du script
JOUR=$(date+%d) 	## + %d permet d'extraire le jour
MOIS=$(date+%m)	## +%m permet d'extraire le mois
ANNEE=$(date+%Y) 	## +%y permet d'extraire l'annee
HEURE=$(date+%H)	## +%H permet d'extraire l'heure
MINUTES=$(date+%M)	## +%M permet d'extraire les minutes

# Envoi du log par email
#MAIL_DEST="adresse@email.net"
#MAIL_SUJET="[Backup] du $ANNEE-$MOIS-$JOUR a $HEUR:$MINUTES"

# Rapport
RAPPORT="$HOME/Desktop/$ANNEE$MOIS$JOUR-clavicogyre-backup.log"

# Les options sont :
# v : verbose
# r : rursif
# u : update seulement
# p : prerve les permissions
# a : copie en tant qu'archive
# t : prerve la date
# --delete : supprime ce qui a ete supprime (copie stricte)

# Fonctions
backup() {

	SOURCE="$1"
	CIBLE="$2"

	echo "Backup $SOURCE ...."
	echo "" >> $RAPPORT
	echo "----------------------------------" >> $RAPPORT
	echo Backup du dossier ${1} du $JOUR'/'$MOIS \
              a $HEURE'h'$MINUTES >> $RAPPORT
	echo "----------------------------------" >> $RAPPORT
	
	# Si option delete
	if [ "$3" = "DEL" ]
	then
		echo "L'option --delete est activee, etes-vous sur? (O/[n])"
		read ACTDEL
		
		if [ "$ACTDEL" = "O" ]
		then
			OPTDEL="--delete"
			echo "Option --delete ON" >> $RAPPORT
		else
			OPTDEL=""
			echo "Option --delete OFF" >> $RAPPORT
		fi
	else
		OPTDEL=""
		echo "option --delete OFF" >> $RAPPORT
	fi	

	# rsync
	rsync -vrupatz --exclude-from=$HOME/bin/rsync_exclude.txt \
               $OPTDEL -e ssh "${SOURCE}" "${CIBLE}" | tee -a $RAPPORT 2>&1

	echo "" >> $RAPPORT

	echo "Fin du backup."
	echo "Un fichier de log se trouve ici : "
	echo $RAPPORT
	echo "----------------------------------"
}

# On efface l'ecran
clear

echo "CLAVICOGYRE : SCRIPT DE BACKUP - $VERSION"

# Demande du repertoire a sauvegarder
echo "----------------------------------"
echo "Repertoire a sauvegarder : "
echo "=== 1) Photos (Lightroom)"
echo "=== 2) Pictures"
echo "=== 3) Documents"
echo "=== 4) Music"
echo "=== 5) www"
echo "=== 6) Dev"
echo "=== 7) bin"
echo "=== 8) Resources"
echo "----------------------------------------------"
echo -n "L'ajout de 'strict' ajoutera l'option --delete de rsync "
echo -n "et effectuera ainsi une copie conforme."
echo -n "ATTENTION : a utiliser avec parcimonie, les fichiers"
echo "supprimes seront supprimes sur la sauvergarde egalement."
echo "Exemple : 2 strict"
echo "fera une copie stricte du dossier Documents."
echo "----------------------------------"
echo -n "---> choix : "
read REP
tput clear

case "$REP" in
"1" )
	backup $PHOTOS_SOURCE $PHOTOS_CIBLE;;
"1 strict" )
	backup $PHOTOS_SOURCE $PHOTOS_CIBLE "DEL";;
"2" )
	backup $PICTURES_SOURCE $PICTURES_CIBLE;;
"2 strict" )
	backup $PICTURES_SOURCE $PICTURES_CIBLE "DEL";;
"3" )
	backup $DOCS_SOURCE $DOCS_CIBLE;;
"3 strict" )
	backup $DOCS_SOURCE $DOCS_CIBLE "DEL";;
"4" )
	backup $MUSIC_SOURCE $MUSIC_CIBLE;;
"4 strict" )
	backup $MUSIC_SOURCE $MUSIC_CIBLE "DEL";;
"5" )
	backup $WWW_SOURCE $WWW_CIBLE;;
"5 strict" )
	backup $WWW_SOURCE $WWW_CIBLE "DEL";;
"6" )
	backup $DEV_SOURCE $DEV_CIBLE;;
"6 strict" )
	backup $DEV_SOURCE $DEV_CIBLE "DEL";;
"7" )
	backup $BIN_SOURCE $BIN_CIBLE;;
"7 strict" )
	backup $BIN_SOURCE $BIN_CIBLE "DEL";;
"8" )
	backup $RESSOURCES_SOURCE $RESSOURCES_CIBLE;;
"8 strict" )
	backup $RESSOURCES_SOURCE $RESSOURCES_CIBLE "DEL";;
* )
	echo "Aucun choix valide. Termine.";;
esac

echo "Fin du script."

Télécharger clavicogyre.sh

Note : les anti-slash \ ne sont pas à taper, ils indiquent que j’ai coupé les lignes pour que ça ne dépasse pas du cadre. Il s’agit d’une seule et même ligne.

Note 2 : Oui clavicogyre est une arme de Goldorak ;}