Ce site est optimisé pour être consulté depuis un navigateur moderne dans lequel JavaScript est activé.

[HowTo] Sauvegarder son "home" avec rsync

soupaloignon

Le problème semble venir de là peut être. Je suis sous Dapper.
On dirait qu'il n'y a pas les mêmes infos.

Dans la fenêtre édition des menus (logiciel "alacarte") j'ai une barre de menu en haut, avec : fichier/édition/aide.

Les commandes sont dans le menu fichier.

1/ Fichier/nouveau menu (donner un nom etc)
2/sélection du menu créé, puis retour au menu fichier/nouvelle entrée

Je regarde si je peux t'envoyer un mail avec une capture de l'interface de "alacarte".

Sinon tu peux me joindre sous jabber aussi

soupaloignon@jabber.fr

A+

Sorbus

Je viens de vérifier si j'avais "alacarte" dans le Synaptic.
Réponse : oui, déjà installé.
Par contre, le clic droit sur l'icône Ubuntu + "éditer les menus" m'ouvre une fenêtre intitulée "Agencement du menu" sans barre de menu en haut.

J'ai essayé de lancer "alacarte" dans un terminal. J'ai obtenu ça :

truc@truc-desktop:~$ alacarte
/var/lib/python-support/python2.4/gtk-2.0/bonobo/__init__.py: inconsistent use of tabs and spaces in indentation

Et l'ouverture de la même fenêtre "Agencement du menu" avec en prime une grosse surprise :
- la case à cocher de mon menu "Sauvegarde" est cochée,
- et ce menu contient deux entrées (correspondant à mes essais précédents) qui sont elles aussi cochées.

Bref, il y a une bricole du côté d'Edgy... mais il existe une voie de contournement.

Il ne me reste plus qu'à vérifier si les entrées de ce menu fonctionnent.

@+

Sorbus

Réponse : elles fonctionnent.
Du coup, j'ai testé le lancement du même script de sauvegarde de deux façons :
- une entrée dont le chemin d'accès au script .sh est précédé de xterm -hold -e (comme dans mon lanceur), mais sans que ne soit cochée la case « Exécuter dans un terminal ».
- une entrée sans xterm -hold -e , mais en cochant la case « Exécuter dans un terminal ».

Résultat dans le 1er cas : ouverture d'une fenêtre de type terminal, sur fond marron, qui permet de voir ce qui est sauvegardé. Avantage : cette fenêtre ne se ferme pas automatiquement à la fin de la sauvegarde, ce qui permet de lire tranquillement la petite synthèse de la sauvegarde faite par rsync une fois la sauvegarde achevée.
Inconvénient : pas de barre de défilement vertical dans cette fenêtre : on ne peut donc pas parcourir l'ensemble de ce qui a défilé lors de la sauvegarde pour rechercher d'éventuelles erreurs ou effectuer d'autres vérifications.

Résultat dans le second cas : ouverture d'une "vraie" fenêtre de terminal (sur fond noir) qui permet de voir ce qui est sauvegardé. Avantage : il y a une barre de défilement vertical, qui pourrait permettre une vérification de l'ensemble du déroulement de la sauvegarde. Inconvénient : la fenêtre du terminal se ferme automatiquement et instantanément dès la fin de la sauvegarde; il est donc en fait impossible de vérifier quoi que ce soit, ni même de lire la synthèse de la sauvegarde faite par rsync.

L'idéal serait de combiner les avantages des deux : barre de défilement + que la fenêtre de terminal ne se referme pas.

On progresse 😉

soupaloignon

Je n'ai pas fait de sauvegarde dernièrement, mais il me semble que je suis dans le 1er cas de figure, pas de barre de défilement.

Un truc qui serait bien cela serait d'enregistrer dans un fichier texte le contenu de ce qui s'est passé, avec comme nom de fichier la date du jour de la sauvegarde.

Edit : Je viens de lancer la sauvegarde. En fait j'ai un ascenseur, mais qui ne donne pas acces à la totalité de ce qui a été fait. Je pense que c'est juste une histoire de paramétrage pour indiquer le nombre de ligne que l'on veut garder.
Je me renseigne, car cela m'intéresse.

soupaloignon

Essaye ça

#!/bin/bash
rsync -rltgoDv --del --ignore-errors --force /home/soupaloignon/ /mnt/SAV/home/ | less

epictete

- Il faut signaler pour ceux qui préfèrent les interfaces graphiques le logiciel Grsync qui réalise les mêmes choses graphiquement avec des cases à cocher.

- Il est présent dans le dépôt Universe en version 0.4.3.

- Je l'utilise depuis plusieurs mois sans problème si ce n'est que quand on sauvegarde sur un disque externe en FAT32 qui ne gère pas les permissions il ne faut pas conserver propriétaire, groupe et permissions.
- Je pense que je formaterai mon prochain disque externe en ext3.

http://www.opbyte.it/grsync/

Sorbus

soupalognon :
J'ai essayé en fin de ligne l'ajout de

| less

... c'est intéressant. Pas d'ascenseur... et ça ne défile plus.
Mais possibilité avec les les touches "flèches" de descendre jusqu'en bas du terminal (jusqu'à la fin de l'opération de sauvegarde)... et de remonter jusqu'en haut (jusqu'au début).
Deux limites :
- comme ça ne "défile" pas, on ne visualise pas l'instant où la sauvegarde est terminée.
- si le script comporte successivement plusieurs lignes pour plusieurs sauvegardes différentes, seule la première ligne de commande s'effectue. Il semblerait que "less" bloque la suite.

En attendant, comme ça permet de vérifier l'ensemble du déroulement de la sauvegarde, on peut tester les effets des différentes options.

--stats : cette option ajoute aux deux dernières lignes, en fin de sauvegarde, (en italique ci-dessous) les 11 premières lignes de l'encadré ci-dessous.
Les deux premières (en gras : "nombre de fichiers" et "nombres de fichiers copiés") sont très utiles à la vérification d'une sauvegarde. Les autres m'intéressent moins... mais bon, ça ne prend pas trop de place.
Le nombre de fichiers est indiqué déjà en début de sauvegarde ("2167 files to consider").
-- stats n'ajoute donc qu'une information intéressante : le nombre de fichiers copiés (mais cette info est importante).

Number of files: 2167
Number of files transferred: 13
Total file size: 153589232 bytes
Total transferred file size: 188546 bytes
Literal data: 188546 bytes
Matched data: 0 bytes
File list size: 55397
File list generation time: 0.058 seconds
File list transfer time: 0.000 seconds
Total bytes sent: 70590
Total bytes received: 342

sent 70590 bytes received 342 bytes 141864.00 bytes/sec
total size is 153589232 speedup is 2165.30

--del je comprends ton choix pour avoir une sauvegarde "propre" de /home.
Je pense donc que je vais prévoir 2 sauvegardes de /home.
Une avec et une sans --del
(mon /home n'est pas énorme).

l'option -P que j'avais utilisée n'apporte rien d'intéressant dan sun terminal : elle indique en seconde la durée de sauvegarde de chaque fichier... De plus, avec "less", cette option -P laisse des traces incompréhensibles dans le terminal. Je vire cette option. Par contre, elle pourrait être intéressante en graphique.

soupaloignon

C'est vrai que je t'ai donné l'info du | less sans explication, désolé 😃

C'est moins convivial qu'avec l'ascenseur, par contre tout y est, avec effectivement les inconvénients que tu cites.

Je me demande si ce n'est pas juste un paramétrage de la console à faire. Comme si le terminal était programmé pour n'afficher qu'un certain nombre de lignes.
Il faudrait trouver un moyen qu'il affiche la totalité des lignes, indépendamment du nombre de celles-ci. Par contre je ne sais pas où trouver cette info

Sorbus

Merci epictete,

J'avais entendu parler du mode graphique pour rsync, sans savoir où le trouver.
J'ai donc installé Grsync par le Synaptic, pour voir.

Et pour que nous puissions nous comprendre entre usagers de rsync et de Grsync, j'ai fait un petit travail de correspondances :

Grsync, sans rien de coché, lance toujours rsync avec l'option "-r" (parcourt le dossier indiqué et tous ses sous-dossiers)
Pour le reste, les correspondances sont les suivantes :
"conserver la date" = option "-t"
"conserver les permissions" = option "-p"
"conserver le propriétaire" = option "-o"
"conserver les groupes" = option "-g"
"effacer sur la destination" = option "--del"
"informations complémentaires" = option "-v"
"ignorer les fichiers existants" = option "--ignore-existing"
"ne pas quitter le système de fichier" = option "-x"
"montrer la progression" = option "--progress"
"taille seulement" = option "--size-only"

et dans les options avancées :
"toujours faire la somme de contrôle" = option "-c"
"copier les liens symboliques comme liens symboliques" = option "-l"
"préserver les périphériques" = option "-D"
"mettre à jour seulement les fichiers existants" = option "--existing"
"conserver les fichiers transférés partiellement" = option "--partial"
"ne pas reproduire les valeurs uid/gid" = option "--numeric-ids"
"compresser les données" = option "-z" (si j'ai bien compris, cette option ne compresse pas les données au final, mais les compresse seulement lors du tranfert pour que celui-ci soit plus rapide)
"faire une sauvegarde" = option "-b"

Le bouton "Simulation" correspond à l'option "-n"

Les options de la commande utilisée par soupaloignon
-rltgoDv --del --ignore-errors --force
correspondraient en mode graphique Grsync à :
par défaut dans Grsync : option "-r"
"conserver la date" = option "-t"
"conserver le propriétaire" = option "-o"
"conserver les groupes" = option "-g"
"effacer sur la destination" = option "--delete"
"informations complémentaires" = option "-v"
"copier les liens symboliques comme liens symboliques" = option "-l"
"préserver les périphériques" = option "-D"
(mais il manque en graphique "--ignore-errors" et "--force")
et "--delete" ne correspond pas exactement à "--del")

--del synonyme pour --delete-during
--delete efface les fichiers qui n'existent pas chez l'émetteur
--delete-before efface avant le transfert (par défaut)
--delete-during efface au cours du transfert, pas avant
--ignore-errors efface même s'il y a eu des erreurs E/S
--force force la suppression de répertoires même non-vides

Les options de la commande suggérées par Maps :
-az (ce qui équivaut à --rlptgoDz)
correspondraient en mode graphique Grsync à :
par défaut dans Grsync : option "-r"
"conserver la date" = option "-t"
"conserver les permissions" = option "-p"
"conserver le propriétaire" = option "-o"
"conserver les groupes" = option "-g"
"copier les liens symboliques comme liens symboliques" = option "-l"
"préserver les périphériques" = option "-D"
"compresser les données" = option "-z"

Les options de la commande utilisée jusqu'à présent par Sorbus :
-Pauvz --stats (ce qui équivaut à --PrlptgoDuvz --stats)
correspondraient en mode graphique Grsync à :
par défaut dans Grsync : option "-r"
"conserver la date" = option "-t"
"conserver les permissions" = option "-p"
"conserver le propriétaire" = option "-o"
"conserver les groupes" = option "-g"
"copier les liens symboliques comme liens symboliques" = option "-l"
"préserver les périphériques" = option "-D"
"compresser les données" = option "-z"
"informations complémentaires" = option "-v"
"montrer la progression" = option "--progress"
"conserver les fichiers transférés partiellement" = option "--partial"
("-P" équivalent à --partial --progress)
(mais il manque en graphique "-u" et "--stats")

J'ai souligné les options communes à soupaloignon, Maps et Sorbus.
(je n'ai pas cherché les correspondances entre les options utilisées par JoelS avec les possibilités de Grsync... simplement parce que beaucoup d'options utilisées par JoelS n'existent pas dans Grsync)

Question : epictete, pour une sauvegarde de ext3 vers ext3, tu coches quoi dans Grsync ?

Edit 23/12 : D'après la réponse d'epictete ci-dessous, j'ajoute :
Les options utilisées par epictete dans Grsync :
ce qui correspondrait à rsync -rtvl --delete --ignore-existing --progress
et si copie sur ext3 à rsync -rtpogvl --delete --ignore-existing --progress
par défaut dans Grsync : option "-r"
"conserver la date" = option "-t"
"effacer sur la destination" = option "--delete"
"informations complémentaires" = option "-v"
"ignorer les fichiers existants" = option "--ignore-existing"
"montrer la progression" = option "--progress"
"copier les liens symboliques comme liens symboliques" = option "-l"
... et si son disque externe était formaté ext3, il ajouterait :
"conserver les permissions" = option "-p"
"conserver le propriétaire" = option "-o"
"conserver les groupes" = option "-g"

epictete

- Chapeau pour le topo Sorbus !

- Mon disque dur externe actuel est en FAT32 et donc je ne coche

* sur le 1er onglet que : « Conserver la date, effacer sur la destination, informations complémentaires, ignorer les fichiers existants, montrer la progression »
* et sur le 2ème onglet : « Copier les liens symboliques comme liens symboliques ».

soupaloignon

Houwwww... Très bon boulot Sorbus, ton décryptage de Grsync.
Ca te dirait de l'inclure dans le tuto de rsync ?

Sinon tu as lu mon post de 22h19 ?

soupaloignon

J'ai été en contact avec un gars du forum qui avait fait un paquet pour la version 0.5 de Grsync
Ca se passe ici : http://forum.ubuntu-fr.org/viewtopic.php?pid=174278

Sorbus

--> soupaloignon :
sans "less", le problème n'est pas seulement le nombre de lignes accessibles par l'ascenseur dans le terminal, mais aussi celui de la fermeture immédiate du terminal dès la sauvegarde terminée (tu as un truc pour empêcher cette fermeture immédiate ?)

Je me demande si ce n'est pas juste un paramétrage de la console à faire. Comme si le terminal était programmé pour n'afficher qu'un certain nombre de lignes.
Il faudrait trouver un moyen qu'il affiche la totalité des lignes, indépendamment du nombre de celles-ci. Par contre je ne sais pas où trouver cette info.

Je ne sais pas plus... mais c'est certainement la bonne piste.

--> epictete :
Je viens d'effectuer la sauvegarde de mon /home par Grsync (en renonçant à mes options "-u" et "--stats").
La sauvegarde s'est très bien déroulée.

Juste un petit bug hélas : impossible de quitter Grsync... la fenêtre refuse de se fermer (une originalité sous Edgy ?)
[Edit 23/12 : non, je n'ai plus de problème avec Grsync sous Edgy... le blocage constaté hier était sans doute du à mes multiples manipulations pour "décrypter" Grsync. Question réglée]

Je note que la fenêtre de Grsync permet de visualiser (avec barre de défilement verticale) la totalité du déroulement de la sauvegarde. Juste un petit défaut : cette fenêtre est de taille réduite et ne semble pas pouvoir être redimensionnée à la taille de l'écran. Les données se trouvent un peu à l'étroit... et donc un peu difficiles à lire.

... à suivre

soupaloignon

tu rajoutes read comme dernierre ligne du script. Cela te laisse la fenêtre du terminal ouverte

#!/bin/bash
rsync -rltgoDv --del --ignore-errors --force /home/soupaloignon/ /mnt/SAV/
read

Sorbus

--> soupalognon :
--> OK pour inclure le décryptage de Grsync dans le tuto de rsync
--> la dernière version du paquet Grsync de ersplus est-elle en français ?
Pour ce soir, je m'arrête là :
Buenas noches.
--> Vu aussi ton dernier message : merci pour "read" : j'ajoute !

soupaloignon

A croire que tout le monde est abonné au sujet vu la rapidité des réponses 😉

Cela fait un moment que j'ai testé ça, me semble qu'elle est en anglais

Je m'arrête là aussi pour ce soir

A+

abinadi

Bonjour,
J'ai installé Grsync et l'interface est en français.
Si ça peut faire avancer le shimiliblig 😃
Bonnes fêtes a tous (tes)

Sorbus

Bonjour abinadl,

Quelle version de Grsync as-tu installé ?
- 0.4.3-2 (version en français, qui est actuellement dans les dépôts, et que j'ai installée aussi par le Synaptic) ?
- ou bien une version plus récente comme la 0.5-1 proposée par ersplus (dans le lien indiqué par soupaloignon) ?

epictete

- Merci à ersplus pour le paquet Grsync 0.5 et à soupaloignon pour le lien !

Sorbus

--> soupaloignon.
Je n'ai pas réussi avec "read" dans mon script. J'ai pourtant viré "exit 0" et j'ai mis "read" à la place à la fin du script. Mais la fenêtre du terminal se ferme toujours immédiatement à la fin de la sauvegarde.

--> pour tous, il serait intéressant de comparer nos choix d'options rsync/Grsync...
... selon le type de sauvegarde que nous voulons réaliser.
Pour partir sur les mêmes bases :
Toujours en "local" : d'un HD vers un autre HD "interne" ou bien d'un HD interne vers un HD usb externe, ou encore d'une partition à l'autre du même HD (cette dernière solution n'est pas conseillée, car si ce HD lâche, plus de sauvegarde; mais pour les options de sauvegarde, c'est identique)
1 - sauvegarde "home" d'une partition ext3 vers une partition ext3
2 - sauvegarde en local de "profiles" Thunderbird et Firefox d'une partition ext3 vers une partition ext3
2 bis - sauvegarde en local de "profiles" Thunderbird et Firefox d'une partition FAT32 vers une partition FAT32
3 - sauvegarde en local de "MesDocs" d'une partition FAT32 (partagée par Ubuntu et Windows) vers une partition FAT32.

Je poursuis uniquement sur le cas 1 (sauvegarde de "home") car c'est l'objet de ce fil, en relevant seulement les options pour lesquelles les choix de soupaloignon, Maps, Sorbus et epictete divergent :

Nos choix ont en commun :
par défaut dans Grsync : option "-r"
"conserver la date" = option "-t"
"conserver le propriétaire" = option "-o"
"conserver les groupes" = option "-g"
"copier les liens symboliques comme liens symboliques" = option "-l"

[Edit 18 août 2007 : sur l'intérêt de l'option "-t", voir ce fil de discussion : http://forum.ubuntu-fr.org/viewtopic.php?pid=1106783#p1106783 : voir le début, puis les messages 20 à 22 de ce fil.]

"conserver les permissions" = option "-p"
soupaloignon, tu es le seul des 4 à ne pas avoir fait le choix de cette option. Pourquoi ? N'a-t-elle pas une certaine importance pour disposer d'une sauvegarde identique au /home d'origine ?

"préserver les périphériques" = option "-D"
epictete, tu es le seul des 4 à ne pas avoir fait le choix de cette option.
Voici ce que dit le manuel au sujet de cette option :
-D, --devices
Cette option entraîne le transfert d'informations sur les périphériques caractères et blocs vers le système distant pour recréer ces périphériques. Cette option n'est disponible que pour le super-utilisateur.
"disponible que pour le super-utilisateur"... rsync et Grsync semblent pourtant bien fonctionner avec cette option sans être en root et sans "sudo" ? Mais du coup, l'option fonctionne-t-elle ?
Et est-ce utile de sauvegarder /home avec cette option (autrement dit : est-ce que sont enregistrées sur /home des informations sur les "périphériques caractères et blocs") ?

"effacer sur la destination" = option "--delete"
(ou bien rsync --del --ignore-errors" et "--force")
Je ne pense pas que la différence entre --delete (effacement avant le transfert) et --del (effacement au cours du transfert) ait une conséquence dans le cas d'une sauvegarde en local.
Je suis OK pour l'intérêt de cette option pour avoir un /home propre.
(mais comme déjà dit, méfiant par rapport à mes fausses manips, je ferai une double sauvegarde de /home, une avec et une sans --del(ete))
L'absence de --ignore-errors et --force dans Grsync pourrait conduire à utiliser plutôt rsync... si ces commandes ont un réel intérêt pour la sauvegarde de /home.
Comme je ne pige pas bien l'intérêt de ces commandes et leurs conséquences... soupaloignon, pourrais-tu expliquer ?

"informations complémentaires" = option "-v"
Maps est le seul des 4 à ne pas l'avoir choisie. Mais j'avoue ne pas avoir compris quels informations complémentaires cette option fournissait. Je n'ai pas vu de différence dans le terminal entre une sauvegarde réalisée avec cette option et une autre sans. soupaloignon et epictete, vous avez repéré quelque chose ?
[edit 31/12 : si, vu : voir messages 46 et 48 de ce fil : -v n'apporte rien quand --progress est aussi utilisé... mais sans --progress, -v a un intérêt]

"montrer la progression" = option "--progress"
Cette option n'a d'intérêt qu'en graphique (Grsync), et ce n'est qu'esthétique...
[edit 31/12 : rectification sur ce point, après de nouveaux essais... cette option n'a rien à voir avec la barre de progression de Grsync, ce que j'avais naïvement supposé en écrivant ceci (à quoi aurait servi cette option dans rsync :/ ). En fait, l'option --progress a un intérêt aussi bien avec rsync qu'avec Grsync : elle affiche dans le terminal : la liste de tous les fichiers et dossiers "contrôlés" au fur et à mesure de la sauvegarde... et, au cours du transfert, elle affiche le temps restant et le pourcentage de transfert des fichiers transférés... du coup, elle remplit d'infos le terminal beaucoup plus que l'option -v --> voir les messages 46 et 48 de ce fil]

"compresser les données" = option "-z"
Maps et Sorbus. Comme le souligne Maps : "Pas très utile dans le cas d'une copie en local, mais très efficace lors d'une sauvegarde via SSH."
Dans notre cas (sauvegarde locale), on devrait donc se passer de cette option.

"ignorer les fichiers existants" = option "--ignore-existing"
epictete, tu es le seul des 4 à utiliser cette commande : quel est sont intérêt pour une sauvegarde de /home (quels sont ses effets) ?

"conserver les fichiers transférés partiellement" = option "--partial"
utilisé par Sorbus.
En fait, cette option n'a sans doute pas grand intérêt dans le cas d'une sauvegarde en local, le transfert étant rarement interrompu dans ce cas.
Manuel : --partial
Par défaut, rsync va effacer tous les fichiers transférés partiellement si le transfert est interrompu. Dans certaines circonstances il est préférable de conserver les fichiers partiellement transférés. L'option --partial demande à rsync de conserver le ficher incomplet ce qui devrait accélérer un transfert ultérieur de la fin du fichier.

"rsync -u"
(option indisponible dans Grsync)
utilisé par Sorbus.
D'après francolsa http://forum.ubuntu-fr.org/viewtopic.php?pid=438626#p438626 "L'option -u sert à ne faire qu'une mise à jour des fichiers copiés (update), cela ne les recrée pas s'ils sont identiques." J'ai mis cette option simplement pour que la sauvegarde soit plus rapide... mais dans le cas d'une petite partition /home, en local, ça n'a peut-être pas grand intérêt.
Manuel : -u, --update
Ceci force rsync à ignorer tous les fichiers pour lesquels le fichier de destination existe déjà et avec une date postérieure à celle du fichier de source. (Si un fichier destination existant a une date égale à celle du fichier source, il ne sera mis à jour que si les tailles diffèrent.)
Dans l'implémentation courante de --update, une différence de format du fichier entre le récepteur et l'émetteur est toujours considérée comme suffisamment importante pour le mettre à jour, quelque soient les dates des fichiers. Autrement dit, si la source est un répertoire ou un lien symbolique tandis que la destination possède un fichier, alors un transfert sera lancé, peu importe les dates. Ce comportement est susceptible d'être modifié dans le futur (si vous avez un point de vue, vous pouvez en faire part, en anglais, à la liste de diffusion).

"rsync --stats"
(option indisponible dans Grsync)
utilisé par Sorbus.
Cette option ajoute une donnée intéressante : le nombre de fichiers copiés.

@+

« Page précédente Page suivante »