backup
Différences
Ci-dessous, les différences entre deux révisions de la page.
Les deux révisions précédentesRévision précédenteProchaine révision | Révision précédenteProchaine révisionLes deux révisions suivantes | ||
backup [2020/05/15 00:03] – ré-ordonancement des étapes pour que ça fonctionne. et ajout d'un warning. jocelynd | backup [2021/03/07 23:08] – same jocelynd | ||
---|---|---|---|
Ligne 3: | Ligne 3: | ||
# Sauvegardes | # Sauvegardes | ||
- | ## Intro | + | </ |
+ | |||
+ | < | ||
+ | |||
+ | ## Mise en place | ||
+ | |||
+ | ### Intro | ||
Les backups sont effectués à l'aide de [borgbackup](https:// | Les backups sont effectués à l'aide de [borgbackup](https:// | ||
- | Les secrets sont stockés dans un trousseau Keyringer. Comme le niveau des prérequis à l' | + | Les secrets sont stockés dans un trousseau Keyringer. Comme le niveau des prérequis à l' |
```bash | ```bash | ||
Ligne 17: | Ligne 23: | ||
- | ## Étape 1 : configurer les sauvegardes de la machine que l'on veut sauvegarder | + | ### Étape 1 : configurer les sauvegardes de la machine que l'on veut sauvegarder |
Editez ou créez le fichier de configuration dans le `host_vars` de votre machine (par exemple `host_vars/ | Editez ou créez le fichier de configuration dans le `host_vars` de votre machine (par exemple `host_vars/ | ||
Ligne 36: | Ligne 42: | ||
remote_server: | remote_server: | ||
| | ||
- | # FACULTATIF : chemins à sauvegarder (en plus des chemins déjà listés dans le base_source_path de group_vars/ | + | # FACULTATIF : chemins à sauvegarder |
+ | # (en plus des chemins déjà listés dans le base_source_path de group_vars/ | ||
extra_source_paths: | extra_source_paths: | ||
- "/ | - "/ | ||
Ligne 63: | Ligne 70: | ||
``` | ``` | ||
- | ## Étape 2 : ajouter la machine à sauvegarder au groupe borg_clients | + | ### Étape 2 : ajouter la machine à sauvegarder au groupe borg_clients |
Dans `ansible_hosts` ajouter la machine à sauvegarder au groupe `borg_clients`. | Dans `ansible_hosts` ajouter la machine à sauvegarder au groupe `borg_clients`. | ||
- | ## Étape 3 : jouer le rôle sur la machine à sauvegarder | + | ### Étape 3 : jouer le rôle sur la machine à sauvegarder |
```bash | ```bash | ||
- | ansible-playbook --diff -l toto.faimaison.net -t borg playbook-fma.yml | + | ansible-playbook |
``` | ``` | ||
- | ## Étape 4: ajouter aux serveurs de sauvegarde la nouvelle machine à sauvegarder | + | ### Étape 4: ajouter aux serveurs de sauvegarde la nouvelle machine à sauvegarder |
Mettre à jour la variable | Mettre à jour la variable | ||
Ligne 79: | Ligne 86: | ||
```yaml | ```yaml | ||
borg_server_backup_clients: | borg_server_backup_clients: | ||
- | - name: "" | + | - name: "toto" |
ssh_pubkey: "" | ssh_pubkey: "" | ||
``` | ``` | ||
- | ## Étape 5 : vérifier que tous les serveurs de backups sont dans le groupe backup_servers | + | ### Étape 5 : vérifier que tous les serveurs de backups sont dans le groupe backup_servers |
Dans `ansible_hosts` vérifier que le groupe `backup_servers` connait bien toutes les machines de backups de faimaison. | Dans `ansible_hosts` vérifier que le groupe `backup_servers` connait bien toutes les machines de backups de faimaison. | ||
- | ## Étape 6 : jouer le role sur les backup_servers | + | ### Étape 6 : jouer le role sur les backup_servers |
</ | </ | ||
Ligne 94: | Ligne 101: | ||
Il faut avoir accès au serveur de sauvegarde visé pour pouvoir effectuer cette étape… Ou bien la faire faire par quelqu' | Il faut avoir accès au serveur de sauvegarde visé pour pouvoir effectuer cette étape… Ou bien la faire faire par quelqu' | ||
</ | </ | ||
+ | |||
+ | <WRAP center round tip 60%> | ||
+ | Si avertissement car catalogue apt périmé sur le serveur de sauvegarde, '' | ||
+ | |||
+ | Solution long terme : mettre à niveau carlota :-p. | ||
+ | |||
+ | --- //Jocelyn 2020/10/06 00:25// | ||
+ | </ | ||
+ | |||
+ | |||
< | < | ||
```bash | ```bash | ||
- | ansible-playbook --diff -l backup_servers | + | ansible-playbook --diff |
``` | ``` | ||
+ | |||
+ | ## Procédures manuelles | ||
+ | |||
+ | Ces procédures nécessitent que les sauvegardes aient été configurées conformément aux sections précédentes, | ||
+ | |||
+ | ### PROCÉDURE : Récupérer d'une sauvegarde plantée (lock) | ||
</ | </ | ||
+ | <WRAP center round tip 60%> | ||
+ | On prend ici l' | ||
+ | </ | ||
- | ====== TOUT CE QUI EST EN DESSOUS DE CE TITRE EST DEPRECIE ====== | + | < |
+ | On peut avoir ce genre de message remonté par cron dans un mail par exemple : | ||
- | ===== trompe-souris ===== | + | > Remote: borg.locking.LockTimeout: |
- | Les backups sont executé | + | Cela veut dire qu'une sauvegarde a crashée, et par prudence |
- | Le principe consiste à faire un backup du maximum de choses (bdd, site, configuration) et les déposer sur // / | ||
- | Ensuite, moyennant l' | + | On commence par ouvrir un « shell borg » avec toutes les variables |
+ | ``` | ||
+ | user@bambelle $ sudo / | ||
+ | [borg@carlota.faimaison.net: | ||
+ | ``` | ||
- | Pour l'instant | + | On vérifie ensuite qu'on est bien bloqué par le lock |
+ | ``` | ||
+ | [borg@carlota.faimaison.net: | ||
+ | [… snip : l'erreur | ||
+ | Remote: borg.locking.LockTimeout: / | ||
+ | […] | ||
+ | ``` | ||
- | * bdd pour le si | + | Il a pas l'air content ! À condition qu' |
- | * conf dns et postfix | + | ``` |
- | * sites du wiki et de l'assos | + | [borg@carlota.faimaison.net: |
- | * la configuration des mailing-list et les archives | + | ``` |
- | ===== Big Backup serveur ===== | + | Puis on vérifie que ça va mieux : |
- | 4U / 48Go de RAM / 35 Go de disques en RAID6 | + | |
- | 2 approches de la sauvegarde: | + | ``` |
- | * local avec [Borg[https://www.borgbackup.org]] 10 Go de RAM / 15To (VM " | + | [borg@carlota.faimaison.net:repos/bambelle |
- | * en VM, soit 150 VM (à 256 Mo de RAM et 40Go avec une moyenne de 150 Go). | + | bambelle-2020-05-17-02-00 |
+ | bambelle-2020-05-24-02-00 | ||
+ | bambelle-2020-05-31-02-00 | ||
+ | bambelle-2020-06-07-02-00 | ||
+ | bambelle-2020-06-08-02-00 | ||
+ | bambelle-2020-06-09-02-00 | ||
+ | bambelle-2020-06-10-02-00 | ||
+ | bambelle-2020-06-11-02-00 | ||
+ | bambelle-2020-06-12-02-00 | ||
+ | bambelle-2020-06-13-02-00 | ||
+ | bambelle-2020-06-14-02-00 | ||
+ | ``` | ||
+ | La prochaine sauvegarde devrait pouvoir s' | ||
- | Lien vers la solution | + | ### PROCÉDURE : Créer une sauvegarde manuellement |
+ | |||
+ | Avant certaines opérations délicates, on peut souhaiter réaliser une sauvegarde manuelle. | ||
+ | |||
+ | 1. se connecter sur la machine à sauvegarder | ||
+ | 2. passer root `sudo su` | ||
+ | 3. Exécuter le script | ||
+ | |||
+ | ### PROCÉDURE : | ||
+ | |||
+ | </ | ||
+ | <WRAP center round important 60%> | ||
+ | Cette procédure restaure l' | ||
+ | </ | ||
+ | |||
+ | < | ||
+ | |||
+ | 1. se connecter sur la machine à sauvegarder | ||
+ | 2. passer root `sudo su` | ||
+ | 3. Exécuter le script de sauvegarde `/ | ||
+ | 4. lister les sauvegardes disponibles : | ||
+ | ``` | ||
+ | [borg@carlota.faimaison.net: | ||
+ | bambelle-2020-05-17-02-00 | ||
+ | bambelle-2020-05-24-02-00 | ||
+ | bambelle-2020-05-31-02-00 | ||
+ | bambelle-2020-06-07-02-00 | ||
+ | bambelle-2020-06-10-02-00 | ||
+ | bambelle-2020-06-11-02-00 | ||
+ | bambelle-2020-06-12-02-00 | ||
+ | bambelle-2020-06-13-02-00 | ||
+ | bambelle-2020-06-14-02-00 | ||
+ | bambelle-2020-10-04-02-00 | ||
+ | bambelle-2020-10-05-02-00 | ||
+ | ``` | ||
+ | Repérer le nom de l' | ||
+ | 5. Repasser root (en conservant les variables d' | ||
+ | ``` | ||
+ | [borg@carlota.faimaison.net: | ||
+ | ``` | ||
+ | 6. Se rendre à la racine (sinon on va restaurer notre sauvegarde dans un sous-dossier) | ||
+ | ``` | ||
+ | root@bambelle # cd / | ||
+ | ``` | ||
+ | 7. Lancer la restauration de l' | ||
+ | |||
+ | ``` | ||
+ | root@bambelle # borg extract $REPOSITORY:: | ||
+ | ``` | ||
+ | |||
+ | Des opérations supplémentaires peuvent ensuite être nécessaire selon le type de fichiers restaurés (ex: restaurer un fichier .sql dans une base). | ||
+ | |||
+ | |||
+ | ### PROCÉDURE : Récupérer une sauvegarde depuis une autre machine | ||
+ | |||
+ | On doit récupérer : | ||
+ | |||
+ | - le dépôt borg qui contient les sauvegardes de la machine | ||
+ | - la passphrase du dépôt | ||
+ | |||
+ | Le dépôt (repository) est contenu sur le serveur de sauvegarde ((actuellement, | ||
+ | |||
+ | On va imaginer qu'on veut récupérer les sauvegardes de la machine bambelle.faimaison.net dans le cas ou celle-ci aurait-été détruite. | ||
+ | |||
+ | 1. Récupérer le dossier */ | ||
+ | 2. Récupérer la passphrase du dépôt et la stocker dans la variable qui va bien : | ||
+ | ``` | ||
+ | BORG_PASSPHRASE=$(keyringer fma-machines decrypt noyau/ | ||
+ | ``` | ||
+ | 3. Lister les archives contenues dans le dépôt : | ||
+ | ``` | ||
+ | $ borg list ~/ | ||
+ | bambelle-2020-05-17-02-00 | ||
+ | bambelle-2020-05-24-02-00 | ||
+ | bambelle-2020-05-31-02-00 | ||
+ | bambelle-2020-06-07-02-00 | ||
+ | bambelle-2020-06-10-02-00 | ||
+ | bambelle-2020-06-11-02-00 | ||
+ | bambelle-2020-06-12-02-00 | ||
+ | bambelle-2020-06-13-02-00 | ||
+ | bambelle-2020-06-14-02-00 | ||
+ | bambelle-2020-10-04-02-00 | ||
+ | bambelle-2020-10-05-02-00 | ||
+ | ``` | ||
+ | |||
+ | 4. Créer un dossier pour extraire l' | ||
+ | ``` | ||
+ | $ mkdir ~/ | ||
+ | $ cd ~/ | ||
+ | $ borg extract ~/ | ||
+ | ``` | ||
+ | |||
+ | </ | ||
+ | |||
+ | <WRAP center round tip 60%> | ||
+ | Il est aussi possible d' | ||
+ | </ |
backup.txt · Dernière modification : 2021/04/08 19:51 de gde