Skip navigation

Debian 9 : réplication de donnée

Mise en place de GlusterFS sur Debian 9

GlusterFS est un système de fichiers réseau évolutif et open-source adapté aux charges de travail intensive en données. Permettant aussi et surtout l’accès concurrent aux ressources de stockage.

Environnement

IP Nom de l’hôte Rôle OS
172.16.0.10/24 gluster1.stan.local Nœud Debian 9
172.16.0.11/24 gluster2.stan.local Nœud Debian 9
172.16.0.12/24 client1.stan.local Client Debian 9
172.16.0.13/24 client2.stan.local Client Debian 9

Serveur de stockage

Configuration DNS

: à faire sur l’ensemble des nœuds serveur.

À défaut de DNS, éditer le fichier /etc/hosts

root@gluster1-2~#: vim /etc/hosts

aperçu du contenu du fichier

172.16.10.10 gluster1.stan.local gluster1
172.16.10.11 gluster2.stan.local gluster2
172.16.10.12 client1.stan.local client1
172.16.10.13 client2.stan.local client2

Installation de GlusterFS



Installer le packet glusterfs-server (côté serveur).


root@debian~#: apt install -y glusterfs-server


Démarrage du service glusterd.


root@gluster1-2~#: systemctl start glusterfs-server


Démarrage du service glusterd au boot.


root@gluster1-2~#: systemctl enable glusterfs-server


Vérifier le status de ce service.


root@gluster1-2~#: systemctl status glusterfs-server


sortie


● glusterfs-server.service - GlusterFS, a clustered file-system server
   Loaded: loaded (/usr/lib/systemd/system/glusterd.service; enabled; vendor preset: disabled)
   Active: active (running) since Sun 2018-04-08 02:48:27 EDT; 8s ago
 Main PID: 1296 (glusterd)
   CGroup: /system.slice/glusterd.service
           └─1296 /usr/sbin/glusterd -p /var/run/glusterd.pid --log-level INFO

Apr 08 02:48:27 gluster1.stan.local systemd[1]: Starting GlusterFS, a clustered file-syst.....
Apr 08 02:48:27 gluster1.stan.local systemd[1]: Started GlusterFS, a clustered file-syste...r.
Hint: Some lines were ellipsized, use -l to show in full.


Configuration du firewall


 : pare défaut glusterd écoute sur le port 24007 mais il y a autant de port ouvert que de nœud, il faut donc ajuster le fierwall au besoin.


Stockage


Localiser le disque dur, dans le cas présent sdb.


root@gluster1-2~#: lsblk


sortie


NAME            MAJ:MIN RM  SIZE RO TYPE MOUNTPOINT
sda               8:0    0    8G  0 disk
├─sda1            8:1    0    1G  0 part /boot
└─sda2            8:2    0    7G  0 part
  ├─centos-root 253:0    0  6.2G  0 lvm  /
  └─centos-swap 253:1    0  820M  0 lvm  [SWAP]
sdb               8:16   0   12G  0 disk
sr0              11:0    1 1024M  0 rom 


Créer la partition destiné à GlusterFS avec fdisk /dev/sdb


root@gluster1-2~#: fdisk /dev/sdb


sortie


Welcome to fdisk (util-linux 2.23.2).

Changes will remain in memory only, until you decide to write them.
Be careful before using the write command.

Device does not contain a recognized partition table
Building a new DOS disklabel with disk identifier 0xc83fd611.

Command (m for help): n
Partition type:
   p   primary (0 primary, 0 extended, 4 free)
   e   extended
Select (default p): p
Partition number (1-4, default 1): Entrée
First sector (2048-25165823, default 2048): Entrée
Using default value 2048
Last sector, +sectors or +size{K,M,G} (2048-25165823, default 25165823): Entrée
Using default value 25165823
Partition 1 of type Linux and of size 12 GiB is set

Command (m for help): w
The partition table has been altered!

Calling ioctl() to re-read partition table.
Syncing disks.


Formater la partition.


root@gluster1-2~#: mkfs.ext4 /dev/sdb1


Créer le dossier de montage.


root@gluster1-2~#: mkdir -p /data/gluster


Monter temporairement la nouvelle partition dans ce dossier.


root@gluster1-2~#: mount /dev/sdb1 /data/gluster


Pour monter la partition au boot il y a 2 méthodes :


    

  •  créer un fichier unit.mount
    • 

  •  éditer le classique /etc/fstab
    • 



Créer un fichier unit.mount


root@gluster1-2~#: vim /etc/systemd/system/data-gluster.mount


contenu du fichier


[Unit]
Description=Mount disk /dev/sdb1 for GlusterFS

[Mount]
What=/dev/sdb1
Where=/data/gluster
Type=ext4
Options=defaults

[Install]
WantedBy=multi-user.target


root@gluster1-2~#: systemctl start data-gluster.mount
root@debian~#: systemctl enable data-gluster.mount


 : pour rappel, le nom du fichier unit doit être le même que celui du chemin du point de montage en remplaçant les « / » pas des « – ».


Éditer fstab


root@gluster1-2~#: vim /etc/fstab


aperçu du contenu du fichier


[…]
/dev/sdb1 /data/gluster ext4 defaults 0 0


Configuration de GlusterFS


 : à faire sur un seul des nœud serveur.


Création du pool de stockage à partir du nœud 1.


root@gluster1~#: gluster peer probe gluster2.stan.local


sortie


peer probe: success.


Vérifier le status du pool de stockage.


root@gluster1~#: gluster peer status


sortie


Number of Peers: 1

Hostname: gluster2.stan.local
Uuid: af98e122-83c6-42c1-bab8-33c584627a21
State: Peer in Cluster (Connected)


Lister le pool de stockage.


root@gluster1~#: gluster pool list


sortie


UUID					Hostname           	State
af98e122-83c6-42c1-bab8-33c584627a21	gluster2.stan.local	Connected
032454eb-1683-45f4-a5c8-dbdbd9ac65b0	localhost          	Connected 


Configuration du volume GlusterFS


Création du volume avec 2 duplications.


root@gluster1~#: gluster volume create gv0 replica 2 gluster1.stan.local:/data/gluster/gv0 gluster2.stan.local:/data/gluster/gv0 force


sortie


volume create: gv0: success: please start the volume to access data


Démarrage du volume.


root@gluster1~#: gluster volume start gv0


sortie


volume start: gv0: success


Vérifier le status du volume.


root@gluster1~#: gluster volume info gv0


sortie


Volume Name: gv0
Type: Replicate
Volume ID: 1e743855-3935-4bda-abd9-383660f69e1e
Status: Started
Snapshot Count: 0
Number of Bricks: 1 x 2 = 2
Transport-type: tcp
Bricks:
Brick1: gluster1.stan.local:/data/gluster/gv0
Brick2: gluster2.stan.local:/data/gluster/gv0
Options Reconfigured:
transport.address-family: inet
nfs.disable: on
performance.client-io-threads: off


Installation et configuration côté client


 : à faire sur l’ensemble des clients.


Tout comme les serveurs, à défaut de DNS, éditer le fichier /etc/hosts


root@debian~#: vim /etc/hosts


aperçu du contenu du fichier


172.16.10.10 gluster1.stan.local gluster1
172.16.10.11 gluster2.stan.local gluster2
172.16.10.12 client1.stan.local client1
172.16.10.13 client2.stan.local client2


Installer le packet glusterfs-client (côté client).


root@debian~#: apt install -y glusterfs-client


Création du point de montage.


root@debian~#: mkdir -p /mnt/glusterfs


Montage temporaire du système de fichier distant dans ce dossier.


root@debian~#: mount -t glusterfs gluster1.stan.local:/gv0 /mnt/glusterfs


Vérifier le montage.


 : pare défaut glusterd écoute sur le port 24007 mais il y a autant de port ouvert que de nœud, il faut donc ajuster le fierwall au besoin.


root@debian~#: df -hP /mnt/glusterfs


sortie


Filesystem                Size  Used Avail Use% Mounted on
gluster1.stan.local:/gv0  6.2G  1.2G  5.1G  19% /mnt/glusterfs


Tout comme pour le côté serveur, pour le montage du système de fichier il est possible d’éditer

/etc/fstab ou de faire un fichier unit.mount.


Créer un fichier unit.mount


root@debian~#: vim /etc/systemd/system/mnt-glusterfs.mount


contenu du fichier


[Unit]
Description=Mount GlusterFS

[Mount]
What=gluster1.stan.local:/gv0
Where=/mnt/glusterfs
Type=glusterfs
Options=defaults,_netdev 0 0

[Install]
WantedBy=multi-user.target


Éditer fstab


root@debian~#: vim /etc/fstab


aperçu du contenu du fichier


[…]
gluster1.stan.local:/gv0 /mnt/glusterfs glusterfs  defaults,_netdev 0 0


Test de réplication


Mountage temporaire des volumes de stockage client sur les serveurs.


root@gluster1~#: mount -t gluster2.stan.local:/gv0 /mnt


root@gluster2~#: mount -t gluster1.stan.local:/gv0 /mnt


Sur les clients, génération de fichier.


root@debian~#: touch /mnt/glusterfs/file1
root@debian~#: touch /mnt/glusterfs/file2


Vérifier que les fichiers sont bien présent sur l’ensemble des nœuds.


root@gluster1~#:ls -l /mnt/


total 0
-rw-r--r--. 1 root root 0 Apr  8 03:48 file1
-rw-r--r--. 1 root root 0 Apr  8 03:48 file2


root@gluster2~#:ls -l /mnt/


total 0
-rw-r--r--. 1 root root 0 Apr  8 03:48 file1
-rw-r--r--. 1 root root 0 Apr  8 03:48 file2

						
 
					

					

						

							

							

								 by 								|  May 23, 2018								|  No Comments								|  Système																								|  Tags : 
								debian debian 9 glusterfs HA systeme de fichier