Voir la source de Gluster : Procédure d'installation Gluster sur un cluster Proxmox via une infrastructure VPN Zerotier

=== Qu'est ce que Zerotier ? ===
ZeroTier est une surcouche VPN permettant de créer très facilement une infrastructure réseau cryptée.

Contrairement aux solutions VPN traditionnelles, Zerotier crée des connexions peer-to-peer bidirectionnelles, donc pas de point central d'interconnexion.

https://www.zerotier.com/

=== Qu'est ce que GlusterFS ? ===
GlusterFS est un système de fichier dit "distribué". Il s'agit d'un espace de stockage réparti entre différents disques ''(des briques de stockages'') eux même répartis sur différents serveurs et composant un "volume" sur le réseau.

Il est extensible et sécurisé. 

GlusterFS intègre la déduplication et réplication des fichiers, georéplication, partage de charge, gestion des pannes etc..

https://www.gluster.org/

=== Qu'est ce que Proxmox ? ===
Proxmox Virtual Environment est une plateforme type "baremetal" pour la virtualisation de serveurs en entreprise.

Elle possède la particularité de proposer à la fois, la full virtualisation ''(via KVM)'', la paravirtualisation ''(via LXC)'', la possibilité de stockage ''(CEPH, ZFS, GlusterFS, etc.)'' ainsi que la sauvegarde ''(Proxmox Backup Server)''.

Avec une seule solution, vous répondez à l'essentiel des besoins en virtualisation.

https://www.proxmox.com/en/

=== Architecture ===

==== L'objectif : ====
Mettre en place une infrastructure Proxmox connecté à un volume GlusterFS qui fonctionnera sur une infrastructure VPN Zerotier ''(permettant de la réplication sécurisée)''

==== Besoins pour la démonstration : ====

* Minimum 2 serveurs avec 1 HD système + 1 HD datas
** Réseau Local : 192.168.1.0/24

* Une infrastructure VPN Zerotier
** Réseau VPN : 10.10.10.0/24

=== Installation de Zerotier ===
Les synchronisations GlusterFS se feront à travers l'infrastructure VPN Zerotier

* Sur tous les nodes du cluster
<syntaxhighlight lang="bash">
curl -s https://install.zerotier.com | sudo bash
curl -o Zerotier.sh https://raw.githubusercontent.com/Yakakliker37/Base_info/main/Zerotier.sh
sh Zerotier.sh
</syntaxhighlight>

=== Edition des fichiers Hosts ===
La communication entre les différents nodes est particulièrement importante.

Nous allons donc renseigner les hostnames de chacun des serveurs hébergeant des briques GlusterFS afin de s'assurer que la communication se fera parfaitement via le réseau VPN Zerotier.
* Sur chacun des nodes du cluster
Créer les entrées DNS/IP dans les fichiers /etc/hosts<syntaxhighlight lang="bash">
nano /etc/hosts
</syntaxhighlight>

* Exemple de fichier hosts
<syntaxhighlight lang="bash">
127.0.0.1 localhost.localdomain localhost
192.168.1.150 pve01.yakakliker.org pve01
10.10.10.216 pve02.yakakliker.org pve02
10.10.10.164 pve03.yakakliker.org pve03
10.10.10.25 pc001.yakakliker.org pc001
</syntaxhighlight>

=== Installation de Gluster ===

* Sur tous les nodes du cluster
<syntaxhighlight lang="bash">
apt-get install glusterfs-server -y
</syntaxhighlight><syntaxhighlight lang="bash">
systemctl start glusterd
systemctl enable glusterd
</syntaxhighlight><syntaxhighlight lang="bash">
systemctl status glusterd
</syntaxhighlight>

=== Préparation du disque dur datas ===
<syntaxhighlight lang="bash">
fdisk /dev/sdb

mkfs.xfs /dev/sdb1

mkdir /mnt/glustervolume
mkdir /mnt/glustervolume/hd01

nano /etc/fstab

/dev/sdb1 /mnt/glustervolume/hd01 xfs defaults 0 0

systemctl daemon-reload
mount -a

df -h
</syntaxhighlight>

=== Configuration du volume Gluster ===
<syntaxhighlight lang="bash">
gluster peer probe node2
gluster pool list
</syntaxhighlight>

* Sur tous les nodes du cluster
<syntaxhighlight lang="bash">
mkdir /mnt/glustervolume/hd01/volume01
</syntaxhighlight>

=== Création du volume ===
<syntaxhighlight lang="bash">
gluster volume create gluster01 replica 2 transport tcp pve01:/mnt/glustervolume/hd01/volume01 pve02:/mnt/glustervolume/hd01/volume01
</syntaxhighlight><syntaxhighlight lang="bash">
gluster volume start gluster01
gluster volume status
gluster volume info gluster01
</syntaxhighlight>

=== Montage Gluster dans /etc/fstab (optionel) ===
<syntaxhighlight lang="bash">
nano /etc/fstab
</syntaxhighlight><syntaxhighlight lang="bash">
localhost:/gluster01 /opt/Gluster glusterfs defaults,_netdev 0 0
</syntaxhighlight>

=== Montage dans Proxmox ===
[[Fichier:Gluster001.png|néant|vignette|568x568px]]

=== Erreurs ===

* gluster volume create failed is already part of a volume
<syntaxhighlight lang="bash">
setfattr -x trusted.glusterfs.volume-id </path/to/brick>
setfattr -x trusted.gfid </path/to/brick>
rm -rf </path/to/brick>/.glusterfs
</syntaxhighlight>

=== Liens ===
https://www.howtoforge.com/how-to-install-and-configure-glusterfs-on-ubuntu-22-04/

https://medium.com/@sm4rthink/how-to-deploy-glusterfs-with-proxmox-ve-5531ef287526

https://blog.zwindler.fr/2017/02/28/tutoriel-creer-un-cluster-de-stockage-glusterfs-sous-proxmox/

https://docs.gluster.org/en/v3/

https://www.unixmaniax.fr/wiki/index.php?title=GlusterFS

https://scriptcrunch.com/solved-glusterfs-already-part-volume-error-volume-creation/
[[Catégorie:Gluster]]
[[Catégorie:Installation]]
[[Catégorie:Zerotier]]
[[Catégorie:Proxmox]]