Ce contenu est traduit automatiquement. Veuillez consulter la Clause de non-responsabilité relative à la traduction automatique.

What is split-brain and how do I recover?

Qu'est-ce que le split-brain et comment puis-je récupérer ?

Date de la dernière modification : 2025-05-28

Applicable Products

QuTS hero h5.3.0 or later
High Availability Manager 1.0 or later

Definition and Cause

In a high-availability (HA) cluster, split-brain occurs when both nodes lose communication with each other but remain operational independently, and both nodes have assumed the active node role. This may cause data inconsistency or corrupted shared storage, because each node may attempt to take control of shared resources simultaneously.

Common causes of split-brain include:

Network disconnection between the nodes in the cluster
Failure of the heartbeat connection
Unstable or inconsistent network paths

Solution

Fix the network connection between the nodes.
First check and restore the network connection between the two nodes (for example, the heartbeat connection, switches, network settings).
Only after the connection is restored can the system proceed to verify the cluster status.
Let the system automatically detect the split-brain status.
1. Once the nodes reestablish communication, the system exchanges status information between the two nodes.
2. If both nodes have assumed the active node role, the system identifies it as a split-brain condition.
3. To prevent data corruption, the system stops most services (such as SMB, iSCSI) and displays an error message indicating that split-brain has occurred.
Recover from split-brain via High Availability Manager.
1. Open High Availability Manager.
2. Click Recover from Split-Brain to launch the recovery wizard.
  In the wizard, you can choose one of the following recovery options:
  - Option 1: Preserve data on one node only
    Select the node to keep, and the other node will be wiped and reset as the passive node. The system will then resynchronize the HA cluster.
    This option is suitable when you clearly know which node has the correct data and want to restore the cluster quickly.
  - Option 2: Preserve data on both nodes
    If both nodes contain important data, the system allows one node to resume services first, while the other node is removed from the cluster.
    After verifying and reconciling the data, you can manually rejoin the removed node to the cluster.
Optional: Minimize future split-brain by enabling a quorum server.
If the nodes disconnect from each other but remain connected to the network, a quorum server can still monitor the individual nodes and relay their statuses with each other. This helps reduce the chance of split-brain.
You can configure a quorum server by going to High Availability Manager > Settings > Failover Policy > Quroum Server.

Produits Applicables

QuTS hero h5.3.0 or later
High Availability Manager 1.0 or later

Définition et Cause

Dans un Cluster à haute disponibilité (HA), split-brain se produit lorsque les deux nœuds perdent la communication entre eux mais restent opérationnels indépendamment, et les deux nœuds ont assumé le rôle de nœud actif. Cela peut entraîner une incohérence des données ou une corruption des Stockage partagés, car chaque nœud peut tenter de prendre le contrôle des ressources partagées simultanément.

Les causes courantes de split-brain incluent :

Déconnexion réseau entre les nœuds dans le Cluster
Défaillance de la connexion de heartbeat
Chemins réseau instables ou incohérents

Solution

Réparez la connexion réseau entre les nœuds.
Vérifiez d'abord et rétablissez la connexion réseau entre les deux nœuds (par exemple, la connexion de heartbeat, les commutateurs, les paramètres réseau).
Ce n'est qu'après le rétablissement de la connexion que le système peut procéder à la vérification de l'état du Cluster.
Laissez le système détecter automatiquement l'état de split-brain.
1. Une fois que les nœuds rétablissent la communication, le système échange des informations d'état entre les deux nœuds.
2. Si les deux nœuds ont assumé le rôle de nœud actif, le système l'identifie comme une condition de split-brain.
3. Pour éviter la corruption des données, le système arrête la plupart des services (tels que SMB, iSCSI) et affiche un message d'erreur indiquant qu'un split-brain s'est produit.
Récupérer du split-brain via High Availability Manager.
1. Ouvrez High Availability Manager.
2. Cliquez sur Récupérer du Split-Brain pour lancer l'assistant de récupération.
  Dans l'assistant, vous pouvez choisir l'une des options de récupération suivantes :
  - Option 1 : Conserver les données sur un seul nœud
    Sélectionnez le nœud à conserver, et l'autre nœud sera effacé et réinitialisé en tant que nœud passif. Le système resynchronisera ensuite le Cluster HA.
    Cette option est appropriée lorsque vous savez clairement quel nœud a les données correctes et que vous souhaitez restaurer rapidement le Cluster.
  - Option 2 : Conserver les données sur les deux nœuds
    Si les deux nœuds contiennent des données importantes, le système permet à un nœud de reprendre les services en premier, tandis que l'autre nœud est retiré du Cluster.
    Après avoir vérifié et concilié les données, vous pouvez réintégrer manuellement le nœud retiré au Cluster.
Optionnel : Minimisez les futurs split-brain en activant un serveur de quorum.
Si les nœuds se déconnectent l'un de l'autre mais restent connectés au réseau, un serveur de quorum peut toujours surveiller les nœuds individuels et relayer leurs statuts entre eux. Cela aide à réduire le risque de split-brain.
Vous pouvez configurer un serveur de quorum en allant à High Availability Manager > Paramètres > Politique Basculement > Serveur de Quorum.

Lectures Complémentaires

Est-ce que cet article a été utile ?

Oui. Non.

Veuillez nous indiquer comment améliorer cet article :

Il manque des informations importantes dans l’article
Les solutions de l’article ne fonctionnent pas
L’article est trop compliqué
L’article contient des informations inexactes
L’article est désuet

Si vous souhaitez fournir un commentaire supplémentaire, veuillez l’inclure ci-dessous.

NAS

Réseau

Surveillance

Applicable Products

Definition and Cause

Solution

Further Reading

Produits Applicables

Définition et Cause

Solution

Lectures Complémentaires

Ce site est disponible dans d'autres pays/régions :

Asia

Europe