เนื้อหานี้ได้รับการแปลด้วยเครื่อง กรุณาดูที่คำแถลงการณ์ปฏิเสธความรับผิดชอบของการแปลภาษาด้วยเครื่อง

What is split-brain and how do I recover?

Split-brain คืออะไรและฉันจะกู้คืนได้อย่างไร?

Last modified date: 2025-05-28

Applicable Products

QuTS hero h5.3.0 or later
High Availability Manager 1.0 or later

Definition and Cause

In a high-availability (HA) cluster, split-brain occurs when both nodes lose communication with each other but remain operational independently, and both nodes have assumed the active node role. This may cause data inconsistency or corrupted shared storage, because each node may attempt to take control of shared resources simultaneously.

Common causes of split-brain include:

Network disconnection between the nodes in the cluster
Failure of the heartbeat connection
Unstable or inconsistent network paths

Solution

Fix the network connection between the nodes.
First check and restore the network connection between the two nodes (for example, the heartbeat connection, switches, network settings).
Only after the connection is restored can the system proceed to verify the cluster status.
Let the system automatically detect the split-brain status.
1. Once the nodes reestablish communication, the system exchanges status information between the two nodes.
2. If both nodes have assumed the active node role, the system identifies it as a split-brain condition.
3. To prevent data corruption, the system stops most services (such as SMB, iSCSI) and displays an error message indicating that split-brain has occurred.
Recover from split-brain via High Availability Manager.
1. Open High Availability Manager.
2. Click Recover from Split-Brain to launch the recovery wizard.
  In the wizard, you can choose one of the following recovery options:
  - Option 1: Preserve data on one node only
    Select the node to keep, and the other node will be wiped and reset as the passive node. The system will then resynchronize the HA cluster.
    This option is suitable when you clearly know which node has the correct data and want to restore the cluster quickly.
  - Option 2: Preserve data on both nodes
    If both nodes contain important data, the system allows one node to resume services first, while the other node is removed from the cluster.
    After verifying and reconciling the data, you can manually rejoin the removed node to the cluster.
Optional: Minimize future split-brain by enabling a quorum server.
If the nodes disconnect from each other but remain connected to the network, a quorum server can still monitor the individual nodes and relay their statuses with each other. This helps reduce the chance of split-brain.
You can configure a quorum server by going to High Availability Manager > Settings > Failover Policy > Quroum Server.

ผลิตภัณฑ์ที่ใช้ได้

QuTS hero h5.3.0 or later
High Availability Manager 1.0 or later

คำจำกัดความและสาเหตุ

ใน คลัสเตอร์ ที่มีความพร้อมใช้งานสูง (HA), split-brain เกิดขึ้นเมื่อโหนดทั้งสองสูญเสียการสื่อสารกันแต่ยังคงทำงานได้อย่างอิสระ และ โหนดทั้งสองได้สันนิษฐานบทบาทโหนดที่ใช้งานอยู่. สิ่งนี้อาจทำให้เกิดความไม่สอดคล้องกันของข้อมูลหรือ ที่เก็บข้อมูล ที่เสียหาย เพราะแต่ละโหนดอาจพยายามควบคุมทรัพยากรที่ใช้ร่วมกันพร้อมกัน.

สาเหตุทั่วไปของ split-brain ได้แก่:

การตัดการเชื่อมต่อเครือข่ายระหว่างโหนดใน คลัสเตอร์
การล้มเหลวของการเชื่อมต่อ heartbeat
เส้นทางเครือข่ายที่ไม่เสถียรหรือไม่สอดคล้องกัน

วิธีแก้ไข

แก้ไขการเชื่อมต่อเครือข่ายระหว่างโหนด.
ตรวจสอบและคืนค่าการเชื่อมต่อเครือข่ายระหว่างโหนดทั้งสองก่อน (เช่น การเชื่อมต่อ heartbeat, สวิตช์, การตั้งค่าเครือข่าย).
เฉพาะเมื่อการเชื่อมต่อได้รับการคืนค่าแล้วเท่านั้นที่ระบบสามารถดำเนินการตรวจสอบสถานะ คลัสเตอร์ ได้.
ให้ระบบตรวจจับสถานะ split-brain โดยอัตโนมัติ.
1. เมื่อโหนดกลับมาสื่อสารกันอีกครั้ง ระบบจะแลกเปลี่ยนข้อมูลสถานะระหว่างโหนดทั้งสอง.
2. หากโหนดทั้งสองได้สันนิษฐานบทบาทโหนดที่ใช้งานอยู่ ระบบจะระบุว่าเป็นสถานะ split-brain.
3. เพื่อป้องกันการเสียหายของข้อมูล ระบบจะหยุดบริการส่วนใหญ่ (เช่น SMB, iSCSI) และแสดงข้อความข้อผิดพลาดที่ระบุว่าเกิด split-brain.
กู้คืนจาก split-brain ผ่าน High Availability Manager.
1. เปิด High Availability Manager.
2. คลิก กู้คืนจาก Split-Brain เพื่อเปิดตัวช่วยกู้คืน.
  ในตัวช่วยกู้คืน คุณสามารถเลือกหนึ่งในตัวเลือกการกู้คืนต่อไปนี้:
  - ตัวเลือก 1: เก็บข้อมูลไว้ในโหนดเดียวเท่านั้น
    เลือกโหนดที่จะเก็บไว้ และโหนดอื่นจะถูกลบและรีเซ็ตเป็นโหนดที่ไม่ใช้งาน ระบบจะซิงโครไนซ์ คลัสเตอร์ ใหม่.
    ตัวเลือกนี้เหมาะเมื่อคุณทราบแน่ชัดว่าโหนดใดมีข้อมูลที่ถูกต้องและต้องการคืนค่า คลัสเตอร์ อย่างรวดเร็ว.
  - ตัวเลือก 2: เก็บข้อมูลไว้ในทั้งสองโหนด
    หากโหนดทั้งสองมีข้อมูลสำคัญ ระบบจะอนุญาตให้โหนดหนึ่งกลับมาทำงานก่อน ในขณะที่โหนดอื่นถูกลบออกจาก คลัสเตอร์.
    หลังจากตรวจสอบและปรับข้อมูลให้สอดคล้องกัน คุณสามารถเข้าร่วมโหนดที่ถูกลบกลับไปยัง คลัสเตอร์ ได้ด้วยตนเอง.
ตัวเลือก: ลด split-brain ในอนาคตโดยเปิดใช้งานเซิร์ฟเวอร์ quorum.
หากโหนดตัดการเชื่อมต่อกันแต่ยังคงเชื่อมต่อกับเครือข่าย เซิร์ฟเวอร์ quorum ยังสามารถตรวจสอบโหนดแต่ละตัวและส่งสถานะของพวกเขาให้กันและกันได้ สิ่งนี้ช่วยลดโอกาสของ split-brain.
คุณสามารถกำหนดค่าเซิร์ฟเวอร์ quorum โดยไปที่ High Availability Manager > การตั้งค่า > นโยบาย การย้ายโหนดเมื่อเกิดข้อผิดพลาด > เซิร์ฟเวอร์ Quroum.

อ่านเพิ่มเติม

Was this article helpful?

Yes. No.

Please tell us how this article can be improved:

The article is missing important information
The article's solutions do not work
The article is too complicated
The article contains incorrect information
The article is out-of-date

If you want to provide additional feedback, please include it below.

NAS

ระบบเครือข่าย

ระบบกล้องวงจรปิด

Applicable Products

Definition and Cause

Solution

Further Reading

ผลิตภัณฑ์ที่ใช้ได้

คำจำกัดความและสาเหตุ

วิธีแก้ไข

อ่านเพิ่มเติม

This site in other countries/regions:

Asia

Europe