Кластер RedHat: некоторые аспекты и тонкости реализации и использования(ч.6)

Часть 5

В процессе эксплуатации кластера выяснились неприятные особенности.


Итак, приблизительная конфигурация:
2 ноды, общий SAN storage, отсечка проводится через HP iLO карту.
Ноды запитаны независимо, с разных источников, находятся физически в разных стойках.


Случилось следующее. В результате сбоя питания в датацентре одна стойка была полностью обесточена (такое редко, но бывает).




В результате того, что пропало питание, iLO карта стала недоступна. Кластерное ПО в этой ситуации среагировало не совсем адекватно - "живая" нода попыталась провести отсечку, ей, естественно, это не удалось (другая нода недоступна никоим образом). В результате нода, на которую должны были смигрировать сервисы, "зациклилась" на попытках отсечки, сервисы, разумеется, не смигрировали.


Хочу заметить, что при этом был настроен и запущен qdiskd (quorum disk, кворум диск) на отдельном SAN разделе. ПО непонятным мне причинам, резервная нода не сочла достаточным, что кворум диск показал отказ основной ноды, и ,в результате, кластер не справился с одной из своих штатных основных задач - не обеспечил надежность и беcперебойность. :(


Было проведено несколько экспериментов с ручным отключением ноды - результат воспроизводился в точности.


По моему мнению, такая работа кластера недопустима. Возможно, если обеспечить отсечку через дополнительное устройство (например, свич, через который ноды подключаются к SAN storage), запитав его независимым питанием, такого можно избежать. Но в моем случае такойвариант оказался неприемлем.

Вывод - пока RedHat cluster, как это ни печально, для моих задач не подходит, т.к. в первую очередь меня интересует высокая надежность и отказоустойчивость кластера.


В качестве альтернативы было решено провести эксперименты с heartbeat HA-cluster.