Состояние кластера

Выбранный мастер-узел — единственный узел в кластере, который может изменять состояние кластера. Выбранный мастер-узел обрабатывает одну партию обновлений состояния кластера за раз, вычисляет необходимые изменения и публикует обновленное состояние кластера всем остальным узлам кластера. Каждая публикация начинается с того, что избранный мастер-узел транслирует обновленное состояние кластера всем узлам кластера. Каждый узел отвечает подтверждением, но пока не применяет новое состояние. Как только избранный мастер-узел соберет подтверждения от достаточного количества узлов, имеющих право быть мастерами, новое состояние кластера считается закрепленным, и мастер-узел транслирует другое сообщение, предписывающее узлам применить теперь закрепленное состояние. Каждый узел получает это сообщение, применяет обновленное состояние и отправляет второе подтверждение обратно мастеру.

Выбранный мастер-узел предоставляет ограниченное время для полного опубликования каждого обновления состояния кластера всем узлам. Оно определяется параметром cluster.publish.timeout, который по умолчанию равен 30s, отсчитываемый от момента начала публикации. Если это время истечёт до того, как новое состояние кластера будет закреплено, то изменение состояния кластера отклоняется, и избранный мастер-узел считает себя неисправным. Он отказывается от своих полномочий и начинает попытки избрать нового мастер-узла.

Если новое состояние кластера закрепляется до истечения cluster.publish.timeout, избранный мастер-узел считает изменение успешным. Он ожидает истечения тайм-аута или получения подтверждений о применении обновленного состояния каждым узлом в кластере, а затем начинает обработку и публикацию следующего обновления состояния кластера. Если некоторые подтверждения не получены (т.е. некоторые узлы ещё не подтвердили применение текущего обновления), эти узлы считаются отстающими, так как их состояние кластера отстаёт от последнего состояния избранного мастера. Избранный мастер-узел ждёт, пока отстающие узлы догонят за дополнительное время, cluster.follower_lag.timeout, которое по умолчанию равно 90s. Если узел до сих пор не успешно применил обновление состояния кластера в течение этого времени, он считается неисправным, и избранный мастер-узел удаляет его из кластера.

Обновления состояния кластера обычно публикуются как изменения по отношению к предыдущему состоянию кластера, что сокращает время и сетевую пропускную способность, необходимую для публикации обновления состояния кластера. Например, при обновлении отображений только для подмножества индексов в состоянии кластера публиковаться нужно только обновления для этих индексов узлам кластера, при условии, что у этих узлов есть предыдущее состояние кластера. Если у узла отсутствует предыдущее состояние кластера, например, при присоединении к кластеру, избранный мастер-узел опубликует полное состояние кластера этому узлу, чтобы он мог получать будущие обновления как изменения.

Производительность обновлений состояния кластера зависит от скорости хранения на каждом узле, имеющем право быть мастером, а также от надёжности и задержки сетевых соединений между всеми узлами кластера. Поэтому необходимо убедиться, что доступное хранилище и сеть узлов вашего кластера достаточно для достижения ваших целей по производительности.

Когда узел присоединяется к кластеру, если он обнаруживает какие-либо фрагменты, хранящиеся в его локальном каталоге данных, которые ещё не существуют в состоянии кластера, он посчитает эти фрагменты принадлежащими «висящему» индексу. Вы можете перечислить, импортировать или удалить висящие индексы с помощью API «Висящие индексы».