Spec-Zone.ru › Elasticsearch 8
›Elasticsearch Guide [8.17] ›Автомасштабирование ›Deciders автомасштабирования

Decider машинного обучения

Decider автомасштабирования машинного обучения (ml) рассчитывает потребности в памяти и ЦП для выполнения задач машинного обучения и обученных моделей.

Decider машинного обучения включён для политик, управляющих ml узлами.

Чтобы задачи машинного обучения открывались, когда кластер не масштабирован должным образом, установите xpack.ml.max_lazy_ml_nodes на максимальное возможное количество узлов машинного обучения (подробнее см. Дополнительные параметры машинного обучения). В Elasticsearch Service это настраивается автоматически.

Параметры конфигурации

И num_anomaly_jobs_in_queue, и num_analytics_jobs_in_queue предназначены для задержки масштабирования вверх. Если кластер слишком мал, эти параметры указывают, сколько задач каждого типа можно перераспределить с узла. Оба параметра учитываются только для задач, которые можно открыть при текущем масштабе. Если задача слишком велика для любого размера узла или если задачу нельзя назначить без вмешательства пользователя (например, пользователь вызвал _stop для задачи реального времени по обнаружению аномалий), эти значения игнорируются для этой конкретной задачи.

num_anomaly_jobs_in_queue
(Необязательно, целое число) Указывает количество задач обнаружения аномалий в очереди, которые разрешено обрабатывать. По умолчанию 0.
num_analytics_jobs_in_queue
(Необязательно, целое число) Указывает количество задач аналитики на основе фреймов данных в очереди, которые разрешено обрабатывать. По умолчанию 0.
down_scale_delay
(Необязательно, значение времени) Указывает время задержки перед масштабированием вниз. По умолчанию 1 час. Если масштабирование вниз возможно на протяжении всего временного интервала, то запрос на масштабирование вниз отправляется. Если кластеру требуется масштабирование вверх в течение интервала, интервал сбрасывается.

Примеры

В этом примере создается политика автомасштабирования под названием my_autoscaling_policy, которая переопределяет настройки decider машинного обучения по умолчанию.

resp = client.autoscaling.put_autoscaling_policy(
    name="my_autoscaling_policy",
    policy={
        "roles": [
            "ml"
        ],
        "deciders": {
            "ml": {
                "num_anomaly_jobs_in_queue": 5,
                "num_analytics_jobs_in_queue": 3,
                "down_scale_delay": "30m"
            }
        }
    },
)
print(resp)
const response = await client.autoscaling.putAutoscalingPolicy({
  name: "my_autoscaling_policy",
  policy: {
    roles: ["ml"],
    deciders: {
      ml: {
        num_anomaly_jobs_in_queue: 5,
        num_analytics_jobs_in_queue: 3,
        down_scale_delay: "30m",
      },
    },
  },
});
console.log(response);
PUT /_autoscaling/policy/my_autoscaling_policy
{
  "roles" : [ "ml" ],
  "deciders": {
    "ml": {
      "num_anomaly_jobs_in_queue": 5,
      "num_analytics_jobs_in_queue": 3,
      "down_scale_delay": "30m"
    }
  }
}

API возвращает следующий результат:

{
  "acknowledged": true
}

© 2023-2025 Elasticsearch
As of September 2024, Elasticsearch is available under a choice of three licenses: the Server Side Public License (SSPL), the Elastic License, or the AGPLv3 (OSI approved).
Elasticsearch and the Elasticsearch logo are trademarks of Elasticsearch B.V., registered in the U.S. and in other countries.
https://www.elastic.co/guide/en/elasticsearch/reference/8.17/autoscaling-machine-learning-decider.html

Spec-Zone.ru

Настройки Оффлайн Что нового Помощь О нас
Spec-Zone .ru
спецификации, руководства, описания, API