Стандартный анализатор

Анализатор standard является стандартным анализатором, используемым по умолчанию, если не указан другой. Он обеспечивает лексический анализ, основанный на грамматике (основанный на алгоритме сегментации текста Юникода, как указано в Приложение #29 к стандарту Юникод), и хорошо работает для большинства языков.

POST _analyze
{
  "analyzer": "standard",
  "text": "The 2 QUICK Brown-Foxes jumped over the lazy dog's bone."
}

Предложение выше даст следующие термины:

[ the, 2, quick, brown, foxes, jumped, over, the, lazy, dog's, bone ]

Анализатор standard принимает следующие параметры:

Для получения дополнительной информации о настройке стоп-слов см. Фильтр стоп-слов.

В этом примере мы настраиваем анализатор standard для использования значения max_token_length 5 (для демонстрации) и предварительно определённого списка английских стоп-слов:

PUT my-index-000001
{
  "settings": {
    "analysis": {
      "analyzer": {
        "my_english_analyzer": {
          "type": "standard",
          "max_token_length": 5,
          "stopwords": "_english_"
        }
      }
    }
  }
}

POST my-index-000001/_analyze
{
  "analyzer": "my_english_analyzer",
  "text": "The 2 QUICK Brown-Foxes jumped over the lazy dog's bone."
}

Этот пример даёт следующие термины:

[ 2, quick, brown, foxes, jumpe, d, over, lazy, dog's, bone ]

Анализатор standard состоит из:

Если вам нужно настроить анализатор standard за пределами параметров конфигурации, вам нужно создать его как анализатор custom и изменить его, обычно добавив фильтры токенов. Это позволит пересоздать встроенный анализатор standard, и вы можете использовать его в качестве отправной точки:

PUT /standard_example
{
  "settings": {
    "analysis": {
      "analyzer": {
        "rebuilt_standard": {
          "tokenizer": "standard",
          "filter": [
            "lowercase"       
          ]
        }
      }
    }
  }
}