Чтение индексов из старых версий Elasticsearch

Elasticsearch полностью поддерживает запросы и запись в индексах, созданных в предыдущей основной версии. Если у вас есть индексы, созданные в версиях Elasticsearch 5 или 6, вы теперь можете использовать функцию архивирования для их импорта в более новые версии Elasticsearch.

Функция архивирования обеспечивает медленный только для чтения доступ к данным старых версий Elasticsearch по соображениям соответствия нормативным требованиям, для периодического анализа или расследования или для повторного импорта частей данных. Доступ к данным, как ожидается, будет редким и поэтому может осуществляться с ограниченной производительностью и возможностями запросов.

Для этого Elasticsearch может получать доступ к старым репозиториям снимков (до версии 5). Старые индексы в репозитории снимков можно либо восстановить, либо напрямую получить доступ через поисковые снимки, так что архивированные данные даже не нужно полностью хранить на локальных дисках для доступа.

Старые схемы импортируются в Elasticsearch 8 максимально близко к исходному виду, но предоставляют стандартные возможности запроса только для ограниченного подмножества полей:

Индексы Elasticsearch 5 со схемами, имеющими несколько типов схем, объединяются по возможности перед импортом.

В случае, если автоматический импорт схем не работает или новая версия Elasticsearch не может понять схему, выполняется импорт индекса без схемы, но исходная схема сохраняется в разделе _meta импортированного индекса. Затем старая схема может быть проанализирована с помощью API получения схемы, и новая схема может быть внедрена вручную с помощью API обновления схемы, скопировав и адаптировав соответствующие разделы старой схемы для работы с текущей версией Elasticsearch. Хотя автоматический импорт ожидается, что он будет работать в большинстве случаев, случаи сбоя должны быть сообщены команде Elastic для дальнейшего улучшения.

Архивные индексы только для чтения и предоставляют доступ к данным через API поиска и возможностей полей. Они не поддерживают API получения и API записи.

Архивные индексы позволяют выполнять запросы и агрегации, если они поддерживаются соответствующим типом поля.

Из-за _source доступа данные также могут быть переиндексированы в новый индекс, полностью совместимый с текущей версией Elasticsearch.

Сделайте снимок индексов в старом кластере, удалите индексы, которые напрямую не поддерживаются ES 8 (т.е. индексы старше 7.0), обновите кластер без старых индексов, а затем восстановите старые индексы из снимка или смонтируйте их через поисковые снимки.

В будущем мы планируем упростить процесс обновления, чтобы сделать более лёгким импорт старых индексов при переходе на будущие основные версии Elasticsearch.