Морозов Максим (OZON, команда поиска). "Синонимы и анализаторы: наш кейс использования"

• В видео рассказывается о работе с синонимами в Elasticsearch, о том, как они используются для поиска и как они могут быть использованы для улучшения релевантности результатов.  

• В видео также обсуждаются проблемы, которые могут возникнуть при использовании синонимов, такие как разбиение запросов на разные позиции и проблемы с анализом фраз.  

• В видео объясняется, как использовать граф токин фильтр для решения проблем с анализом фраз и как он может помочь в улучшении релевантности результатов поиска.  

• В видео также обсуждаются ограничения использования графа токин фильтра, такие как его сложность и необходимость закрытия и открытия индекса для изменения синонимов.  

• В видео обсуждаются различные способы использования синонимов и морфологии в Elasticsearch.  

• Упоминается использование расширяющих синонимов, ручных замен и словарных синонимов.  

• В видео рассказывается о проблемах, связанных с использованием синонимов и морфологии в Elasticsearch.  

• Упоминается изменение формата синонимов в версии 6 Elasticsearch, что привело к ошибкам.  

• Также обсуждаются проблемы с использованием плагинов для русского языка и их влияние на работу с синонимами и морфологией.  

• В видео говорится о том, как использовать штатные костыли для решения проблем с использованием синонимов и морфологии.  

• Упоминается создание собственного плагина для решения проблем с использованием синонимов и морфологии.  

• Обсуждается переход на шестую версию Elasticsearch, причины и проблемы, с которыми столкнулись.  

• Переход был связан с улучшением производительности и функциональности, а также с необходимостью машинного обучения.  

• Рассказывается о процессе добавления синонимов, который стал более гибким и управляемым.  

• Обсуждаются планы по автоматизации процесса и использованию специальных сервисов для генерации синонимов.  

• Объясняется, как происходит поиск и замена синонимов, и как это помогает улучшить выдачу и семантику запросов.  

• Упоминается, что процесс поиска и замены синонимов является сложным и требует усилий нескольких людей.  

• В видео обсуждается использование дополнительных полей для поиска груши, которые содержат синонимы.  

• Идея заключается в том, чтобы использовать эти поля для поиска, а не только одно поле.  

• В видео обсуждаются метрики качества поиска, которые используются отделом качества поиска для измерения результатов.  

• Также упоминаются специальные отделы, которые занимаются разметкой данных и тестированием поиска.  

• В видео говорится о тестировании поиска на продакшн и использовании графиков для отслеживания результатов.  

• Рекомендуется определить метрику для измерения качества поиска и выводить ее на графики для отслеживания прогресса.  

• В видео обсуждается использование машинного обучения для замены синонимов, которые могут быть использованы в поиске.  

• Упоминается, что уже есть сервис, который умеет выгружать пары синонимов, и планируется включить его в работу.  

• Упоминается проблема с аббревиатурами, которые могут быть неправильно распознаны, и предлагается использовать плагин для решения этой проблемы.  

• Также упоминается проблема с морфологией, когда слово может быть распознано как другое слово, например, "рис" может быть распознано как "рисунок".  

• В видео говорится, что нечеткий поиск не используется в фазе запроса, так как есть отдельный опечаточник для исправления опечаток.  

• Упоминается, что опечатки могут быть исправлены внешним механизмом, и что в фазе поиска используются только саджесты.  

• Спикер обсуждает, как они выводят новые фичи в продакшн, разделяя пользователей на группы и сравнивая результаты.  

• Упоминается, что они используют аб для проверки изменений и сравнения с предыдущими версиями.  

• Спикер объясняет, что стоп-слова используются в разных полях, и некоторые из них могут быть общими.  

• Упоминается, что стоп-слова могут быть использованы для фильтрации мусора в запросах.  

• Спикер обсуждает различные метрики, которые они используют, и их влияние на деятельность компании.  

• Упоминается, что некоторые метрики могут быть использованы сразу, а другие требуют предварительного тестирования.  

• Спикер призывает к регулярным встречам и обмену знаниями, чтобы улучшить общее понимание в группе.