Выбор ответа Junior RAG спрашивают часто обновлено
Когда векторный поиск проигрывает BM25
Вопрос
На каком запросе векторный поиск вероятнее всего проиграет лексическому BM25?
Попробуйте сами
Выберите вариант, и откроется разбор.
Показать ответ и разбор
Коротко
Правильный ответ: «ошибка E-4012 при оплате». Коды, артикулы, фамилии и редкие термины требуют точного совпадения, а эмбеддинги стремятся к смыслу и могут поставить рядом любую «ошибку при оплате».
Варианты ответа
- «ошибка E-4012 при оплате»правильный ответ
- «как вернуть деньги за покупку»
- «не могу войти в аккаунт»
- «что делать, если товар пришёл сломанным»
Разбор
Коды, артикулы, фамилии и редкие термины требуют точного совпадения, а эмбеддинги стремятся к смыслу и могут поставить рядом любую «ошибку при оплате». BM25 найдёт документ с токеном E-4012. Остальные запросы смысловые, их можно сформулировать разными словами, и векторный поиск там силён. Поэтому в проде часто делают гибрид.
Ответьте сами, а не прочитайте
В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.