What is HyDE (Hypothetical Document Embeddings)?

Abbreviation: HyDE

HyDE — это техника поиска, при которой модель сначала генерирует гипотетический ответ на запрос, а затем встраивает этот ответ для поиска (вместо встраивания сырого запроса). Улучшает качество поиска для запросов, сильно отличающихся по формулировке от исходных документов.

Detail

Интуиция: запросы пользователей короткие и абстрактные («какова политика возврата?»); исходные документы длинные и конкретные («Возврат можно запросить в течение 30 дней…»). Встраивание запроса напрямую часто пропускает документ. HyDE заставляет LLM сгенерировать, как мог бы выглядеть ответ, затем встраивает его — что лучше совпадает с документом.

Стоит небольшого дополнительного вызова LLM на запрос, но часто значительно повышает recall поиска на коротких запросах.