Переписывание запроса в RAG: как улучшить поиск и не потерять смысл
Поисковая формулировка должна сделать вопрос удобным для retrieval, сохранив цель, объект, условия и ограничения пользователя. Разбираем процесс на проверяемом примере.
Короткий ответ: переписывание готовит вопрос к поиску
Переписывание запроса в RAG — это отдельный шаг между вопросом пользователя и извлечением фрагментов. Его результатом становится поисковая формулировка: она сохраняет задачу, объект, условия и ограничения, но выражает их словами, которые легче сопоставить с корпусом. Цель шага не в том, чтобы сразу ответить человеку, а в том, чтобы получить более полезный набор кандидатов для последующей проверки.
Хорошая переформулировка убирает разговорный шум, раскрывает понятные из контекста ссылки и добавляет принятую в документах терминологию. Плохая — незаметно подменяет вопрос, отбрасывает исключение или придумывает предпосылку. Поэтому сохраняйте одновременно исходный вопрос и поисковую версию: без этой пары невозможно понять, улучшился retrieval или система просто стала искать другую задачу.
Этот шаг находится внутри более широкого процесса: сначала нужно подготовить базу знаний для RAG, определить авторитетные документы и сохранить их структуру. Переписывание не исправит отсутствующий источник, дублирующиеся редакции или фрагменты без метаданных. Оно помогает сформулировать запрос к уже управляемому корпусу, но не заменяет его подготовку.
Что именно переписывается
Пользовательский вопрос часто содержит местоимения, сокращения и детали предыдущей реплики. Например, фраза «А для студента это можно продлить?» сама по себе неполна. Компонент переписывания должен извлечь из разрешённого контекста объект «библиотечный абонемент», условие «статус студента» и действие «продление», а затем сформировать поисковый запрос. Он не должен добавлять срок, цену или право на услугу, которых пользователь не называл.
Полезно разделить неизменяемое ядро и редактируемую оболочку. В ядро входят цель, объект, явные ограничения, отрицания, временная область и требуемый тип ответа. Оболочка включает порядок слов, разговорные конструкции, синонимы и служебные фразы. Переписывать безопаснее оболочку; изменение ядра требует нового уточнения у пользователя, а не уверенной догадки.
Зачем отделять вопрос от поисковой формулировки
Поисковая формулировка передаётся в компонент, который извлекает кандидатов. Если используется векторная база данных для RAG, запрос превращается в представление для сопоставления с фрагментами, а фильтры ограничивают допустимую область. Даже удачная формулировка не делает найденный текст истинным: она лишь влияет на то, какие записи попадут в список кандидатов.
Отдельное хранение двух версий упрощает диагностику. Можно увидеть, что исходный вопрос был точным, но переформулировка потеряла исключение; либо запрос сохранил смысл, но корпус не содержал нужного раздела. Если журналировать только финальный ответ, эти причины смешиваются, а команда начинает менять промпт генерации вместо исправления retrieval.
Какие преобразования допустимы
Первый безопасный класс — нормализация терминов. Разговорное «заморозить учётку» можно сопоставить с формулировками корпуса «приостановить доступ» и «временная блокировка», сохранив обе версии в поисковом запросе. Второй класс — раскрытие ссылок из диалога: «это» заменяется конкретным объектом, только если объект однозначно задан предыдущей репликой. Третий — разбиение составного вопроса на несколько поисковых подзапросов без удаления общей цели.
Четвёртый класс — добавление контекстных ограничений как фильтров, а не как свободного текста. Если пользователь выбрал регион, продукт или редакцию документа, эти признаки лучше передать отдельно и проверить в метаданных. Пятый — создание нескольких альтернативных формулировок для разных словарей корпуса. Их результаты затем объединяются, но каждая альтернатива должна оставаться проверяемым перефразированием исходной задачи.
Если точное слово и смысловая близость дают разные наборы, помогает гибридный поиск в RAG: лексический канал сохраняет коды и названия, а смысловой находит перефразировки. Переписывание не должно заранее выбирать победителя. Оно готовит запросы, после чего каналы и их объединение оцениваются на одном контрольном наборе.
Когда переписывание опасно
Наиболее опасна потеря отрицания: «когда нельзя продлить» превращается в «как продлить». Не менее важны границы времени, версии и роли пользователя. Фраза «правила для гостя» не равна общим правилам; «до активации» не равно «после активации». Такие элементы стоит извлекать в явный список обязательных условий и сравнивать с результатом переписывания до запуска поиска.
Нельзя добавлять фактический ответ внутрь поискового запроса. Если система перепишет вопрос «почему заявка отклонена?» как «заявка отклонена из-за неверных документов», retrieval начнёт подтверждать гипотезу, которой не было во входе. Безопасная версия ищет причины отклонения заявки и сведения о конкретном статусе, сохраняя неизвестное неизвестным.
Практический пример: правила вымышленной библиотеки
Возьмём вымышленный диалог. Пользователь сначала спрашивает о продлении книги, а затем уточняет: «А если на неё уже кто-то в очереди?» Исходный вопрос содержит объект из контекста — книгу — и условие «есть очередь». Поисковая версия может звучать так: «продление выданной книги при наличии очереди или бронирования другим читателем». Она добавляет термин «бронирование» как синоним из корпуса, но не утверждает, что продление разрешено или запрещено.
Для проверки заранее задайте ожидаемый фрагмент: раздел о продлении вместе с исключением для очереди. Запустите исходный вопрос и переписанную версию через одинаковый retrieval, сохраните идентификаторы и позиции кандидатов. Улучшение есть, если нужный фрагмент поднимается выше, а ложные разделы не вытесняют его. Красивый финальный ответ здесь не нужен: сначала оценивается только поиск.
Карта сохранения смысла
Элемент
Во входе
В поисковой версии
Проверка
Цель
Узнать правило продления
Найти условие продления
Цель не стала ответом
Объект
Книга из предыдущей реплики
Выданная книга
Ссылка раскрыта однозначно
Ограничение
На книгу есть очередь
Очередь или бронирование другим читателем
Условие не потеряно
Неизвестное
Разрешено ли продление
Не утверждается
Результат должен прийти из документа
Таблица отделяет допустимое уточнение формулировки от подмены неизвестного готовым ответом.
Шаблон задания для переписывания
Задание должно требовать структурированный результат, чтобы его можно было проверить до retrieval. Передайте исходный вопрос, только необходимую часть диалога, словарь допустимых терминов и список полей, которые нельзя менять. Попросите вернуть поисковую формулировку, сохранённые ограничения, неразрешённые неоднозначности и причину каждого добавленного термина. Если неоднозначность нельзя устранить, результатом должен быть запрос уточнения, а не выдуманная конкретика.
Шаблон переписывания запроса
{
"original_question": "А если на неё уже кто-то в очереди?",
"dialog_context": "Речь идёт о продлении выданной книги",
"must_preserve": ["продление", "книга", "наличие очереди"],
"allowed_terms": ["бронирование", "очередь читателей"],
"rewritten_query": "продление выданной книги при наличии очереди или бронирования другим читателем",
"added_terms_reason": "Термины используются в заголовках корпуса",
"unresolved_ambiguities": [],
"answer_hypothesis": null
}
Этот шаблон не привязан к продукту или библиотеке. Его ценность в проверяемых полях: можно автоматически сравнить обязательные элементы с результатом, а затем вручную оценить добавленные термины. Поле answer_hypothesis остаётся пустым, потому что ответ должен появиться только после чтения найденного документа. Для составного вопроса шаблон можно дополнить массивом подзапросов и общим идентификатором задачи.
Как проверить переписывание без генерации ответа
Соберите небольшой контрольный набор из прямых вопросов, разговорных перефразировок, вопросов с отрицанием, ссылок на предыдущую реплику и намеренно неоднозначных случаев. Для каждого зафиксируйте обязательные элементы смысла и допустимый фрагмент корпуса. Сравните исходный и переписанный запросы по составу кандидатов, позиции ожидаемого фрагмента и числу нерелевантных результатов. Одна средняя цифра не заменяет просмотр ошибок по типам.
Добавьте инварианты. В переписанной версии должны сохраниться все отрицания, роли, версии и временные границы. Новое фактическое утверждение запрещено. Добавленный термин должен быть объяснён словарём или контекстом. Если нужный документ не найден ни одной формулировкой, проблема может быть в корпусе, разбиении или фильтре, а не в самом вопросе.
Как диагностировать ошибку
Если нужный фрагмент находился по исходному вопросу, но исчез после переписывания, проверьте потерянные ограничения и слишком узкий термин. Если обе версии возвращают общий раздел вместо исключения, смотрите границы фрагментов и повторное ранжирование. Если правильный фрагмент найден, но ответ противоречит ему, ошибка находится после retrieval. Такой порядок не позволяет лечить разные уровни одной универсальной инструкцией.
Отдельно проверяйте пустую выдачу. Переписывание не должно бесконечно расширять запрос, пока не найдётся хоть что-нибудь. После нескольких допустимых вариантов система фиксирует отсутствие основания и возвращает вопрос на уточнение или сообщает, что корпус не содержит ответа. Это сохраняет границу между поиском и догадкой.
Границы и следующий шаг
Найденный фрагмент остаётся кандидатом, поэтому для значимого утверждения полезно проверить первоисточник, открыть конкретный раздел и убедиться, что условия не вырваны из контекста. Переписывание улучшает путь к документу, но не подтверждает актуальность, полноту или применимость самого документа.
Итоговая последовательность проста: сохранить исходный вопрос, выделить неизменяемое ядро, сформировать поисковую версию, проверить ограничения, запустить retrieval, сравнить кандидатов и только затем переходить к генерации ответа. Вымышленный пример показывает сохранение смысла запроса; он не содержит результатов испытаний или сравнения конкретных сервисов.