Такие правдоподобные ошибки часто называют галлюцинациями. Для обычной задачи удобнее начать с простого разделения: что прямо известно, что рассчитано и что только предполагается. Тогда легко увидеть, в каком месте ответ опирается на ваш документ, а где модель заполнила пробел собственной догадкой.
Что сделать
- Выделите утверждения, от которых зависит решение. Это могут быть дата закрытия записи, условие возврата или требование принести документ. Общие советы и проверяемые факты не стоит смешивать в одном списке.
- Попросите источник для каждого существенного факта. Откройте ссылку и найдите нужное место. Реальный сайт может существовать, но не подтверждать написанное. Для условий организации лучше подходит её собственная страница или документ.
- Сравните ответ с источником и попросите исправить конкретное расхождение. Если информации нет, оставьте вопрос открытым. Повторная просьба проверить себя не превращает неподтверждённое утверждение в установленный факт.
Пример запроса
Разбери свой ответ. Раздели утверждения на факты из приложенного документа, предположения и вопросы без данных. Для каждого важного факта укажи место в документе или открываемую первичную ссылку. Если подтверждения нет, прямо скажи, что это неизвестно, и убери уверенный вывод.
Как проверить результат
Вы получите ответ с понятной опорой и список вопросов, которые ещё нужно выяснить. Проверьте хотя бы ключевые даты, суммы и условия самостоятельно, прежде чем действовать по рекомендации.
Модель может ошибиться и при самопроверке. Для решений с серьёзными последствиями проверка источников и профессиональная помощь важнее убедительного объяснения помощника.
Подробнее о возможностях ChatGPT
Возможности и настройки проверяйте в своём аккаунте. Примеры запросов адаптируйте под свою задачу.