ChatGPT відповідає впевнено. Як перевірити, що він не вигадує

Знайдіть твердження, від яких залежить рішення

Не потрібно перевіряти кожне слово однаково докладно. Виділіть те, що змінює ваші дії: дату, суму, назву документа, умову, цитату чи адресу сайту. Якщо ChatGPT складає лист за вашими нотатками, спочатку перевірте, чи не додав він обставини, яких ви не повідомляли.

Вигаданими відповідями, або галюцинаціями, називають правдоподібні, але неправильні чи непідтверджені відомості. Прохання «ніколи не помиляйся» не гарантує їх відсутності. Повторне запитання тому самому помічнику також не є незалежним підтвердженням.

Офіційна документація до теми: OpenAI: ChatGPT Enterprise Prompting Guide ↗

Дайте конкретну основу

Для розбору документа додайте потрібну версію й попросіть указати сторінку або розділ. Для змінної інформації попросіть знайти поточне першоджерело: офіційний документ чи сторінку організації. Якщо пошук недоступний, помічник має прямо позначити цю межу.

Посилання корисне лише після перевірки. Відкрийте його: чи існує сторінка, чи стосується вашого запитання, чи збігаються дата й умови? Справжній сайт може бути наведений поруч із твердженням, якого на ньому немає. Наявність списку джерел ще не робить увесь текст перевіреним.

Попросіть розділити факт і припущення

Це приклад робочого запиту, а не захист від усіх помилок. Візьміть два чи три пункти з відповіді й самостійно знайдіть їх у документі. Якщо перевірка виявила вигадку, виправляйте конкретне твердження та його основу; не просіть просто зробити текст «більш упевненим».

Розбери доданий документ. Для кожного важливого твердження вкажи: сам факт, сторінку або розділ, короткий фрагмент-підставу. Окремо переліч висновки та припущення. Якщо відомостей немає або файл недоступний, напиши «не знайдено», не доповнюй із пам’яті. Наприкінці назви питання, які ще потребують перевірки.

Розберіть маленький приклад

У навчальному документі вказано строк «до 20 жовтня», а у відповіді з’явилася дата 25 жовтня. Попросіть показати фрагмент, на якому ґрунтується строк. Якщо такого фрагмента немає, позначте дату як непідтверджену. Потім виправте строк за документом і перевірте, чи не використано неправильну дату в інших частинах результату.

Для тренування оберіть короткий матеріал, де вам уже відомі відповіді на кілька запитань. Порівняйте відповіді з оригіналом. Це допомагає оцінити, де помічнику потрібні ясніші умови, але успішне тренування не гарантує правильності майбутніх відповідей.

Залиште невідоме видимим

Добрий підсумок може містити «не вдалося перевірити». Це корисніше за вигадану деталь. Якщо від твердження залежить важлива дія, відкладіть її до перевірки оригіналу. Докладніший запит, пошук і платний режим можуть допомагати роботі, але не дають обіцянки безпомилковості.