MegaGPTMEGAGPT
Урок 8 из 10 · ≈ 6 минут

Проверять ответы нейросети

Чему научитесь: проверять ответы нейросети: просить пересчитать по шагам, отделять подтверждённое от предположений и знать, где проверить важное самому.

Задача

Вы попросили MegaGPT посчитать бюджет поездки: 3 дня, 2 ночи в гостинице по 4 500 ₽, еда — 1 500 ₽ в день, билеты на поезд — 6 000 ₽ туда и обратно. Ответ пришёл быстрый и уверенный: «Гостиница — 13 500 ₽, еда — 4 500 ₽, билеты — 6 000 ₽, итого 24 000 ₽. Еды по 1 500 ₽ в день хватит с запасом. Билеты можно сдать без потерь за сутки до отправления». Звучит убедительно, но в расчёте ошибка, а два утверждения не следуют из ваших данных.

Так спрашивают обычно

«Ты уверен?»

Иллюстративный пример ответа:

Да, всё верно: итого 24 000 ₽. Хорошей поездки!

  • На общий вопрос модель часто просто подтверждает свой ответ
  • Не сказано, что именно проверить
  • Ошибка осталась: 2 ночи посчитаны как 3
Так лучше

ОтветПроверь ответ на мой вопрос. Мои данные: поездка на 3 дня, 2 ночи в гостинице по 4 500 ₽, еда — 1 500 ₽ в день, билеты на поезд — 6 000 ₽ туда и обратно. Ответ: «Гостиница — 13 500 ₽, еда — 4 500 ₽, билеты — 6 000 ₽, итого 24 000 ₽. Еды по 1 500 ₽ в день хватит с запасом. Билеты можно сдать без потерь за сутки до отправления». РасчётПересчитай все суммы по шагам и покажи каждое действие. СтатусДля каждого утверждения отметь: подтверждено моими данными, предположение или неизвестно. ИсточникиДля предположений и неизвестного скажи, где я могу проверить это сам. Ссылки и цитаты не придумывай — если не уверен, так и напиши.

Иллюстративный пример ответа:
Что в ответеСтатус и как проверить
Гостиница: 2 × 4 500 = 9 000 ₽Исправлено: было 13 500 ₽ — посчитаны 3 ночи вместо 2
Итого: 9 000 + 4 500 + 6 000 = 19 500 ₽Подтверждено: сложите три суммы сами
Еды по 1 500 ₽ в день хватитНеизвестно: зависит от города и привычек — в ваших данных этого нет
Билеты можно сдать без потерь за суткиПредположение: правила возврата — у перевозчика или там, где покупали билет

Это проверка той же моделью: она хорошо ловит ошибки в расчётах, но не заменяет независимую. Правила и факты сверяйте с первичным источником. Ответ сокращён.

Иллюстративный пример: ответы написаны для урока и сокращены. В MegaGPT формулировки и цифры будут другими.

Пример откроется в новом чате, поэтому данные и ответ уже вставлены в запрос. В своём чате достаточно отправить проверку следующим сообщением. Сам запрос не отправится.

  1. 1Нажмите «Открыть пример в MegaGPT» и отправьте запрос.
  2. 2Посмотрите, нашла ли модель ошибку в 13 500 ₽ и как отметила утверждения о еде и возврате билетов.
  3. 3Итоговую сумму пересчитайте сами.

Как проверить ответ нейросети

Ответ + расчёт + статус + источники

  1. ОтветЧто проверяем. В том же чате — просто следующее сообщение; в новом — вставьте свои данные и ответ
  2. РасчётПересчитать по шагам, показав каждое действие
  3. СтатусПодтверждено, предположение или неизвестно — для каждого утверждения
  4. ИсточникиГде проверить самому — без выдуманных ссылок и цитат

Нейросеть может ошибаться, даже когда звучит уверенно, а на «Ты уверен?» часто отвечает «да». Конкретная просьба пересчитать и разделить факты и догадки находит больше ошибок. Но это проверка той же моделью: для важных решений сверяйтесь с первичным источником — правилами перевозчика, официальным сайтом, договором.

Попробуйте сами

  1. 1Возьмите ответ MegaGPT с цифрами или фактами. Проще всего проверить его в том же чате: следующим сообщением попросите пересчитать по шагам, отметить статус утверждений и подсказать, где их проверить.
  2. 2Для нового чата нажмите «Создать свой запрос» и вставьте в шаблон свои данные и ответ вместо подсказок в квадратных скобках.
  3. 3Отправьте запрос, сами пересчитайте ключевые цифры, а предположения проверьте по источнику.
Шаблон для своей задачи:

Проверь ответ на мой вопрос. Мои данные: [исходные цифры и условия]. Ответ: «[вставьте ответ, который хотите проверить]». Пересчитай все суммы по шагам и покажи каждое действие. Для каждого утверждения отметь: подтверждено моими данными, предположение или неизвестно. Для предположений и неизвестного скажи, где я могу проверить это сам. Ссылки и цитаты не придумывай — если не уверен, так и напиши.

Получилось, если:
  • Каждое вычисление показано по шагам
  • Ошибки названы и исправлены
  • Утверждения разделены: подтверждено, предположение, неизвестно
  • Для непроверенного сказано, где проверить самому
  • Нет выдуманных ссылок и цитат
  • Ключевые цифры вы пересчитали сами