Когда ИИ выдаёт бред, но делает это очень уверенно

Я — Дмитрий Губкин. Помогаю B2B‑компаниям и продуктовым командам внедрять ИИ и расти быстрее: делюсь рабочими фреймворками, промптами и кейсами из практики трекинга и консалтинга. Здесь — пошаговые гайды по Perplexity/GPT, конкурентному анализу, УТП, сегментации и первым B2B‑продажам. Минимум воды, максимум прикладной ценности для бизнеса.

галлюцинацииchatgptии

Я каждый день работаю с нейросетками (по паре часов, а то и больше) — использую их как в личных, так и в бизнес-проектах: от ресерча и анализа конкурентов до создания презентаций и плана тренировок. Так вот, чем больше я взаимодействую с ИИ, тем чаще нахожу новые фичи баги.

Из недавнего:

  • 👉 Обращаюсь к ChatGPT чтобы найти конкурентов одного B2B-сервиса. Он начинает рассказывать про неизвестную мне SAAS-ку, называет функции, кейсы… но дальше выяснятеся, что такого сервиса просто не существует.
  • 👉 Или ищу свежие исследования по теме — ИИшка выдаёт список статей из авторитетных журналов, со ссылками и датами. Проверяю — а этих статей просто нет🙈
  • 👉 Прошу ChatGPT рассчитать окупаемость проекта при заданных расходах и доходах. Он выдаёт таблицу с прогнозами, ROI и сроком выхода в плюс… но когда пересчитываю вручную, оказывается, что он игнорировал часть затрат и «склеил» числа так, чтобы всё выглядело красиво, но не соответствовало реальности.

Это те самые «галлюцинации» — когда нейросетка придумывает факты, звучащие убедительно, но абсолютно ложные. При этом ИИ не врёт осознанно, он просто генерирует слова так, чтобы они звучали «убедительно». Просил ответ — получи.

В сети таких историй и полезных советов гуляют миллионы, вот некоторые из них(от Google AI Overview):

  • — «Хотите, чтобы сыр не падал с пиццы? Добавьте 1/8 стакана клея Elmer’s»
  • — «Беременны? Курите 2–3 раза в день»
  • — «Для витамина D смотрите 15 минут прямо на солнце»

И если ты не привык перепроверять источники — ты легко лопаешь эту «правду». Навык критического мышления обретает еще большую ценность, факт.

Как не попасться на этот бред?

  • ✔ Перепроверять любую информацию, особенно если от неё зависит здоровье или деньги.
  • ✔ Не верить слепо даже авторитетным источникам — важно смотреть первоисточники.
  • ✔ Помнить, что ИИ может ошибаться. Чем умнее он становится, тем убедительнее звучат его ошибки.

Делитесь своими примерами 👇

Человек в объёмной белой пуховой куртке идёт по городской улице зимой; на заднем плане прохожие и архитектура, кадр в уличном стиле, ассоциативная иллюстрация к тексту об уверенных, но ложных выводах ИИ.
Иллюстрация: прохожий в тёплой белой куртке; образ используется метафорически.

Дискуссия

Art_V
Попросил найти судебную практику по одному из реальных дел. Дипсик выдал два десятка решений судов с нужным мне результатом, я уж было обрадовался. Но ненадолго, т.к. в самом конце он невзначай так предупредил, что все решения вымышленные и мне рекомендуется самостоятельно поискать их в интернете. 💪🤦‍♂
Alexander Shuxtoff
А есть какие-то советы по промптингу, чтобы минимизировать фантазии? Если есть – поделитесь, пожалуйста 🙂
Губкин | Про AI и B2B-продукты
Alexander Shuxtoff
А есть какие-то советы по промптингу, чтобы минимизировать фантазии? Если есть – поделитесь, пожалуйста 🙂
Держи: 1. Роль – Определение, в какой роли должен выступать AI (например, эксперт, консультант, ассистент). 2. Навыки – Какие знания и умения должны быть у AI (например, анализ данных, маркетинг, кодинг). 3. Правила – Ограничения или принципы работы (например, избегать сложного языка, соблюдать формальный стиль). 4. Инструкции – Конкретные указания по выполнению задачи (например, отвечать в формате списка, давать примеры). 5. Пошаговость – Просьба разложить ответ на последовательные шаги. 6. Запреты – Что нельзя делать (например, не использовать ненормативную лексику, не давать неточные данные). 7. Примеры – Ожидаемый формат ответа или примеры желаемого результата.
Губкин | Про AI и B2B-продукты
Art_V
Попросил найти судебную практику по одному из реальных дел. Дипсик выдал два десятка решений судов с нужным мне результатом, я уж было обрадовался. Но ненадолго, т.к. в самом конце он невзначай так предупредил, что все решения вымышленные и мне рекомендуется…
Класс
Наталья
Iosif Minevich
Есть еще неплохая штука https://notebooklm.google.com/ Создаешь свою базу из нужных книг, учебников, статей, своих постов и материалов. А потом эта ИИ генерирует тексты опираясь на эту базу. И это значительно получается ближе к тому, что ты хочешь получить…
Подскажите, а как эту программу установить? Я перехожу по ссылке и не грузит.
Губкин | Про AI и B2B-продукты
Наталья
Подскажите, а как эту программу установить? Я перехожу по ссылке и не грузит.
vpn включите)
Пометун 🔥 Биздев без выгорания
Составлял планы пробежки мимо достопримечательностей в новом городе — часть просто выдумал, причём названия точек звучали вполне локально ))
Пометун 🔥 Биздев без выгорания
Искал компании в зарубежных локациях, просил указать те, у которых есть сайты — часть названий и их сайтов просто выдумал. Поэтому стал добавлять в промпт условие, что предлагаемая информация есть в нескольких интернет-источниках.
Алексей Гатин | обучение ИИ корп команд
Мой пример: Воодушевленный наивняк (я) и полный ноль в программировании спросил ChatGPT, сможет ли он написать Telegram-бота для интервью участников одного бизнес сообщества. Он ответил буквально следующее « конечно, я все сделаю и протестирую, приходи через 3 недели». Поверил. Пообещал HR и наболтал всем. В итоге — ни строки. Пришлось разобраться во всем самому, заняло полтора месяца. А он даже сопровождать нормально не смог, делал с Gemini 2.5. Благодарен ИИ за школу жизни. Теперь я много чего знаю про ИИ, n8n и базы данных :)
Губкин | Про AI и B2B-продукты
Алексей Гатин | обучение ИИ корп команд
Мой пример: Воодушевленный наивняк (я) и полный ноль в программировании спросил ChatGPT, сможет ли он написать Telegram-бота для интервью участников одного бизнес сообщества. Он ответил буквально следующее « конечно, я все сделаю и протестирую, приходи через…
Спасибо что поделились
Присоединиться к обсуждению →

Читайте так же