Почему курсы учат формуле промпта, но не учат чинить его, когда не сработало

Коротко: формулу промпта — «роль, задача, контекст, формат» — тебе расскажут бесплатно за десять минут в любом ролике. Проблема начинается на следующем шаге: ты написал по формуле, нажал отправить, а ответ — вода. И дальше никто ничего не объясняет. Ты переписываешь промпт наугад, пока не понравится. Это не навык, это лотерея. Ниже — методика: назвать симптом, поставить диагноз, сделать одну правку, сравнить. И порядок гипотез, в котором стоит копать: контекст → задача → формат → роль. Промпты в статье рабочие: жми «Запустить» и смотри на разницу своими глазами.

Что не так с формулой

Формула не врёт. Роль, задача, контекст, формат — это действительно четыре ручки, которыми ты крутишь ответ. Базу мы разбираем в статье что такое промпт и как его писать, и она нужна. Но формула отвечает на вопрос «как написать промпт с нуля». А в реальной работе ты почти никогда не пишешь с нуля. Ты сидишь перед промптом, который уже написан по всем правилам и всё равно выдал мусор.

Вот тут формула молчит. Она не говорит, какая из четырёх ручек виновата. Она не говорит, крутить одну или все четыре. Она не говорит, как понять, что стало лучше, а не просто по-другому. Формула — это чертёж, а тебе нужен ремонт.

Разница как между «вот схема двигателя» и «машина не заводится — что смотреть первым». Первое можно выучить за вечер. Второе — это профессия. И именно второго на рынке обучения почти нет.

Ученики просят ровно это — дословно

17 июля 2026 года мы сняли данные с Udemy (через внутренний API страницы курса) и со страниц отзывов Coursera. Читали мы меньшинство — тех, кто поставил низкие оценки. Самый плотный кластер претензий оказался у курсов, где prompt engineering стоит прямо в названии. Люди пришли за навыком из названия и не получили его. Дословно, с авторами и звёздами:

«There is nothing teached about creating a good prompt. It is just an overview of types of prompts» — Geralt O., 01.07.2026, 2★ (Prompt and Context Engineering 101, Mike Wheeler).

«No specific guidance on prompt engineering… what to avoid while asking, how to organize your thoughts, how to give feedback to AI based on its answers etc.» — Bharat Ram A., 05.06.2026, 1.5★ (Wheeler).

«i thought it would go deeper in prompts and have more examples and sessions to master or enhance our current prompts» — Manuel L., 15.06.2026, 2★ (Prompt Engineering for Everyone).

«Too much background on ChatGPT. Get me to how to prompt GPT» — Mark R., 16.09.2025, 1.5★ (Academind).

Остановись на Bharat Ram A. Он перечисляет три вещи, и третья — «как дать модели обратную связь на её ответ». Это и есть отладка, описанная своими словами человеком, который её искал и не нашёл. Manuel L. просит «улучшить наши текущие промпты» — то есть починить то, что уже написано и работает плохо. Разные люди, разные курсы, одна дыра.

Рядом — цитата, которая показывает, что происходит, когда проверки нет вообще:

«you send your assignments and immediatly you got your results: 100% correct. I am still speechless. I put all that effort in and have no idea whether I my answer was correct or not» — Shinysheep, 21.09.2023, 1★ (Prompt Engineering, Vanderbilt).

И в том же ряду: «quizzes give unhelpful feedback for incorrect answers and just say 'watch the video again'» — Cory Covino, 04.05.2024, 2★ (IBM). «All the coding is done in the labs for you. You won't have to debug anything or figure anything out, just press shift-enter» — Cornelius Griggs, 1★ (Generative AI with LLMs).

Григгс формулирует точнее всех, сам того не желая. «Не придётся ничего отлаживать» — это описание учебного продукта, где отладка вырезана как класс. Упражнение запускается, ощущение практики есть, на кону не стояло ничего.

Почему дыра существует: это архитектура, а не лень

Соблазнительно объяснить всё халтурой авторов. Объяснение хуже, чем правда. Правда структурная.

Проверить промпт можно единственным способом: запустить его на модели и посмотреть на ответ. Ни один другой способ не работает — промпт нельзя оценить по внешнему виду, как нельзя оценить код, не запустив его. А внутри урока на видеоплатформе модели нет. Значит, проверять нечем. Остаётся автотест по ключевым словам, а он ставит «100% correct» — ровно то, от чего Shinysheep потерял дар речи.

Дальше — деталь, которая закрывает вопрос. Prompt Engineering Specialization от Vanderbilt требует платную подписку ChatGPT+, чтобы выполнять задания. Курс отправляет ученика за моделью наружу, в другую вкладку. Экономика ученика Coursera выходит такая: Coursera Plus €50/мес (или €343/год с 14-дневным возвратом) плюс подписка на модель — около €70/мес за то, чтобы смотреть видео и получать автомат-100%. Про точную цену подписки скажем честно: первоисточник нам её не отдал, все домены OpenAI ответили 403, так что цифру мы не приводим. €50 за Coursera Plus — с их собственной страницы.

Как только модель живёт снаружи курса, курс перестаёт видеть твою работу. Он не знает, какой промпт ты написал, что ответила модель и почему ответила плохо. Учить отладке вслепую нельзя. Поэтому курс учит формуле — единственному, что можно рассказать со слайда.

И вот отсюда растёт претензия, которая на первый взгляд про другое:

«why read straight from the slide? I can do that. This was not a helpful course at all» — Janie I., 02.07.2026, 1★ (Justin Barnett).

«I can do that» — это не про плохого лектора. Это про то, что на слайд помещается только формула. Отладка не помещается на слайд: она состоит из живого ответа, который нельзя предсказать заранее.

Отладка — это диагностика, а не переписывание

Главная ошибка новичка выглядит так: ответ плохой → выделить весь промпт → написать заново, подлиннее и покрасивее. Иногда помогает. Понять, почему помогло, невозможно, и в следующий раз ты снова начинаешь с нуля.

Инженерный подход другой, и он состоит из четырёх шагов.

1. Симптом. Назови, что именно не так, словами, которые можно проверить. Не «плохо», а «выдумал факт», «проигнорировал формат», «слишком общо», «пересказал мой же ввод», «ответил не на тот вопрос», «сломался на длинном тексте». Пока симптом не назван, лечить нечего.
2. Диагноз. У каждого симптома есть типичная причина. Это гипотеза, а не приговор — но она задаёт, куда лезть первым.
3. Одна правка. Меняешь ровно одну вещь. Одну.
4. Сравнение. Запускаешь снова и сравниваешь с предыдущим ответом по своему критерию. Не «понравилось больше», а «стало ли лучше по тому признаку, который я лечил».

Цикл повторяется, пока симптом не уйдёт. Обычно это два-три круга, а не двадцать.

Правило одной отвёртки

Самый недооценённый пункт — третий. Меняй по одному.

Ты правишь пять вещей сразу, ответ становится лучше — и ты не знаешь, что помогло. Хуже: возможно, четыре правки были нейтральны, а одна была вредна, но её перевесила пятая. Ты уносишь в следующий промпт весь набор, включая вредную, и через месяц у тебя портянка на две страницы, где половина строк работает против тебя.

Это не наше изобретение, это базовое правило любой отладки — то же самое, что менять по одной переменной в эксперименте. Просто в работе с текстом соблазн покрутить всё сразу гораздо сильнее: правка стоит секунду.

Оговорка против себя. У правила есть цена. Одна правка за круг — это медленно, и на реальной задаче ты будешь срезать углы. Честный компромисс: правило одной отвёртки обязательно, пока ты не понял, где болезнь. Как только диагноз ясен и ты доводишь промпт до ума — можно править пачками, риск уже небольшой.

И вторая честность: модель недетерминирована. Один прогон — это выборка размером один. Ответ стал лучше после правки? Возможно, правка ни при чём, просто повезло. Поэтому сравнивать стоит хотя бы на трёх разных входах, а не на одном любимом.

Порядок гипотез: контекст → задача → формат → роль

Когда симптом назван, встаёт вопрос, какую из четырёх ручек трогать. У нас есть порядок, и он не случайный: от самой частой причины к самой редкой, от самого дорогого промаха к самому дешёвому.

1. Контекст — первый. Подавляющее большинство плохих ответов — это ответы на вопрос без фактов. Модель не знает твоего продукта, твоей аудитории, твоих ограничений, чисел, имён, прошлых решений. Она заполняет пустоту усреднённой ватой — потому что усреднённая вата и есть правильный ответ на вопрос без контекста. Если ответ «водянистый», «общий», «подходит кому угодно» — почти всегда виноват контекст, и никакая роль это не вылечит.
2. Задача — вторая. Проверь, что ты просишь одно действие, а не три сразу, и что глагол проверяемый. «Проанализируй» — не глагол, под ним может быть что угодно. «Выпиши пять рисков, каждый одной строкой» — глагол. Если модель отвечает не на тот вопрос или отвечает на половину — виновата задача.
3. Формат — третий. Дёшево чинится, сразу видно результат. Если содержание правильное, а вид не тот — правь формат и не трогай остальное. Работающий приём: дать образец вывода прямо в промпте, две-три строки. Образец сильнее описания.
4. Роль — последняя. Роль влияет в основном на тон и словарь. «Ты опытный маркетолог» не добавляет модели фактов о твоём рынке — это единственная строчка, которую все пишут первой и которая почти ничего не решает. Трогай роль, когда всё остальное на месте, а не нравится интонация.

Почему именно так? Потому что порядок отражает, сколько информации ты добавляешь. Контекст добавляет факты — это максимум. Задача добавляет точность цели. Формат добавляет форму. Роль добавляет стиль. Люди делают наоборот: сначала долго подбирают роль, потом обижаются на вату.

Таблица: симптом → диагноз → одна правка

• Вода, общие слова, «подойдёт любому». Диагноз: нет контекста. Правка: вставь пять конкретных фактов — кто читатель, что за продукт, какое ограничение, какое число, какой пример. Не переписывай остальное.
• Выдумал факт, ссылку, цитату. Диагноз: ты попросил то, чего у модели нет. Правка: либо дай данные в промпт, либо явно разреши сказать «не знаю». Строка «если данных нет — так и напиши, не придумывай» стоит дёшево и ловит многое. Подробнее — почему возникают галлюцинации ИИ.
• Проигнорировал формат. Диагноз: требование формата утонуло в середине или конфликтует с объёмом. Правка: вынеси формат отдельным блоком в конец и дай образец вывода.
• Ответил не на тот вопрос. Диагноз: в задаче два действия, модель выбрала одно. Правка: оставь один глагол. Второе действие — вторым промптом.
• Пересказал мой же ввод. Диагноз: нет глагола преобразования. «Вот текст, посмотри» — не задача. Правка: скажи, что сделать с текстом: сократить, переструктурировать, найти противоречия.
• Не тот тон, «это не мой голос». Диагноз: описание стиля вместо образца. Правка: вставь свой абзац и попроси попасть в него. Описание «пиши дружелюбно, но профессионально» не работает — образец работает.
• Сломался на длинном тексте. Диагноз: инструкция потерялась в массиве данных. Правка: раздели маркерами (---ТЕКСТ--- / ---ЗАДАЧА---) и повтори задачу после текста, а не только до.
• Слишком длинно, много вступлений. Диагноз: не запрещено. Правка: одна строка «Без вступления и выводов. Только список».

Обрати внимание: в шести случаях из восьми правка — это не «переписать промпт», а добавить или переставить одну вещь.

Проверь сам: плохой промпт, одна правка, разница

Дальше — то, чего у видеоплатформы нет физически. У каждого блока ниже есть кнопка «Запустить»: жми прямо здесь и смотри на живой ответ модели. Порядок важен — запускай подряд и сравнивай.

Шаг 1. Запусти заведомо плохой промпт

Это настоящий промпт, написанный «по формуле»: роль есть, задача есть, вежливость есть. Запусти и посмотри на ответ. Скорее всего, ты получишь текст, который подошёл бы любой компании на свете.

Ты опытный маркетолог. Напиши письмо клиентам о запуске нашего нового продукта. Сделай текст профессиональным, современным и цепляющим.

Что смотреть в ответе. Есть ли там хоть одно утверждение, которое нельзя перенести в письмо другой компании без правок? Обычно нет. Симптом назван: вода. Диагноз по нашему порядку: контекст.

Шаг 2. Одна правка — только контекст

Ту же задачу, тот же тон, ту же роль. Меняем ровно одно: добавляем факты. Роль не трогаем, формат не трогаем — чтобы честно увидеть, что даёт контекст сам по себе.

Ты опытный маркетолог. Напиши письмо клиентам о запуске нашего нового продукта.
Сделай текст профессиональным, современным и цепляющим.

КОНТЕКСТ:
- Продукт: планировщик смен для кофеен на 3-15 сотрудников.
- Читатели: владельцы кофеен, которые уже полгода пользуются нашей
  программой учёта товара. Они нам доверяют, но новую кнопку не искали.
- Что нового: смены теперь составляются автоматически с учётом
  заявок сотрудников на выходные. Раньше владелец собирал график в таблице.
- Честное ограничение: работает только для одной точки, сеть пока не поддерживаем.
- Цена: входит в текущий тариф, доплаты нет.
- Что должен сделать читатель: включить раздел «Смены» в своём аккаунте.

Что смотреть. Ответ стал конкретным, но, скорее всего, всё ещё длинным и с вступлением. Это нормально: мы лечили только контекст. Заметь, что «профессиональный, современный, цепляющий» так и остался непроверяемым требованием — и ничего не сделал.

Шаг 3. Ещё одна правка — задача и формат

Теперь чиним объём и вид. Роль убираем вовсе — проверим гипотезу, что она ничего не даёт. Требование «цепляющий» заменяем на проверяемое.

Напиши письмо клиентам о запуске новой функции.

КОНТЕКСТ:
- Продукт: планировщик смен для кофеен на 3-15 сотрудников.
- Читатели: владельцы кофеен, которые уже полгода пользуются нашей
  программой учёта товара. Они нам доверяют, но новую кнопку не искали.
- Что нового: смены составляются автоматически с учётом заявок
  сотрудников на выходные. Раньше владелец собирал график в таблице.
- Честное ограничение: работает только для одной точки, сеть пока не поддерживаем.
- Цена: входит в текущий тариф, доплаты нет.
- Действие читателя: включить раздел «Смены» в аккаунте.

ФОРМАТ:
- Тема письма: до 45 знаков, без слов «революция», «уникальный», «инновация».
- Тело: не больше 120 слов.
- Структура: первая строка - что изменилось; вторая - что это экономит;
  затем ограничение прямым текстом; в конце одно действие.
- Без вступления, без «мы рады сообщить», без прощальных абзацев.

Затем отдельной строкой: три причины, по которым это письмо
могут не открыть или удалить.

Что смотреть. Сравни три ответа. Ты только что провёл нормальный сеанс отладки: назвал симптом, выдвинул гипотезу, сделал одну правку, сравнил. И заодно поставил маленький эксперимент с ролью — сравни тон второго и третьего ответа и реши сам, стоила ли строчка «ты опытный маркетолог» того места, которое ей отводят все курсы.

Шаг 4. Тренажёр диагноза

Самый сложный навык — назвать симптом чужими руками. Здесь модель придумывает тебе кейс и строго оценивает твой диагноз. Автомата «100% correct» не будет.

Проэкзаменуй меня по диагностике промптов. Правила:

- Ты даёшь мне ОДИН кейс: задача, промпт целиком и плохой ответ модели.
  Кейс придумай сам, реалистичный, из офисной практики. Ответ модели
  тоже напиши сам - именно таким плохим, каким он был бы на деле.
- Я называю симптом одним термином и говорю, что менял бы ПЕРВЫМ.
- Ты оцениваешь строго: верен ли симптом, верна ли гипотеза,
  какая гипотеза была бы сильнее моей и почему. Если я предложил
  менять несколько вещей сразу - укажи на это отдельно.
- Не соглашайся из вежливости. Если я не прав - скажи прямо.
- Затем следующий кейс, сложнее. Всего пять кейсов.

Начни с первого кейса. Теорию заранее не объясняй.

Чего промптом не починить

Половина отладки — это вовремя понять, что дело не в промпте. Иначе ты будешь полировать формулировки там, где проблема в другом слое.

• Нет данных. Никакая формулировка не достанет факт, которого модели не давали. Если нужны цифры из твоей таблицы — их надо вставить, а не выпрашивать.
• Задача не решается текстом. «Посчитай точно», «проверь по актуальному сайту», «гарантируй» — это не про формулировку, это про инструменты. Тут начинается территория ИИ-агентов.
• Нет критерия «хорошо». Если ты сам не можешь сказать, чем ответ A лучше ответа B, ты не отлаживаешь, а перебираешь варианты, пока не устанешь. Критерий — это часть промпта, которая живёт у тебя в голове, и её тоже надо написать.
• Модель не та. Одна и та же задача ведёт себя по-разному — см. сравнение ChatGPT, Claude и Gemini. Прежде чем двадцать раз править промпт, попробуй тот же промпт на другой модели: это одна правка, а не двадцать.

Журнал версий: скучно и решает

Заведи файл. Три колонки: что было в промпте, что изменил, что стало с ответом. Одна строка на круг отладки.

Звучит как бюрократия, но это единственное, что превращает твои прогоны в знание. Через месяц ты откроешь файл и увидишь: «образец вывода вместо описания формата» сработал одиннадцать раз из двенадцати, а «ты эксперт мирового уровня» — ноль. Это твоя личная статистика, и она полезнее любого списка из 500 готовых промптов. Наши примеры промптов стоит брать как заготовки, а журнал — как то, что делает из заготовки твой инструмент.

Побочный эффект: через месяц у тебя есть портфолио. Не сертификат, который есть ещё у 698 444 человек, а десяток разобранных случаев с до/после. На собеседовании это разные весовые категории.

Как проверить курс — включая наш

Из наших замеров выводится проверка из четырёх вопросов. Задавай их любому обучению.

1. Где я запущу промпт? Если «в другой вкладке, за отдельную подписку» — курс не увидит твою работу и не сможет её разобрать. См. Vanderbilt и требование ChatGPT+.
2. Кто оценит мой промпт? Автотест по ключевым словам поставит «100% correct» и не даст информации. Это ровно случай Shinysheep.
3. Есть ли урок, где промпт не сработал? Открой программу и поищи. Нет такого урока — курс про формулу.
4. Когда обновлялся контент? Не по дате в карточке, а по свежим отзывам.

Честно о наших данных. Доля негативных отзывов (≤3.5★) на Udemy — 9,61% у Generative AI for Beginners и 10,36% у Complete AI Guide; у Prompt and Context Engineering 101 (худший рейтинг в выборке, 4.31) — ≥4,00%. На Coursera — 1,5–3,5%. То есть подавляющее большинство учеников довольны, и мы сознательно читали меньшинство. Не чтобы доказать, что курсы плохи: довольный ученик пишет «отличный курс», а недовольный называет, какого именно урока не хватило. Вторая оговорка: фильтр по звёздам на Coursera работает на стороне браузера, поэтому цитаты оттуда — из выдачи, которую видит любой посетитель. Мы не выуживали их из глубины фильтра, но и не можем утверждать, что видели все отзывы.

И оговорка про нас самих. У нашей песочницы есть жёсткий лимит запусков в день. Это значит: методика выше ценнее, чем кнопка. Кнопка даёт увидеть разницу; методика позволяет чинить промпты там, где никакой кнопки нет, — в твоём рабочем чате.

Итог

Формула промпта — это то, что помещается на слайд, поэтому её продают миллионам. Отладка не помещается на слайд, её нельзя проверить без живой модели в уроке, и поэтому её не продают почти нигде — а ученики просят её дословно, отзыв за отзывом. Дыра на рынке ровно в этом месте, и она же — самый быстрый способ стать сильнее большинства.

Запомни четыре шага: симптом → диагноз → одна правка → сравнение. И порядок гипотез: контекст, задача, формат, роль. Начни с базы — что такое промпт; посмотри, во что вырос рынок этой «профессии» — промпт-инженер: сколько платят и нужна ли профессия; научись ловить враньё модели — галлюцинации ИИ. А если хочется системно и с разбором провалов — есть наш курс по промпт-инжинирингу.