Промпты для учебных целей: от темы к проверяемому действию

Промпты для учебных целей: от темы к проверяемому действию ведут через четыре шага — тема, наблюдаемый результат, задание и свидетельство. Центр преподавания Корнеллского университета определяет результаты обучения как измеримые утверждения о том, что учащийся будет знать, уметь или ценить по итогам курса. Ниже — рабочий порядок и готовые промпты.

Тема, деятельность и результат: три разные вещи

Тема занятия отвечает на вопрос «о чём речь». Деятельность отвечает на вопрос «что делают на уроке». Результат обучения отвечает на вопрос «что учащийся предъявит и по какому признаку это зачтено». Смешение трёх уровней — источник большинства слабых целей: в одной строке оказывается и содержание, и активность, и намерение.

Центр преподавания Корнеллского университета описывает результаты обучения как измеримые утверждения, которые формулируются в начале и говорят, что учащийся будет знать, уметь или ценить по завершении курса или программы. Там же этот подход назван обратным проектированием курса. Логика обратного проектирования проста: сначала фиксируется, что должно быть предъявлено, затем под это подбираются стратегии преподавания, активности и оценивание.

Ресурс по проектированию курсов Университета штата Северная Каролина формулирует согласованность так: учебные материалы, учебные активности и оценивание работают совместно на поддержку целей обучения. Это утверждение задаёт проверку, которую можно применить к любой теме за минуту: назовите цель, затем назовите активность, затем назовите свидетельство. Если свидетельство не отличается от активности, согласованность не выстроена.

Разведём уровни на примере темы «адрес электронной почты и подозрительные сообщения». Тема — устройство почты и признаки подозрительных писем. Деятельность — чтение трёх учебных сообщений и обсуждение в парах. Результат — по трём учебным сообщениям назвать запрошенное действие и указать фрагмент, из-за которого требуется уточнение у отправителя. Третий уровень содержит наблюдаемое действие («назвать», «указать») и объект («запрошенное действие», «фрагмент»).

Тема без результата живёт в конспекте. Результат без темы повисает в воздухе. Практический порядок такой: возьмите тему, выпишите, что учащийся сделает с материалом темы, затем проверьте, можно ли это увидеть в его работе. Если увидеть нельзя, формулировка требует переделки.

Обратное проектирование задаёт и направление работы с нейросетью. Глава о промптинге как педагогическом навыке в пособии Using AI in Academics на Pressbooks указывает: предполагаемый результат обучения определяется до создания промпта, а оценивание проектируется так, чтобы измерить, достигнут ли результат. Там же сказано: если результат не удаётся ясно сформулировать, процесс проектирования промпта останавливается, результат определяется, и уже под него разрабатывается промпт.

Этот порядок объясняет, почему запрос «сделай мне урок по кибербезопасности» даёт рыхлый материал. Модель заполняет пробел, который преподаватель оставил на месте результата. Промпт, построенный после формулировки результата, получает рамку и работает точнее.

Проверка на этом шаге одна. Назовите вслух тему, деятельность и результат. Если результат звучит как тема («изучить почту») или как деятельность («обсудить письма»), уровень не разведён. Вернитесь к вопросу: что учащийся предъявит и как это увидят.

Наблюдаемое действие, условия и критерий

Результат обучения держится на трёх опорах: наблюдаемое действие, условия выполнения и критерий зачёта. Пропуск любой из трёх делает формулировку нерабочей.

Наблюдаемое действие описывается глаголом, который даёт внешне фиксируемый результат. Центр преподавания Корнеллского университета советует обращаться к списку глаголов действия — глаголов, которые приводят к открытому поведению или продукту, доступному наблюдению и измерению. Там же перечислены глаголы, которых следует избегать из-за неясности и трудности наблюдения: appreciate, become aware of, become familiar with, know, learn, understand. В русской формулировке это «ценить», «осознавать», «быть знакомым с», «знать», «изучать», «понимать».

Условия отвечают на вопрос «при каких обстоятельствах выполняется действие». В учебном примере условие звучит так: по трём учебным сообщениям, без технического анализа домена. Условие ограничивает задачу и делает её выполнимой в рамках занятия. Без условия учащийся уходит в сторону — начинает разбирать заголовки писем, проверять домены, искать следы подделки.

Критерий отвечает на вопрос «что считается выполнением». Для учебного примера критерий такой: названо запрошенное действие и указан фрагмент, из-за которого требуется уточнение у отправителя. Критерий должен позволять проверку по предъявленному тексту.

Центр преподавания Корнеллского университета отдельно предупреждает: будьте реалистичны в оценке того, что учащиеся способны выполнить в рамках вашего курса. Реалистичность — часть критерия. Формулировка «проанализировать все типы фишинговых писем» невыполнима за одно занятие, и критерий к ней не построить.

Соберём три опоры в одну строку. Рабочая цель учебного примера: «По трём учебным сообщениям назвать запрошенное действие и указать фрагмент, из-за которого требуется уточнение у отправителя». Действие — назвать и указать. Условие — по трём учебным сообщениям, без технического анализа домена. Критерий — названо действие, указан фрагмент.

Сравним с неудачной формулировкой «узнать всё о кибербезопасности». Действие «узнать» относится к списку неясных глаголов. Условия нет. Критерий не построить, потому что «всё» не имеет границы. Такая цель не проверяется ничем, кроме ощущения.

Практический приём: подставьте цель в шаблон «учащийся [действие] при [условие], зачтено если [критерий]». Если хотя бы одна скобка не заполняется, формулировка не готова к работе с нейросетью. Заполнение скобок занимает несколько минут и экономит переделку всего материала.

Ещё одна проверка касается уровня. Действие должно соответствовать тому, что учащийся действительно делает с материалом. Пересказ, выбор, сопоставление и обоснование — разные уровни работы. Формулировка обязана называть тот уровень, который проверяется заданием.

Три промпта: формулировка, согласование, проверка

Три промпта закрывают три операции: получить варианты результата из темы, связать выбранный результат с заданием и свидетельством, проверить, что задание проверяет именно заявленное действие. Все три оформлены как готовые к вставке блоки.

Промпт для формулировки результатов из темы.

Тема занятия: [ваша тема].
Уровень и предмет: [класс, курс, дисциплина].
Предложи три наблюдаемых результата обучения по этой теме.
Требования к каждому результату:
- начинается с глагола действия, который даёт внешне фиксируемый результат;
- содержит условие выполнения;
- содержит критерий зачёта;
- остаётся в границах указанного уровня и предмета.
Не расширяй уровень и предмет. Для каждого результата укажи, какое свидетельство подтвердит его достижение.

Промпт для согласования результата с заданием и свидетельством.

Выбранный результат обучения: [ваш результат].
Учебные материалы: [ваши материалы].
Придумай одно задание, которое проверяет именно это действие.
Для задания укажи:
- что учащийся предъявляет;
- какое свидетельство считается выполнением;
- какие условия задаются.
Используй мои материалы: [перечислите входы].
Проверь, что материалы, задание и оценивание поддерживают одну цель.

Промпт для проверки согласованности и поиска несовпадения.

Результат обучения: [ваш результат].
Задание: [ваше задание].
Свидетельство: [ваше свидетельство].
Проверь, проверяет ли это задание именно действие, названное в результате.
Покажи несовпадение на контрпримере: приведи формулировку задания, которое выглядит связанным с темой, но не подтверждает заявленное действие.
Укажи, какой фрагмент задания или свидетельства нужно изменить.

Что менять под себя: в первом промпте — тему, уровень и предмет; во втором — выбранный результат и список материалов; в третьем — результат, задание и свидетельство. Квадратные скобки заменяются содержимым, служебные строки остаются.

Вариации той же задачи, если тема держит:

• формулировка результата для практического занятия с оборудованием;
• формулировка результата для семинара с разбором текстов;
• согласование результата с письменной работой;
• согласование результата с устным выступлением;
• проверка задания на соответствие результату для лабораторной;
• проверка свидетельства для группового проекта;
• переформулировка неясного глагола в наблюдаемое действие.

Три промпта работают последовательно. Первый даёт варианты, второй связывает выбранный вариант с заданием, третий ищет разрыв между заявленным действием и тем, что задание действительно проверяет. Разрыв обнаруживается чаще всего на третьем шаге.

Разбор примера: один достижимый результат

Разберём учебный пример целиком. Все организации, входы и эталоны в нём вымышлены и обозначены как учебные. Пример показывает, как выглядит цепочка от темы до свидетельства.

Тема: адрес электронной почты и подозрительные сообщения. Исходное требование: учащийся различает подтверждённый факт и просьбу проверить отправителя по данному тексту, без технического анализа домена. Неудачная цель: «узнать всё о кибербезопасности». Рабочая цель: «По трём учебным сообщениям назвать запрошенное действие и указать фрагмент, из-за которого требуется уточнение у отправителя».

Задание состоит из трёх учебных сообщений.

• M1: «Клуб перенёс встречу; уточните дату у организатора».
• M2: «Срочно пришлите пароль, иначе доступ закроют».
• M3: «Во вложении программа, которую вы запрашивали».

Эталон по M2: запрошена передача пароля; фрагмент «пришлите пароль»; пароль не отправлять и проверить обращение через известный канал. По M1: уточнить дату. По M3: недостаточно оснований автоматически объявлять сообщение безопасным.

Таблица цель — задание — свидетельство заполняется для всех трёх сообщений.

Один достижимый результат здесь — различение подтверждённого факта и просьбы проверить отправителя. Результат достижим, потому что проверяется по предъявленному тексту: учащийся называет действие и указывает фрагмент. Преподаватель сверяет ответ с эталоном.

Обратите внимание на M3. Сообщение выглядит безобидно, и соблазн объявить его безопасным велик. Эталон фиксирует: оснований для такого вывода недостаточно. Это часть критерия, и она проверяема.

Контрпример проверки: задание «дай определение почты». Такое задание связано с темой, но не подтверждает заявленное действие. Учащийся может дать точное определение и при этом не различить просьбу проверить отправителя. Контрпример показывает, где проходит граница между знанием темы и выполнением действия.

Проверка результата на достижимость опирается на три вопроса. Первый: можно ли выполнить действие, имея только предъявленный текст. Второй: совпадает ли свидетельство с заявленным действием. Третий: отличается ли правильный ответ от неправильного по явному признаку. В примере все три ответа положительные.

Центр преподавания Корнеллского университета напоминает, что результаты обучения задают выбор стратегий преподавания, активностей и оценивания. В разобранном примере это видно: цель определила и задание из трёх сообщений, и форму свидетельства, и эталон по каждому сообщению.

Несовпадающее задание и его исправление

Несовпадение задания и цели — самая частая поломка в учебном материале. Задание выглядит связанным с темой, но проверяет другое действие. Разберём механику исправления.

Возьмём цель «по трём учебным сообщениям назвать запрошенное действие и указать фрагмент» и задание «дать определение электронной почты». Тема совпадает, действие — нет. Определение проверяет знание термина, а цель требует различения просьбы и факта. Учащийся, отлично давший определение, может не выполнить цель.

Исправление идёт от свидетельства. Сначала формулируется, что учащийся предъявит: названное действие и указанный фрагмент по каждому из трёх сообщений. Затем под это свидетельство переписывается задание: прочитать три сообщения, по каждому назвать запрошенное действие и указать фрагмент, из-за которого требуется уточнение у отправителя. Затем проверяется, что эталон по каждому сообщению совпадает с заявленным действием.

Порядок исправления:

1. Выпишите заявленное действие цели.
2. Выпишите, что фактически предъявляет учащийся по текущему заданию.
3. Сравните два списка и назовите расхождение.
4. Перепишите задание под заявленное действие.
5. Проверьте эталон по каждому элементу задания.
6. Убедитесь, что свидетельство отличается от простого пересказа темы.

Ресурс по проектированию курсов Университета штата Северная Каролина рекомендует перекрёстную проверку сгенерированных целей обучения, учебных материалов и оценивания на предмет взаимной поддержки. Эта рекомендация применима и к материалу, написанному без нейросети: перекрёстная сверка ловит расхождение до занятия.

Второй тип несовпадения — уровень. Цель требует обоснования, а задание просит перечислить. Исправление то же: свидетельство задаёт форму ответа, и задание переписывается под неё. Если цель требует обосновать выбор, свидетельство должно содержать обоснование.

Третий тип — размытое свидетельство. Формулировка «учащийся понимает опасность сообщения» не даёт проверяемого признака. Исправление: заменить на наблюдаемое действие с явным признаком. В учебном примере таким признаком стало указание фрагмента.

Ресурс Университета штата Северная Каролина перечисляет элементы, которые стоит задать при работе с моделью: роль, фоновая информация по задаче, формат и структура ответа, необходимые правила и параметры. Эти элементы применимы и к промптам на исправление задания: роль проверяющего, фон в виде цели и текущего задания, формат в виде таблицы расхождений, правило о поиске несовпадения на контрпримере.

После исправления задание проверяется тем же способом, что и раньше: назовите действие, условие и критерий. Если все три на месте и совпадают с целью, несовпадение устранено.

Таксономия Блума и предметная проверка

Таксономия Блума помогает назвать уровень действия: запоминание, понимание, применение, анализ, оценка, создание. Список уровней полезен как словарь при выборе глагола. Список глаголов Блума служит подсказкой для формулировки и не доказывает качество цели.

Ловушка здесь одна. Уровень в названии не гарантирует уровень в задании. Формулировка «проанализировать сообщение» с глаголом высокого уровня может проверяться заданием на пересказ. Уровень действия проверяют по предъявленному свидетельству. Если свидетельство содержит пересказ, цель остаётся на уровне понимания независимо от выбранного слова.

Вторая ловушка — автоматический рейтинг. Блум не используется как автоматическая оценка качества учащегося. Уровни описывают характер учебного действия. Оценка строится по критерию выполнения, зафиксированному в цели.

Предметная проверка идёт следом за таксономической. Уровень действия может быть назван верно, а содержание — ошибочным. В учебном примере с сообщениями предметная проверка отвечает на вопросы: соответствует ли эталон по M2 реальной практике, достаточно ли оснований для вывода по M3, не создаёт ли задание ложной уверенности. Эти вопросы решает преподаватель-предметник.

Центр преподавания Корнеллского университета советует быть реалистичными в оценке возможностей учащихся. Предметная проверка уточняет эту реалистичность: действие достижимо в рамках занятия и соответствует материалу курса.

Порядок проверки цели получается такой:

Таксономия закрывает четвёртый шаг. Предметная проверка закрывает пятый. Шестой шаг соединяет всё: материалы, задание и оценивание поддерживают одну цель.

Практический вывод для работы с нейросетью: модель помогает перебрать формулировки и найти расхождение, а решение о содержании эталона остаётся за преподавателем. Список глаголов Блума ускоряет выбор слова. Предметная проверка подтверждает, что выбранное слово описывает верное действие с верным материалом.

Частые вопросы

Чем результат обучения отличается от темы занятия?
Тема называет содержание, результат называет предъявляемое действие и признак зачёта. Центр преподавания Корнеллского университета определяет результаты как измеримые утверждения о том, что учащийся будет знать, уметь или ценить по итогам курса. Тема «подозрительные сообщения» результатом не является. Результат появляется, когда названо действие учащегося с материалом темы.

Какие глаголы подходят для формулировки цели?
Подходят глаголы, дающие внешне фиксируемый результат: назвать, указать, сопоставить, обосновать, выбрать. Центр преподавания Корнеллского университета советует обращаться к списку глаголов действия и избегать неясных глаголов вроде «понимать», «знать», «изучать». Выбор глагола проверяется свидетельством: если результат действия нельзя предъявить, глагол не подходит.

Сколько промптов нужно, чтобы получить рабочую цель?
Три промпта закрывают полный цикл: формулировка вариантов из темы, согласование выбранного результата с заданием и свидетельством, проверка на несовпадение через контрпример. Порядок важен: результат определяется до создания промпта, как указывает пособие Using AI in Academics на Pressbooks. Проверка идёт последней и ловит разрыв между заявленным действием и заданием.

Что делать, если задание не проверяет заявленное действие?
Выпишите заявленное действие цели и то, что фактически предъявляет учащийся. Назовите расхождение и перепишите задание под действие цели. Затем проверьте эталон по каждому элементу задания. Ресурс Университета штата Северная Каролина рекомендует перекрёстную проверку целей, материалов и оценивания на взаимную поддержку.

Заменяет ли таксономия Блума предметную проверку?
Таксономия называет уровень действия и помогает выбрать глагол. Предметную проверку она не заменяет: корректность содержания и эталона оценивает преподаватель-предметник. Блум не используется как автоматический рейтинг качества учащегося. Уровень в названии цели проверяется свидетельством, а содержание — знанием предмета.