Как составить рубрику оценивания с помощью ИИ: опишите цель задания, задайте три наблюдаемых критерия с тремя уровнями качества и баллами, сгенерируйте черновик в инструменте и проверьте различимость уровней на реальной работе. Ниже — заполненная рубрика, копируемый запрос и разбор ошибок.
Свяжите цель задания с наблюдаемым результатом
Рубрика начинается с цели, записанной через действие, которое можно увидеть в работе ученика. В учебном задании из принятого артефакта цель звучит так: одноклассник может выполнить действие по тексту инструкции. Из этой формулировки сразу видно, что проверять нужно текст, а наблюдаемым результатом становится выполнение шагов другим человеком.
Документация Blackboard AI Design Assistant описывает генератор рубрик для заданий и других инструментов оценивания в Blackboard, включая журналы и обсуждения: он выдаёт уровневые дескрипторы в каждой точке шкалы по каждому критерию, а затем их правят под свои требования (sites.reading.ac.uk). Такой черновик ускоряет старт, а связь с целью задания остаётся на преподавателе.
Порядок действий:
- Запишите цель одним предложением через действие ученика.
- Назовите артефакт, который ученик сдаёт: инструкция, эссе, проект, отчёт.
- Перечислите, что в этом артефакте можно увидеть и посчитать.
- Отбросьте формулировки, для которых признак отсутствует.
- Сверьте черновик с целью и программой.
В обзоре MagicSchool на странице генератора рубрик сказано, что инструмент превращает детали задания и учебные цели в структурированную рубрику с ясными критериями и уровнями качества, а учитель добавляет тип задания, класс и учебные цели и получает редактируемую стартовую версию (magicschool.ai). Цель задания здесь — вход, а рубрика — выход.
Ошибка на этом шаге — цель «написать хорошую инструкцию». Она описывает впечатление. Наблюдаемый результат — одноклассник выполняет действие по тексту. Разница видна сразу: во втором случае есть проверяемое событие.
Разведите критерий, уровень качества и балл
Три сущности рубрики различаются по роли. Критерий называет, что проверяем. Уровень качества описывает, как выглядит работа на этой ступени. Балл переводит уровень в число для подсчёта.
В учебном примере три критерия: последовательность, понятность, проверка конца. Каждый получает три уровня и баллы 0, 1, 2. Последовательность: шаги отсутствуют — есть пропуски — полный порядок. Понятность: действия неясны — одно действие неясно — все действия однозначны. Проверка конца: отсутствует — общая — указан возврат в системе или подтверждение библиотекаря.
Такая запись даёт преподавателю одинаковую шкалу для всех работ. Документация Blackboard отмечает, что генератор выдаёт уровневые дескрипторы в каждой точке шкалы по каждому критерию, и эти дескрипторы правятся под требования (sites.reading.ac.uk). Шкала и дескрипторы связаны: без описания уровня балл превращается в произвольное число.
| Критерий | 0 баллов | 1 балл | 2 балла |
|---|---|---|---|
| Последовательность | шаги отсутствуют | есть пропуски | полный порядок |
| Понятность | действия неясны | одно действие неясно | все действия однозначны |
| Проверка конца | отсутствует | общая | указан возврат в системе или подтверждение библиотекаря |
Проверьте таблицу вопросом: может ли два преподавателя поставить разные баллы за одну и ту же работу? Если да, уровень описан расплывчато. Балл остаётся следствием уровня, а уровень — следствием наблюдаемого признака.
Заполненная рубрика из трёх критериев и трёх уровней
Ниже — рубрика целиком, в том виде, в котором её можно перенести в документ или в систему. Задание: инструкция из 4–6 шагов о том, как сдать книгу в библиотеку. Цель: одноклассник выполняет действие по тексту.
| Критерий | 0 | 1 | 2 |
|---|---|---|---|
| Последовательность | шаги отсутствуют | есть пропуски | полный порядок |
| Понятность | действия неясны | одно действие неясно | все действия однозначны |
| Проверка конца | отсутствует | общая | указан возврат в системе или подтверждение библиотекаря |
Максимум по этой рубрике — 6 баллов, минимум — 0. Ограничение задания: 4–6 шагов. Работа, вышедшая за рамки по числу шагов, получает отдельную пометку, а баллы по критериям считаются по той же таблице.
Инструменты дают разные входы для такой таблицы. Brisk Teaching на странице генератора рубрик сообщает, что учитель описывает, что оценивается, задаёт шкалу, формат вывода и язык, а затем получает рубрику, готовую к использованию или правке (briskteaching.com). Там же указано, что шкалу выбирают заранее, и Brisk поддерживает шкалы от 3 до 8 баллов (briskteaching.com). Для учебного примера достаточно трёх уровней.
Проверьте заполненную рубрику на полноту: каждый критерий имеет три уровня, каждый уровень описан наблюдаемым признаком, баллы идут по возрастанию. Если уровень повторяет соседний другими словами, его нужно переписать.
Копируемый запрос на рубрику по инструкции о возврате книги
Запрос ниже составлен под учебное задание и переносится в инструмент без правок. Он задаёт цель, число критериев, уровни, баллы и запрет на оценку личности.
Составь рубрику оценивания для учебного задания.
Задание: написать инструкцию из 4–6 шагов «как сдать книгу в библиотеку».
Цель: одноклассник может выполнить действие по тексту инструкции.
Сделай 3 критерия: последовательность, понятность, проверка конца.
Для каждого критерия дай 3 уровня качества и баллы 0, 1, 2.
Опиши каждый уровень наблюдаемым признаком в работе.
Не оценивай личность, почерк и старание ученика.
Проверь различимость уровней на приведённой работе.
Работа: «Возьми книгу. Приди на стойку. Передай библиотекарю. Уточни, отмечен ли возврат».
Что менять под себя: тему задания, цель, названия критериев, число шагов и текст работы. Число критериев и уровней оставьте на старте небольшим, чтобы таблица читалась.
Обзор MagicSchool на странице генератора рубрик указывает, что рубрику можно адаптировать под разные задания, классы, учебные цели и потребности учеников, начиная с одной версии и правя критерии и уровни без пересборки всей таблицы (magicschool.ai). Тот же обзор отмечает, что связь обратной связи с конкретными критериями помогает ученику понять, что получилось и на что смотреть дальше (magicschool.ai).
Запрос стоит сохранить в отдельном файле и менять в нём одну строку под новое задание. Так рубрика для следующей работы собирается за минуту.
Оцените полную вымышленную работу по каждому критерию
Все имена и результаты ниже — вымышленный учебный пример. Работа Пети: «Возьми книгу. Приди на стойку. Передай библиотекарю. Уточни, отмечен ли возврат». Четыре шага, ограничение 4–6 выполнено.
| Критерий | Что видно в работе | Балл |
|---|---|---|
| Последовательность | шаги идут в рабочем порядке, пропусков нет | 2 |
| Понятность | каждое действие названо однозначно | 2 |
| Проверка конца | указано уточнение про отметку возврата | 2 |
Учебная оценка — 2/2/2. Разбор по критериям показывает, почему баллы такие: порядок действий полный, формулировки однозначные, конец работы проверяем. Если бы в тексте стояло «сдай книгу» без уточнения про отметку, третий критерий дал бы 1 балл.
Документация Blackboard советует внимательно читать сгенерированные дескрипторы и сверять их с критериями оценивания и программы, а перед добавлением в курс проверять и править рубрику (sites.reading.ac.uk). В разборе работы это означает: сначала читаем признаки уровней, затем применяем их к тексту.
Оценка по рубрике остаётся примером разбора вымышленной работы. Решение об ученике принимает преподаватель. Рубрика даёт одинаковую рамку для всех работ и делает разбор объяснимым.
Непроверяемый критерий и оценка личности
Критерий «хорошая инструкция» непригоден: у него нет наблюдаемого признака. Два преподавателя прочитают одну работу и поставят разные баллы, потому что каждый представляет «хорошее» по-своему. Замена — признак в тексте: шаги идут по порядку, действия названы однозначно, конец работы проверяем.
Оценка личности создаёт вторую проблему. Формулировки про старание, аккуратность и способности ученика оценивают самого человека. В запрос поэтому входит строка о запрете оценки личности, почерка и старания. Балл относится к тексту инструкции.
| Плохой критерий | Почему не работает | Замена |
|---|---|---|
| хорошая инструкция | нет наблюдаемого признака | последовательность шагов |
| красивый текст | оценивает оформление и почерк | понятность действий |
| ученик старался | оценивает личность | проверка конца работы |
Обзор MagicSchool на странице генератора рубрик подчёркивает, что обратная связь, привязанная к конкретным критериям, даёт ученику ясную картину ожиданий и путь дальше (magicschool.ai). Привязка к критерию держит разбор в рамках работы.
Проверьте каждый критерий вопросом: что именно я увижу в тексте, чтобы поставить этот балл? Если ответа нет, критерий переписывается.
Проверка различимости уровней и решение преподавателя
Различимость уровней проверяется на одной работе. Возьмите текст и мысленно пройдите по всем трём уровням каждого критерия. Если работа подходит сразу к двум соседним уровням, граница описана слабо.
Порядок проверки:
- Прочитайте работу целиком.
- По каждому критерию выберите уровень.
- Запишите признак, по которому выбран уровень.
- Проверьте, что соседний уровень не подходит по тому же признаку.
- Перепишите границу, если подходят оба.
Документация Blackboard предупреждает: при генерации новой рубрики на основе уже созданной или существующей прежняя версия перезаписывается, и вернуться к предыдущей итерации нельзя (sites.reading.ac.uk). Поэтому перед новой генерацией сохраните текущую таблицу отдельным файлом. Там же указано, что в поле описания задания можно вставить до 2000 знаков, включая фрагменты брифа, описания модуля или спецификации программы (sites.reading.ac.uk). Чем точнее описание, тем ближе черновик к цели.
Brisk Teaching на странице генератора рубрик сообщает, что рубрики создаются для разных типов заданий: эссе, проектов, презентаций, обсуждений, лабораторных отчётов и творческих работ (briskteaching.com). Один и тот же порядок проверки различимости работает для любого типа.
Окончательное решение по работе остаётся за преподавателем. Рубрика фиксирует признаки и баллы, а суждение о работе делает человек.
Частые вопросы
Чем критерий отличается от уровня качества?
Критерий называет, что проверяем в работе: последовательность, понятность, проверку конца. Уровень качества описывает, как выглядит работа на этой ступени. Балл переводит уровень в число. Три сущности связаны, и каждая выполняет свою роль в таблице.
Сколько критериев и уровней брать на старте?
Для учебного задания достаточно трёх критериев с тремя уровнями и баллами 0, 1, 2. Такая таблица читается с одного взгляда и проверяется на различимость за несколько минут. Расширять набор стоит после того, как границы уровней описаны ясно.
Можно ли использовать генератор рубрик в Blackboard?
Документация Blackboard AI Design Assistant описывает генератор рубрик для заданий, журналов и обсуждений: он выдаёт уровневые дескрипторы по каждому критерию, которые затем правятся. Перед добавлением в курс рубрику проверяют и редактируют. Новая генерация перезаписывает прежнюю версию.
Какую шкалу выбрать для рубрики?
Brisk Teaching на странице генератора рубрик указывает, что шкалу выбирают перед генерацией и что поддерживаются шкалы от 3 до 8 баллов. Для учебного примера хватает трёх уровней. Шкала задаётся заранее, чтобы структура таблицы сразу соответствовала замыслу.
Что делать, если уровни не различаются?
Перепишите границу между соседними уровнями через наблюдаемый признак. Проверьте на одной работе: подходит ли она сразу к двум уровням. Если да, признак описан расплывчато. Окончательное решение по работе принимает преподаватель.