Как научить AI-репетитора учитывать типичные ошибки конкретного студента

Студент несколько раз неправильно применил правило. Репетитор сохранил это как устойчивую слабость и теперь постоянно даёт более простые упражнения, хотя участник уже разобрался. Такая персонализация может удерживать человека в устаревшем представлении о его подготовке. Чтобы помощь оставалась полезной, записи о трудностях должны опираться на конкретные ответы, содержать границы и регулярно пересматриваться. Ошибка является данными для выбора следующей практики, а не характеристикой личности, которую нужно навсегда закрепить в системе.

«Научить репетитора» в этом контексте означает настроить инструкции, материалы и способ использования профиля. Это не обязательно техническое дообучение весов модели. Возможности памяти и контекста зависят от сервиса, поэтому их нужно проверять отдельно. Педагогическая основа одинакова: определить, что студент продемонстрировал, сформулировать осторожную гипотезу о трудностях и проверить её новым действием. Лишь после этого менять помощь, сохраняя путь к самостоятельному применению знаний.

Описывайте ошибку как наблюдение

Запись «не понимает дроби» слишком широкая. Полезнее: «В двух заданиях с одинаковым числителем выбрал большую дробь по большему знаменателю и объяснил выбор размером числа». Такое описание содержит действие, условия и основание. Его можно проверить и уточнить. Оно также позволяет подобрать целевую практику, вместо того чтобы повторять весь раздел без понимания, какая именно часть знания требует внимания и что студент уже выполняет правильно.

Храните правильные действия рядом с ошибками. Если участник корректно сравнивает дроби с одинаковым знаменателем, это важная граница. Профиль должен показывать различия, а не только список недостатков. Иначе ассистент может давать слишком простые объяснения и тратить время на усвоенное. Для каждой трудности запишите, в каких условиях её наблюдали и где нет достаточного доказательства. Так персонализация остаётся соразмерной реальным материалам, а не общему впечатлению от нескольких неудачных ответов.

Отдельно обозначайте уровень помощи. Правильный ответ после полной подсказки не означает того же, что независимое решение. Однако он тоже может показывать, какую часть студент уже понял. Для выбора следующего упражнения важно знать, что именно пришлось подсказать. Не смешивайте все попытки в один средний балл без условий: он скрывает изменения самостоятельности и не позволяет отличить усвоение основы от успеха благодаря постоянной поддержке репетитора.

Не делайте вывод по одному случаю

Неправильный результат может происходить из описки, неоднозначной инструкции, незнакомого слова или предметного пробела. Попросите объяснить выбор и дайте другой короткий случай. Если причина повторяется, гипотеза становится сильнее. Если нет, не закрепляйте её как типичную ошибку. Нужно также проверить само задание. Возможно, студент прочитал условие иначе из-за недостатка формулировки, а не из-за непонимания понятия, которое репетитор уже решил повторно объяснять.

В профиле используйте понятные статусы: наблюдалось, проверяется, подтверждено в определённых условиях, больше не проявляется в контрольных попытках. Не добавляйте точные проценты уверенности без обоснованного способа их получить. Для небольшого курса достаточно короткого доказательства и следующего вопроса. Такая структура помогает ассистенту не превратить предыдущую ошибку в неизменную истину и даёт преподавателю возможность проверить, почему именно система изменила сложность или предложила определённый тип помощи студенту.

Отличайте профиль учебных действий от психологических выводов. Нет необходимости объяснять ошибку характером, мотивацией или неизменным стилем обучения. Для целевой практики достаточно предметного описания. Если участник не замечает условие, нужно проверить его распознавание. Если неправильно применяет правило, дать соответствующую практику. Такие действия точнее и проверяемее широких ярлыков, которые ассистент может убедительно сформулировать без достаточного основания о реальных обстоятельствах конкретного человека.

Постройте небольшую карту компонентных навыков

Разложите цель на несколько нужных действий. Для сравнения дробей это могут быть понимание части целого, значения числителя и знаменателя и выбор способа сравнения. Не нужно сразу моделировать весь предмет. Важно видеть предпосылку, которая объясняет конкретные трудности. Принципы обучения CMU помогают связать компонентные навыки и их интеграцию. В персонализированной практике карта даёт основу для выбора следующего задания, которое проверяет именно нужную часть знания.

Подготовьте пример правильного действия и несколько типичных неправильных объяснений. Репетитор должен различать их по содержанию. Если он ориентируется только на окончательное число, то может не заметить неправильную логику, которая случайно привела к правильному результату. Предложите короткое обоснование или промежуточный шаг. Объём доказательства должен быть достаточным для цели, но не превращать каждое простое упражнение в длинный письменный отчёт, отвлекающий от самого учебного действия.

Для каждого навыка определите новый контрольный случай. Он должен сохранять основу, но менять поверхностные детали. Иначе студент может запомнить ответ на знакомый пример. Карта должна помогать проверять перенос. Если новое упражнение выявляет другой тип трудностей, обновите гипотезу. Не пытайтесь любую новую ошибку объяснить старой записью лишь потому, что она уже есть в профиле и делает рассказ о прогрессе проще для ассистента.

Учтите опыт моделей знаний без чрезмерного переноса

Corbett и Anderson в работе 1994 года описывали knowledge tracing в конкретном репетиторе по программированию с моделью правил. Это важный пример того, как система может использовать историю действий для оценивания состояния знаний. Однако из него не следует, что любой современный чат автоматически имеет такую же проверенную модель студента. Нужно различать исследовательскую архитектуру, конкретную реализацию и простой текстовый профиль, который школа передаёт генеративному ассистенту.

Для первоначального сценария не нужна сложная вероятностная система. Можно начать с короткой карточки: навык, доказательство, гипотеза, следующая проверка и дата. Важно, чтобы запись менялась по новым данным. Если нужна автоматическая адаптация большой программы, её проектирование и оценивание требуют соответствующих специалистов. Не называйте длинную историю чата полноценным диагностическим профилем лишь потому, что в ней содержатся все предыдущие сообщения студента и ответы ассистента.

Проверьте, какую часть профиля инструмент фактически получает. Контекст может быть ограничен, сокращён или изменён настройками. Сохранение записи не гарантирует её правильного использования. Для контроля дайте известный профиль и новое упражнение, затем проверьте, соответствует ли помощь определённой потребности. Если ассистент игнорирует актуальную карточку или опирается на старую, нужно изменить процесс перед использованием с аудиторией, а не только добавить больше данных в разговор.

Настройте помощь вокруг гипотезы

После подтверждённой трудности предложите упражнение, которое заставляет различить нужные условия. Для дробей можно использовать одинаковый числитель и разный знаменатель, сохранив одинаковое целое. Студент объясняет, почему размер части меняется. Затем переходит к новому примеру. Это целевая практика, а не просто больше заданий на ту же тему. Репетитор должен поддерживать конкретное различение, которое отсутствовало в предыдущем ответе, и проверить, появилось ли оно самостоятельно.

Не давайте одинаковую подсказку бесконечно. Если студент повторяет её без понимания, измените представление или вернитесь к предпосылке. Можно сравнить схему, словесное объяснение и короткий контрпример, если они соответствуют цели и доступны участнику. Важно не объявлять один формат его постоянным стилем обучения. Выбор материала должен опираться на то, какое действие нужно выполнить и какое доказательство покажет усвоение, а не на непроверенный ярлык профиля.

После помощи дайте новую попытку без той же подсказки. Если она успешна, не удаляйте все ограничения автоматически после одного случая. Определите достаточную для вашей задачи повторную проверку. Если ошибка не проявляется в разных уместных условиях, измените статус и сложность. Так профиль не удерживает студента на простом уровне и не продолжает навязывать объяснение того, что он уже может выполнить и обосновать самостоятельно в новом примере.

Дайте студенту возможность уточнить профиль

Покажите запись обычным языком. Участник должен понимать, какие трудности система учитывает и на каком основании. Он может объяснить, что предыдущий ответ содержал описку, или показать новый правильный способ. Это не означает автоматически принимать любое самоописание как доказательство. Нужно проверить конкретное действие. Однако без такого пути профиль становится непрозрачным решением, которое студент не может понять или содержательно обсудить с преподавателем во время обучения.

Если возникло расхождение, предусмотрите короткий контрольный случай или человеческий пересмотр. Не заставляйте студента спорить с ассистентом до изнеможения. Вопрос должен решаться через предметное основание. После изменения профиля запишите причину, чтобы будущая помощь не вернулась к устаревшему предположению. Это особенно важно, если несколько преподавателей или инструментов работают с одним учебным маршрутом и могут по-разному толковать предыдущие записи о попытках и уровне самостоятельности участника.

Сохраняйте формулировки без стигматизации. «Требует проверки выбора знаменателя в таких условиях» описывает учебное действие. «Слабый в математике» скрывает детали и может влиять на ожидания. UNESCO рассматривает человеческую ответственность в использовании GenAI. В этом сценарии она включает возможность пересмотреть автоматическое предположение, объяснить его основание и вернуть студенту доступ к более сложной практике после подтверждённого прогресса.

Собирайте минимум нужных данных

Для выбора следующего упражнения часто достаточно навыка, условий попытки, типа помощи и результата проверки. Полный личный профиль, частные истории или сторонние оценки могут быть не нужны. Назовите назначение каждого поля. Если оно не влияет на педагогическое решение, отложите сбор. Объём памяти не должен становиться целью персонализации. Важнее качество небольшой актуальной записи, которая правильно связана с конкретным следующим заданием и доступна ответственным участникам процесса.

Проверьте маршрут хранения и доступа в конкретном инструменте. Не предполагайте, что любой текстовый профиль можно передавать внешнему сервису. Для пилота используйте выдуманные карточки. NIST Privacy Framework даёт более широкую основу для работы с рисками приватности. Локальный сценарий должен чётко определять цель, необходимые данные и ответственных, а не полагаться на общее название персонального репетитора как доказательство надлежащих условий использования студенческой информации.

Определите срок актуальности и повод пересмотра. После завершения модуля некоторые записи больше не нужны для текущего маршрута. Если они сохраняются, объясните зачем. Особенно важно не переносить старые трудности автоматически в новый предмет без проверки. Знакомый термин может обозначать другое действие. Профиль должен помогать обучению в установленном контексте, а не накапливать всеохватывающую историю ошибок, которую затем используют для неопределённых будущих решений о человеке.

Проверьте адаптацию на контрольных карточках

До запуска создайте несколько выдуманных профилей: подтверждённая типичная ошибка, один сомнительный случай, усвоенный навык и противоречивые данные. Для каждого определите ожидаемое следующее действие. Репетитор должен запросить уточнение там, где основания слабые, и не повторять простые объяснения там, где прогресс уже подтверждён. Так вы проверите не общую приятность разговора, а логику использования профиля для выбора конкретной помощи в разных учебных условиях.

Добавьте правильный ответ в непривычной формулировке. Если ассистент оценивает его как ошибочный из-за отличия от шаблона, профиль может наполняться ложными записями. Проверьте также ошибочный ответ с убедительным объяснением. Гладкость не должна скрывать содержание. NIST GenAI Profile помогает рассматривать недостоверные результаты как риск. Для вашего пилота нужны именно контрольные случаи, которые показывают последствие такой ошибки для следующей практики студента.

После исправления инструкций повторите определяющие тесты на новых примерах. Не ограничивайтесь тем, что старый контрольный ответ теперь проходит. Нужно проверить, изменилась ли логика, а не только запомнен ли знакомый текст. Сохраните условия и короткий итог. Это поможет повторить проверку после обновления сервиса, изменения профиля или добавления нового модуля, не полагаясь на воспоминание об одной удачной демонстрации персонализированной помощи перед началом программы.

Условный пример обновления учебной гипотезы

Студент несколько раз сравнивает дроби с одинаковым числителем по величине знаменателя. Первоначальная карточка содержит наблюдение и гипотезу, но не общий вывод о предмете. Репетитор просит объяснение и предлагает другой случай с одинаковым целым. После целевого разбора студент сам правильно сравнивает новую пару и объясняет размер частей. Это условный сценарий, который показывает последовательность обновления, а не сообщает об измеренном эффекте определённой системы или реального учебного продукта.

Следующая проверка меняет числа и представление. Если логика сохранена без подсказки, карточка обновляется: предыдущие трудности не проявились в контрольных условиях, можно перейти дальше. Более поздняя ошибка не обязательно означает возвращение той же причины. Нужно снова прочитать объяснение. Возможно, теперь проблема касается разных целых или способа представления. Такой процесс сохраняет профиль подвижным и не позволяет старой гипотезе поглощать все новые наблюдения независимо от их предметного содержания.

Преподаватель проверяет, действительно ли ассистент изменил помощь. Если он продолжает объяснять усвоенную основу, персонализация работает неправильно, даже когда все записи технически сохранены. Полезный результат — соответствующая новая практика с достаточной сложностью. Студент должен видеть, что доказательство прогресса меняет маршрут. Это поддерживает понятность процесса и даёт возможность обсудить решение по конкретным материалам, а не по непрозрачному общему рейтингу способностей, который невозможно восстановить из отдельных учебных действий.

Выберите приоритет, когда ошибок несколько

Профиль может содержать разные трудности, но следующее упражнение не должно исправлять всё одновременно. Определите предпосылку, без которой студент не может выполнить текущее действие. Начните с неё, а другие наблюдения оставьте видимыми для дальнейшего пересмотра. Это помогает уменьшить нагрузку и понять причину изменений. Если после усвоения основы другая ошибка остаётся, она требует отдельного целевого задания, а не ещё одного повторения уже понятного объяснения под более широким заголовком темы.

Попросите репетитора объяснить выбор упражнения через конкретную запись. Например, нужно проверить понимание размера части перед сравнением более сложных дробей. Преподаватель может оценить логику и изменить её. Студент также видит смысл практики. Не нужно показывать всё внутреннее описание на каждом шаге, но определяющее решение должно быть понятным. Если инструмент не может связать задание с актуальным доказательством, его выбор не следует называть персонализированным лишь из-за обращения к участнику по имени.

Различайте возвращение ошибки и новый контекст

После перерыва студент может забыть правило, а в новом представлении — не узнать его применение. Это разные потребности. В первом случае полезна практика воспроизведения основы, во втором — сопоставление условий. Попросите короткое объяснение и дайте один контрольный пример. Не возобновляйте старую гипотезу автоматически. Профиль должен учитывать, что именно изменилось между попытками: время, формат, предметное условие или уровень помощи, которую участник получил во время предыдущей работы.

Если студент правильно объясняет правило, но не применяет его в незнакомой ситуации, не возвращайтесь без необходимости к длинному определению. Подготовьте пару случаев и попросите назвать общую основу. Затем измените поверхностные детали. Такая практика помогает связать знания с признаками задачи. Её результат нужно проверить новой попыткой. Сам факт того, что ассистент дал другое объяснение, не означает, что он устранил определяющие трудности или правильно установил их причину по предыдущему ответу.

Проверьте пользу самого профиля

Для внутреннего пилота сравните, какое упражнение ассистент выбирает с актуальной карточкой и без неё на одинаковом контрольном случае. Это не доказывает учебного эффекта, но показывает, меняет ли запись вообще помощь в нужную сторону. Если разницы нет, проверьте формат, объём и ясность инструкции. Добавлять больше истории не всегда полезно. Небольшая структурированная карточка с конкретным следующим вопросом может быть пригоднее длинного пересказа всех разговоров без приоритетов и временных границ.

Отдельно протестируйте устаревшую карточку, которую нужно пересмотреть после нового правильного ответа. Если ассистент держится старой записи вопреки предоставленному доказательству, измените правило обновления или оставьте соответствующее решение преподавателю. Персонализация должна быть способна исправлять собственные предположения. Иначе ошибка в первоначальной оценке будет много раз воспроизводиться в следующих заданиях, а студент будет тратить время на практику, которую система выбрала на основании уже опровергнутой или слишком широко сформулированной гипотезы.

Свяжите профиль с учебным маршрутом

LMS-платформа WeStudy может помогать организовать материалы и последовательность практики. Возможность хранения и передачи конкретного профиля внешнему ассистенту проверяйте отдельно. Не приписывайте системе автоматическую диагностику без проверенной реализации. Для начала достаточно понятной карточки, которую преподаватель использует для выбора задания. Важно, чтобы у записи о трудностях были предметное основание, дата и следующая проверка, а результат этой проверки действительно влиял на дальнейшее учебное действие участника.

Когда LMS-платформа WeStudy является частью программы, пересматривайте профиль вместе с результатами новых самостоятельных попыток. Хорошая персонализация уменьшает ненужную помощь после усвоения и возвращает её там, где появилось конкретное доказательство новой потребности. Она не должна закреплять человека в старом описании. Её качество видно в том, получает ли студент уместную практику, может ли объяснить прогресс и постепенно выполняет ли нужное предметное действие с большей самостоятельностью в новых условиях.

Перед следующим модулем проверьте, действительно ли актуальные записи помогают выбрать нужное действие и не скрывают новых предметных потребностей студента.

Источники

• Corbett, Anderson: Knowledge tracing — Modeling the acquisition of procedural knowledge.

• Carnegie Mellon University: Learning Principles.

• UNESCO: Guidance for generative AI in education and research.

• NIST: Generative Artificial Intelligence Profile.

• NIST: Privacy Framework.