Интеллектуальная автоматическая оценка AI
Эта статья поможет вам включить AI Grading для вопросов с кратким ответом и вопросов с несколькими краткими ответами в викторине. Укажите баллы, позвольте системе оценить отправленные ответы, а затем просмотрите и измените баллы в Batch Grading.
Обзор
Открытые экзаменационные вопросы обычно нужно читать и оценивать по одному. AI Grading сопоставляет каждый ответ с заданными вами критериями оценки и автоматически выставляет балл. Затем вы можете просматривать результаты по вопросу или по экзаменуемому, чтобы оценивание оставалось последовательным и требовало меньше повторного чтения.
Сценарии использования
- Оцените множество кратких ответов по одним и тем же критериям, затем выборочно проверьте результаты.
- Используйте уже написанное вами объяснение ответа в качестве стандарта оценивания.
- Задайте отдельный стандарт для каждой строки, если вопрос с несколькими краткими ответами требует разных баллов.
Доступ к функции
AI Grading доступна для вопросов Short Answer и Multiple Short Answer в викторине. Она отключена, пока вы не включите её.
1. Создайте викторину и добавьте вопрос Short Answer или Multiple Short Answer.
2. Откройте настройки вопроса и найдите AI Grading.
3. Включите её. До этого момента оценивайте этот вопрос вручную в Batch Grading.
Задайте стандарт для Short Answer
После включения напишите критерии, которые AI должен использовать. Это может быть объяснение ответа, правильный ответ или требования к ответу.
1. Введите критерии оценки в стандарт оценивания.
2. Если вы уже написали объяснение ответа, задайте его как стандарт оценивания в один клик.
3. Сохраните вопрос. После отправки ответа экзаменуемым система оценит ответ по этому стандарту.
Задайте стандарт для Multiple Short Answer
Вопрос Multiple Short Answer оценивается по строкам. Введите стандарт оценивания для каждого заголовка строки.
1. Включите AI Grading для вопроса.
2. Под каждым заголовком строки введите критерии оценки для этой строки.
3. Сохраните. Система сопоставляет и оценивает каждую строку по её собственному стандарту.
Просмотр автоматического балла
После отправки ответа экзаменуемым вопросы с AI Grading оцениваются автоматически. В ответе отображается AI grading. Автоматическая проверка AI требует определённого времени, поэтому ответы не будут оценены мгновенно.
В Batch Grading у этих вопросов отображается отметка AI grading, чтобы их можно было отличить от вопросов, которые всё ещё требуют ручной оценки.
Проверка и изменение баллов
Когда оценивание завершится, откройте Batch Grading и проверьте баллы. Используйте те же действия, что и при ручной оценке: нажмите Batch Grading в правом верхнем или левом нижнем углу View/Download Responses, либо в левом нижнем углу диалога транскрипта.
1. Переключайтесь между Grade by question и Grade by examinee.
2. Откройте Graded, чтобы увидеть вопросы, которые AI уже оценил.
3. Чтобы скорректировать балл, измените его непосредственно в Graded и сохраните.
4.Если стандарты оценивания были изменены, вы можете нажать AI Re-grading на отмеченных вопросах, чтобы запустить повторную оценку.
При оценке по вопросам нажмите AI Re-grading в правом верхнем углу, чтобы повторно оценить все уже оценённые ответы в рамках этого вопроса.
При оценке по экзаменуемым нажмите **AI Re-grade** рядом с соответствующим вопросом, чтобы запустить повторную оценку этого вопроса.
Оценка ранее собранных ответов
Если ответы поступили до того, как вы включили AI Grading, вернитесь в редактор викторины, задайте стандарт и включите AI Grading. Что произойдёт дальше, зависит от того, продолжает ли викторина собирать ответы.
1. Викторина всё ещё собирает ответы: уже собранные ответы оцениваются автоматически.
2. Сбор остановлен: откройте Batch Grading. Для этого вопроса отображается пункт AI Grading. Нажмите его, чтобы оценить собранные ответы по этому вопросу.
Квота на оценивание
Бесплатный аккаунт включает 20 использований AI grading. После этого обновите тариф: ежемесячный план включает 500 использований, а годовой — 6 000 использований.
Когда квота заканчивается, викторина прекращает автоматическое оценивание. Оценивайте эти вопросы вручную в Batch Grading.
Важные примечания
- AI Grading применяется только к вопросам Short Answer и Multiple Short Answer в викторине и отключён, пока вы не включите его.
- Для Short Answer введите стандарт или примените объяснение ответа в один клик. Для Multiple Short Answer задайте стандарт для каждого заголовка строки.
- Просматривайте баллы AI в Graded внутри Batch Grading. Там же можно изменить балл.
- Если вы включите AI Grading позже, викторина, которая всё ещё собирает ответы, автоматически оценит уже существующие ответы. Если сбор остановлен, нужно открыть пункт AI Grading в Batch Grading.
- Бесплатные аккаунты включают 20 использований, ежемесячный план — 500, а годовой — 6 000. Когда квота закончится, оценивайте вручную.
Часто задаваемые вопросы
Почему ответ не был оценён автоматически?
Убедитесь, что вы включили AI Grading для этого вопроса и сохранили стандарт оценивания. Автоматическое оценивание также прекращается, когда квота заканчивается.
Могу ли я изменить балл, который назначил AI?
Да. Откройте Graded в Batch Grading и отредактируйте балл для этого вопроса.
Будут ли оценены ответы, отправленные до включения этой функции?
Да. Если викторина всё ещё собирает ответы, эти ответы будут автоматически оценены после сохранения настройки. Если сбор остановлен, откройте Batch Grading и нажмите AI Grading для этого вопроса.
Чем Multiple Short Answer отличается от Short Answer?
Для Short Answer используется один стандарт оценивания, и вы можете применить объяснение ответа в один клик. Для Multiple Short Answer нужен стандарт для каждого заголовка строки.
Что происходит с вопросами, которые уже используют AI Grading, когда у меня заканчиваются использования?
Викторина прекращает автоматическое оценивание. Обновите тариф или оцените эти вопросы вручную в Batch Grading.
