ГОСТ ISO/IEC 23988—2015
8.1.3.4 В высокоуровневом ассесменте. за исключением случаев, где правильные ответы строго
определены, оценка элементов со свободным вводом текста должна быть проведена человеком. В об
зоре. который должен быть сделан при консультации с экспертами педагогики, должны быть рассмотре ны
все непредвиденные ответы кандидатов.
8.1.3.5 Обратная связь от опытной или промышленной эксплуатации должна использоваться для
усовершенствования алгоритма определения правильных и неправильных ответов.
8.1.4 Информация для кандидатов
Информация об оценке результатов должна быть доступна для кандидатов до проведения ассес-
мента. так как это может повлиять на стратегию выполнения ассесмента.
Примечание — Это должно быть сделано в том случав, если информация об оценке не ставит под
угрозу законность теста или излишне смущает кандидатов.
8.2 Программное обеспечение для определения результата
Если программное обеспечение автоматически вычисляет общий результат ответов кандидата
(например, «зачет», «незачет»), то это должно базироваться на четких правилах, которые должны быть
известны (по крайней мере общие понятия) кандидатам.
Работа программного обеспечения должна пройти проверку для подтверждения соответствия
действительности результатов.
Примечание — Полностью автоматизированные оценка и определение результата ассесмента. кото
рые «существенно влияют» на кандидата, могут подпадать под действие законов вотношении защитыданных или
частной жизни.
8.3 Программное обеспечение для обратной связи
8.3.1 Обеспечение обратной связи
Уровень обратной связи либо предоставляется кандидату автоматически, либо ассесмемт-центр
согласовывает это с целью оценки. Уровень обратной связи может быть различным: вывод только об
щего результата, вывод промежуточного результата, результат для отдельных элементов, о разъясне нии
правильных ответов, подсказки для дальнейшего решения и ссылки на учебные материалы или
источники информации.
8.3.2 Степень доверия
Обратная связь должна быть оправдана в педагогическом плане. В программное обеспечение,
возможно, потребуется включить процедуры для подавления обратной связи в случае отсутствия до
статочного обоснования.
8.3.3 Представление обратной связи
8.3.3.1 Представление обратной связи (будь то на экране или на бумаге, в текстовом, графиче
ском редакторе или иным образом) должно быть четким, легко интерпретируемым и с использованием
любых необходимых пояснений.
8.3.3.2 Обратная связь при высокоуровневом ассесменте должна поддерживать конфиденциаль
ность элементов.
8.3.3.3 Обратная связь должна быть направлена на содействие обучению и развитию обучающе
гося.
8.3.3.4 Если обратная связь будет вызывать неудобства, внимание должно быть уделено обеспе
чению обратной связи человеком (неавтоматически).
8.3.4 Апробация
Программное обеспечение для обеспечения обратной связи должно быть апробировано с рядом
различных ответов кандидатов, чтобы гарантировать, что оно работает последовательно и в соответ
ствии с педагогическими требованиями.
8.4 Сохранение конфиденциальности данных при апробации
Когда фактические ответы кандидатов используются при апробации программного обеспечения,
чтобы обеспечить подсчет, определение результата или обратную связь, любые персональные данные
кандидатов должны быть удалены или заменены фиктивными данными, чтобы гарантировать конфи
денциальность.
15