ГОСТ ISO/IEC 23988—2015
a) простоту использования;
b
) надежность;
c) безопасность.
В случае необходимости должна быть возможность проверки программного обеспечения с учетом
вспомогательных технологий.
7.5.2Соответствующие аналитические инструменты для проверки доступности должны исполь
зоваться там. где это возможно.
8 Система мгновенной автоматизированной оценки,
определение результата и обратная связь
Примечание — Этот раздел применим к распространителям ассесмента. которые разрабатывают, при
обретают или адаптируют программное обеспечение, чтобы обеспечить автоматизированную оценку, определение
результата или обратную связь. Это также относится к разработчикам программного обеспечения. Это применимо и
к высоко-, и к низкоуровневому ассесменту. Запись ответов и данных кандидата описана в разделе 10.
8.1 Оценка ответов
8.1.1 Поддержка педагогических аспектов
Программное обеспечение, используемое для того, чтобы подсчитывать ответы кандидатов,
должно быть разработано таким образом, чтобы поддержать педагогические аспекты правил оценки
результатов, особенно относительно:
a) правильности ответов;
b
) «стоимости» ответов, которая должна быть взвешенной для различных элементов или типов
элементов:
c) распределения более низких баллов за частично правильный ответ;
d) расчета общей оценки или результата;
e) коррекций вопросов таким образом, чтобы исключить угадывание ответов.
Программное обеспечение для оценки результатов должно учитывать:
1) случайный выбор элементов с помощью программного обеспечения;
2) перетасовку последовательности выдачи элементов ассесмента;
3) перетасовку последовательности, в которой представлены альтернативные ответы;
4) введение случайных величин в элементы ассесмента.
Правила оценки результатов должны быть как можно более простыми и понятными кандидатам.
8.1.2 Возможность автоматизированной оценки
Автоматизированная оценка должна быть апробирована с широким спектром ответов кандидата,
чтобы убедиться в ее последовательной и точной работе.
8.1.3 Оценка открытых ответов
Примечание — Оценка эссе, которая проводится только человеком, не рассматривается в настоящем
стандарте.
8.1.3.1 Программное обеспечение для оценки открытых ответов должно быть разработано и апро
бировано с особой тщательностью, чтобы убедиться, что любой ответ, который был проверен челове
ком. учтен. Аспекты, которые требуют особого рассмотрения, включают:
a) альтернативные варианты написания или неправильное написание;
b
) использование верхнего или нижнего регистра:
c) синонимы;
d) пунктуацию:
e) использование «или», «/», «и». «&». «не», отрицательных выражений и соответствующих тер
минов на других языках;
f) включение или исключение единиц измерения в числовых ответах.
8.1.3.2 Если элемент требует расчета или оценки численного ответа, следует указать диапазон
допустимых ответов, чтобы учесть такие факторы, как возможные ошибки округления в расчетах и раз
личия в числе десятичных знаков.
8.1.3.3 Все ответы на элементы со свободным вводом текста от кандидатов страдающих дислек
сией, должны быть пересмотрены вручную, если правильное написание не является педагогическим
требованием.
14