ГОСТ Р 55236.3—2012/ISO/PAS 20282-3:2007
7.4.2 Определение показателей
Для проведения испытаний должны быть определены
a) требуемые показатели:
- результативность управления: если для достижения основных целей изделия повседневного
использования необходимо выполнятьзадачи низкой сложности, которые нетребуютмного времени на
выполнение, наиболее важным показателем удобства управления является его результативность;
- эффективностьиУилиудовлетворенность пользователей: требуетсяустановить необходимость
применения показателей эффективности и удовлетворенности пользователей;
b
) требования к показателям или к сравнению двух показателей, а также требуемый уровень
доверия.
П р и м е ч а н и е — Чем выше требуемый процент успешного достижения цели и доверительный интервал,
тем больше требуется пользователей для участия в испытаниях. Для подтверждения научной гипотезы обычно при
меняют уровень доверия 95 %. для некоторых бизнес-целей может быть достаточен меньший уровень доверия (на
пример. 80%).
Пример 1— Целью является достижение проценте успешного выполнения цели 80 % пользовате
лей с 95 %-ным уровнем доверия (см. раздел 5. пример).
Пример 2 — Целью является сравнение удобства управления двух альтернативных изделий и
установление наличия различий в удобстве их управления с 80 %-ным уровнем доверия (см. раздел 5).
7.4.3 Определение сценариев и условий испытаний
Для каждой идентифицированной основной цели должен быть установлен сценарий испытаний
(см. 7.2.1).
Сценарий испытанийдолжен включатьчеткое описание цели, которую необходимодостичь.
Пример — Сделать телефонный звонок на номер 01509 123456. используя данный общественный
телефон.
Для каждой цели испытанийдолжны бытьопределены условия ее успешногодостижения, а также
должен фиксироваться момент достижения цели. Так как критерием является успешное достижение
цели, должны быть включены альтернативные методы достижения цели (с учетом ошибок, которые
могутбытьисправлены),которыемогутрассматриватьсякакположительныйрезультат, еслитолькоони
не имеют нежелательных последствий, таких какопасность или причинение вреда здоровью человека.
Для расчета времени, необходимого для выполнения задачи, должен быть определен признак
выполнения задачи (обычно установленное действие или заявление пользователя).
Должно быть отведено максимальное время для успешного достижения цели и предоставлено
достаточно времени, чтобы пользователь мог попробовать разные способы достижения цели (целей)
прежде, чем он откажется от использования изделия. Среднее время выполнения задачидолжно быть
вычислено с помощью предварительных испытаний. Максимальное время, отведенное пользователю
навыполнениезадачи, должно превышатьсреднеевремявыполнениязадачинеменее, чемвтри раза.
Если необходимо провести испытания с несколькими целями, необходимо определить порядок
выполнения целей. Обычно, еслисуществуетпорядоквыполнения целей, этотпорядокприменяют ипри
испытаниях. Если такой порядок отсутствует, то не следует при проведении испытаний использовать
одинустановленныйпорядок. Вэтом случаепорядокнеобходимо периодическиизменять, или выбирать
случайным образомдля каждого пользователя.
7.4.4 Отбор репрезентативной выборки пользователей
Для участия в испытаниях должна бытьотобрана выборка, представляющая предполагаемые или
фактические группы пользователей. Выборка должна отображать распределение значимых характе
ристик пользователей в пределах групп пользователей (приложение С). Все. участвующие в испытани ях.
должны обладать характеристиками, соответствующими установленномудиапазону характеристик
пользователей, определенных в 7.2.3.
Следует определить необходимость деления пользователей на категории по характеристикам
предполагаемых или фактических групп пользователей, так как это может оказать влияние на оценку
удобства управления. Например, для оценки изделия, предназначенного для использования в разных
странах, возможно, понадобятся группы пользователей разных национальностей.
Следует определить, с какими пользователями необходимо проводить испытания — использую
щими изделиев первый разили имеющими опыт работы с ним.Даже вслучае новогоизделия, пользова
тели могут иметь опыт управления похожими изделиями или предыдущей моделью изделия, поэтому
долженбытьопределен типпредыдущегоопыта. Любойпрошлыйопытиспользования похожих изделий
для каждого пользователядолжен быть зафиксирован.
7