ГОСТ Р ИСО 9241-11—2010
ные измерения. Недостаток этого подхода состоит а том. что искусственная природа лабораторной среды может
привести к ошибочным результатам.
Оценки могут быть проведены на различныхстадиях создания системы (в промежуточных состояниях систе
мы) от эксплуатации до лабораторных установок в зависимости от проблем, которые должны быть исследованы, и
готовности продукции к испытаниям. Выбор среды тестирования и метода измерений зависитот целей измерений
и их взаимосвязи с этапом проектирования.
В.5 Измерения результативности и эффективности
В.5.1 Измерения результативности
Результативность определяют какстепень реализации запланированной деятельности и достижения запла
нированных результатов.
Для того чтобы определить с заданной точностью степень завершенности планового задания путем измере
ний. необходимо установить критерии, которые можно применять в реальной работе для фиксации успешного дос
тижения заданных целей. Критерии могут быть определены на основе качества и количества полученных
результатов, например это может быть заданный формат для выходных документов вместе с количеством и объе
мом обработанных документов на выходе рабочей системы.
Точность может быть оценена степенью соответствия уровня качества на выходе заданным критериям, а
завершенность может быть оценена отношением достигнутого количественного результата к запланированному.
Если требуется оценить только результативность, то можно объединить измерения точности и завершеннос
ти. Например, для получения процентного значения результативности, завершенность и точность могут быть выра
жены в процентах и перемножены (Е.2.2. Е.2.19]. В случае, если нет прямого соответствия между точностью и
завершенностью, эти два вида измерений необходимо рассматривать независимо друг от друга.
В.5.2 Измерение эффективности
Эффективность измеряют как связь между достигнутым результатом и использованными ресурсами. Напри
мер. эффективность во времени может быть определена какотношение результативности в достижении заданной
цели ко времени, затраченномудля достижения этой цели. Аналогичные соотношения могут быть применены также к
эффективности использования умственной или физической энергии, материалов или финансовых расходов.
В.5.2.1 Рабочая нагрузка
Рабочая нагрузка включает физические и умственные затраты при выполнении задач При измерении
эффективности следует принимать во внимание физические требования, предъявляемые пользователю, вызван
ные высокой скоростью ввода информации и большой продолжительностью непрерывной рабочей активности.
Мыслительные ресурсы, необходимые для выполнения задач, также могут быть измерены. Чрезмерная, как и
недостаточная умственная нагрузка проявляются в том. что их результатом может быть пониженная эффектив
ность. безопасность, проблемы со здоровьем персонала. Задача, требующая слишком малых умственных усилий,
может привести кскуке и снижению бдительности, что снижает результативность и эффективность. В таком случае
снижение результативности и эффективности должно быть компенсировано за счет повышенных требований.
Чрезмерная умственная нагрузка может привести к снижению результативности, выражающемуся в пропущенной
информации и появлении ошибок. Эта проблема особенно актуальна в тех ситуациях, когда важна безопасность,
например в работе авиадиспетчерской службы или при управлении производственным процессом. Чтобы предска
зать такие типы проблем, следует использовать измерения умственной нагрузки.
В Е.2.7. Е.2.14 и Е.2.21 (см. библиографию) приведены примеры анкет, позволяющих оценить умственную
нагрузку, влияющую на эффективность.
В.6 Измерение удовлетворенности пользователя
Удовлетворенность пользователя, определяемая как отсутствие дискомфорта и положительное отношение
к использованию продукции, является реакцией пользователя на взаимодействие с продукцией. Удовлетворен
ность пользователя может быть оценена с помощью субъективных или объективных измерений. Объективные
измерения могут быть основаны на наблюдении за поведением пользователя (например, за его рабочей позой или
перемещением и частотой отлучек при работе) или на мониторинге физиологических реакций пользователя.
Субъективные измерения удовлетворенности пользователя выполняют, определяя уровень субъективных
реакций пользователя или его мнение. Этот процесс можно реализовать несколькими способами, например, пред
лагая пользователю назвать число, соответствующее силе выраженности его ощущений в любой заданный момент
времени, или предлагая пользователю проранжировать продукцию в порядке предпочтения или используя шкалу
предпочтений, основанную на анкетном опросе.
Правильно разработанные шкалы предпочтений обладают существенным преимуществом, поскольку их
можно быстро использовать, результаты их применения имеют известную надежность, и они не требуют специаль
ных навыков для применения. Разработанные анкеты относительно предпочтений, основанные на психометричес
ких методиках,должны иметь известную количественную оценку своей надежности идостоверности и должны быть
устойчивы к таким факторам, как. например, неискренние ответы, положительное или отрицательное смещение
ответов и социальные ожидания. Они также дают возможность сравнить полученные результаты анкетирования с
типичными ответами, полученными в прошлом (см. Е.2.9. Е.2.10 и Е.2.12. где приведены примеры анкет предназна-
ченныхдля измерения удовлетворенности применяемыми компьютерными системами).
13