ГОСТ Р ИСО 11064-7—2010
С.4.1 Метод Дельфи
Метод Дельфи является процедурой проведения экспертизы с целью достижения согласованности мнений
экспертов. Эту процедуру используют для оценки адекватности среды интерфейса «человек — система». Метод
предполагает использование оценочных шкал, которые включают в себя совокупности значений отдельных харак
теристик. относящихся к функционированию системы (вероятность ошибки, четкость отображаемой дисплеем
информации, понятность и т.д.). Метод основан на процедуре анкетирования (анкетные опросы), когда анкеты
заполняются каждым экспертом независимо от других экспертов. Аналитик собирает и сравнивает ответы, затем
проводят второй этап анкетирования, который позволяет уточнить мнения, полученные ранее (без идентификации
опрашиваемых лиц). Этот процесс повторяют до тех пор. пока не будетдостигнуто согласованное мнение.
Метод полезен для применения при проектировании в отсутствие оборудования. Полученные выводы явля
ются качественными и неточными, однако этот метод позволяет быстро выявить вероятные экстремальные значе
ния функциональных характеристик. Прогнозируемая достоверность метода невысока, но она в большой степени
зависит от уровня компетентности привлекаемых экспертов. Это утверждение также справедливо для достовер
ности метода. Метод является низкозатратным.
С.4.2 Метод номинальной группы1*
Метод похож на методДельфи тем. что группа экспертов оценивает среду интерфейса «человек — система»
в соответствии с оценочными шкалами, включающими одну или более конструктивных характеристик системы.
Главноеотличие междуэтим методом и методом Дельфи заключается в том. что данный метод направлен на
установление согласованности мнений экспертов при непосредственном обсуждении в группе. При применении
метода должны быть предприняты специальные организационные меры для обеспечения такой согласованности
мнений. Вдругих отношениях характерные особенности этой методики и методаДельфи очень похожи.
С.4.3 Парные сравнения
Существует несколько вариантов метода парных сравнений, однако основу всех методов составляет про
цедура. когда каждому экспертупредоставляют парукаких-либообъектовдля сравнения и задают вопрос, какой из
этих двух объектов превосходит другой по указанной характеристике (больше по размеру, яркости и т.д.). Эту про
цедуру повторяют для всех возможных пар оцениваемых объектов. Затем мнения сортируют и сравнивают для
определения шкалы экспертных оценок и ее диапазона. Метод парных сравнений ограничен получением относи
тельно неточных качественныхданных. Результат применения метода более достоверен по сравнению с методом
Дельфи и методом номинальной группы, но метод парных сравнений является более дорогим.
С.4.4 Оценка в виде отношения
При применении метода оценки в виде отношения эксперты не высказывают своего мнения в виде абсолют
ных числовых оценок и не сравниваютдва объекта с использованием сравнительной шкалы. Эксперты оценивают,
является ли один объект, например, вдвое меньше или вдвое больше по сравнению содним из элементов набора,
который представлен как стандартный. В соответствии с инструкциями от экспертов требуют, чтобы они дали
заключениеотносительноэтого коэффициента.Данные.собранные методом оценки в видеотношения. являются в
большей степени количественными по сравнению сдругими методами экспертныхоценок,однаконедостатки мето
да совладают с недостатками других экспертных методов.
C.S Экспериментальные методы
Все экспериментальные методы могут быть использованыдляоценки статистическизначимых различийсре
ды взаимодействия «человек — система® для нескольких вариантов конструкций при использовании макетов или
полнофункционального моделирования в лаборатории. Методы могут быть использованы для валидации среды
«человек — система» при наличии единственнойсистемы. Методы включают в себя такие приемы, как анкетирова ние
и интервьюирование.
Отличительным признаком экспериментального метода является требование осуществления строгого кон
троля всех источниковфункциональныхотклонений/несоответствий.Для выполнения этого требования необходи
мопривлечениедовольно большихихорошосбалансированныхгрупп потенциальных пользователей,применение
хорошо контролируемых исходныхустановок исложных методов регистрацииданных.Данные методы преимущес
твенно применяют при проектировании. Они требуют тщательного планирования, являются трудоемкими и очень
дорогими. Достоверность методов обычно низка вследствие влияния посторонних источников функциональных
отклонений, сложности производственного задания и трудностей обеспечения соответствия условий испытаний
реальной ситуации. Методы обладают хорошей чувствительностью Их результат является количественным, но
обычно категорическим.
1 Метод группового принятия решения, предполагающий письменное изложение идей и их последующее об
суждение в небольшой группе (5—9 человек).
15