ГОСТ РИСО 13824—2013
Приложение С
(справочное)
Методы обработки экспертных оценок
С.1 Оценка риска требует наличия вероятностной информации для количественного описания гносеологи
ческих или случайных неопределенностей. Такие неопределенности могут быть наилучшим образом описаны а ко
личественном отношении на основании анализа крупных статистических баз данных, полученных из опыта
эксплуатации, а также полевых или экспериментальных исследований. Однако во многих ситуациях данные могут
быть недостаточного качества или объема для обеспечения практически полезных и достоверных количественных
показателей в целях использования а оценке риска. В таких случаях зачастую необходимо полагаться на мнения
людей, связанных с измеряемым параметром. Эти мнения учитывают как экспертные и могут быть использованы
для получения количественной информации. Безусловно, такая информация во многом зависит от опыта, знаний,
суждения и коммуникативных способностей эксперта. Однако в целом эксперта можно определить как весьма ком
петентного человека, который имеет достаточный уровень подготовки, знаний и опыта работы в конкретной облас ти
К вопросу выбора эксперта следует относиться со всей тщательностью, при этом желательно сравнить хотя бы
некоторые из экспертных заключений с общеизвестной информацией. Самый простой критерий для выбора экс
перта — это признание его в таковом качестве другими экспертами.
В (21] и (22) предложены следующие принципы для выбора эксперта. Экспертов можно найти через информа
ционный поиск и/или реестры профессиональных организаций, консалтинговые фирмы, исследовательские лабо
ратории. правительственные учреждения и университеты. Иногда прибегают к процессу формального назначения, в
частности, когда возможны какие-либо противоречия. При этом процесс назначения должен быть организован та ким
образом, чтобы исключить какую-либо необъективность при выборе. Сначала к назначению эксперта пригла шают
причастные стороны. Затем собирают независимую внешнюю отборочную комиссиюдля оценки кандидатов.
Критерии выбора должны быть конкретными, они должны быть документально оформлены и включать сле
дующее:
-доказательства компетенции, например, публикации, результаты исследования, степени и сертификаты,
занимаемые должности, награды и т. д..
- репутация в научном сообществе, например, представление о качестве, значимости и актуальности работы
кандидата и способности оперативно выносить суждения по вопросам;
- возможность и желание участвовать в вынесении заключения:
- общее понимание сути проблемы,
- беспристрастность, в том числе отсутствие какого-либо денежного или личного интереса в отношении по
тенциальных заключений;
- учет множественных точек зрения.
С.2 Экспертная оценка определяется как «субъективная оценка, выражение или определение качества или
количества чего-либо, которое кажется верным, обоснованным или вероятным с точки зрения эксперта» (см. (12)).
Суждение (заключение) часто основано на сомнительной или неполной информации. Кроме этого, эксперт может
сам непреднамеренно предоставить неверные сведения. Существует целый ряд методик отбора и оценки инфор
мации. которые фактически обобщают экспертные оценки таким образом, чтодостигается достаточно высокая сте
пень «консенсуса» или согласованности между экспертами.
Экспертные оценки могут быть получены с использованием следующих подходов (см. (12). 119)):
a) агрегированный индивидуальный метод: средневзвешенное значение данных, предоставленных экспер
том:
b
) итеративные методы: переменные уровни взаимодействия между отобранными экспертами до представ
ления оценок, затем проверка результатов с возможностью пересмотра экспертных оценок. Данный процесс повто
ряют до тех пор. пока не будет достигнут консенсус. Отзывы экспертов собирают на основе принципа анонимности,
таким образом, сохраняется независимость отзывов. К типичным методам относятся:
- метод Дельфи.
- метод номинальной группы;
c) интерактивные методы: собрание экспертов для определения и структурирования необходимых вероят
ностных данных;
d) аналитические методы: байесовская интеграция экспертных оценок исходя из убеждений каждого из экс
пертов.
С.З Отбор экспертных оценок проводят в форме личного опроса или письменного анкетирования. Вопросы
могут быть как количественного, так и качественного характера. Например, вопросы качественного характера могут
использоваться для проверки достоверности имеющихся данных или моделируемыхдопущений. Вопросы количес
твенного характера могут включать в себя вероятностные оценки, например, среднего значения, медианы,
диспер-
16