ГОСТ Р 50779.80—2013
c) совпадение оценок каждого аттестующего со стандартной оценкой (определение оценок,
совпадающих между собой и со стандартной оценкой, среди всех оценок каждого аттестующего):
d) совпадение оценок нескольких аттестующих со стандартной оценкой (определение оценок,
совпадающих друг с другом и со стандартной оценкой, среди оценок всех аттестующих во всех
проверках).
Очевидно, что тип согласованности, установленный в перечислении с), является более
сложным, чем установленный в перечислении а), так как требования перечисления а) дополнены
требованием совпадения оценок со стандартной оценкой. Эти требования аналогичны для четвертого и
второго перечислений. Очевидно, последний тип согласованности оценок является условием
наименее сложным среди всех. Для каждого типа согласованности обычно применяют два типа к-
статистики: к-статистику Кохена и к-статистику Флейса. Кроме того, для неупорядоченных данных с
тремя или более значениями контролируемой переменной могут быть вычислены два типа
коэффициентов. Во-первых, может быть вычислена общая к-статистика, характеризующая
совпадение оценок по всем значениям контролируемой переменной. Во-вторых, могут быть
вычислены значения к-статистики для каждого значения контролируемой переменной отдельно. Это
позволяет выявить значения контролируемой переменной, для которых совпадения оценок
встречаются реже.
В дополнение к отчету об исследовании ААА используют также графическое отображение
согласованности оценок. Графики позволяют наглядно отразить согласованность оценок. Обычно для
процента совпадения оценок одного аттестующего и нескольких аттестующих составляют таблицы к-
коэффициентов и коэффициентов Кендалла (только для упорядоченных данных). Кроме того,
составляют график процента совпадающих оценок для каждого аттестующего и со стандартной
оценкой, если каждым аттестующим выполнено более одной проверки. Дополнительно может быть
построен также график доли совпадающих оценок разных аттестующих по отношению к известному
значению стандартной оценки.
5.7 Выводы и предложения
На основе результатов исследований ААА может быть принято решение об адекватности
определениязначенийконтролируемойхарактеристикинаоснове данныхконтроляпо
альтернативному признаку. Обычно противоречивость оценок одного аттестующего указывает на то,
что аттестующий не может получить совпадающие оценки (возможно потому, что аттестующий не
точно выполняет процедуру проверки). Противоречивость оценок нескольких аттестующих указывает
на то, что либо не совпадают процедуры, выполняемые аттестующими в процессе проверки, либо
способности аттестующих различны (вследствие различного опыта, квалификации или физических
возможностей, например, остроты зрения при визуальном контроле). Должны быть предприняты
действия по устранению причин таких несоответствий.
После выполнения действий по улучшению системы определения значений контролируемой
характеристики, например, обучения операторов, исследование ААА должно быть проведено
повторно для проверки наличия достаточности улучшений системы определения значений
контролируемой характеристики.
6 Описание приложений А - Е
В приложениях А - Е приведено пять примеров исследования ААА. общий обзор которых
приведен в таблице 3.
6