ГОСТ Р ИСО/МЭК 33003—2017
С.3.1 Внешние признаки пригодности
Внешние признаки пригодности относятся к измерениям на базе практического применения. С их помощью
определяют точность переноса конструкции. В частности, определяется, насколько точно проводимые измерения
охватывают нужные темы, а также то. насколько результаты измерений отражают мнение экспертов. Внешние
признаки пригодности подразумевают критический обзор измерений после их разработки.
Внешние признаки пригодности проверяю, например, при определении качественных характеристик про
цесса, свойств процесса, результатов, практических методов и соответствий.
С.3.2 Репрезентативность пригодности
Репрезентативность пригодности определяет, насколько такие измерения как практическое использование
описывают конструкцию, обозначаемую скрытой переменной. Репрезентативность пригодности зависит от степе
ни. в которой инструмент измерения отражает определенную область контента с учетом количества и охвата
отдельных его измерений. В теоретическом определении конструкции должны быть указаны область и измерения
концепции. Дпя целей определения репрезентативности в ходе проектирования и разработки системы измерения
процесса допжны точно соблюдаться установленные процедуры.
С.3.3 Прогнозируемая пригодность
Для целей определения пригодности критериев сравнивают измерение с какой-либо стандартной перемен
ной. с которой оно было бы связано в случае валидности. Прогнозируемая пригодность рассматривает последу
ющие критерии У. которые коррелируют с соответствующими измерениями X. Чем выше корреляция между X
{например, уровнем) и У (например, результативностью), тем выше пригодность измерения по данному критерию.
Коэффициент пригодности может варьироваться в зависимости от критерия и степени связанной с ним ошибки,
даже если характеристики измерения остаются теми же.
Оценку параллельной пригодности проводят путем корреляции измерения с критерием а конкретный момент
времени. Разницу между сравнительной и прогнозируемой пригодностью определяют в момент времени, в который
проводят оба измерения.
Для целей прогнозируемой или сравнительной пригодности уровень соответствия качественной характерис
тике процесса должен быть связан с внешним (внешними) измерением (измерениями) согласно 5.Id). Для примера
в качестве теста следует задать вопрос: «Повышает ли увеличение уровня возможностей способность выдержи
вать утвержденный график?*.
С.3.4 Уточненная пригодность
Уточненная пригодность отражает степень идентичности результатов, обеспечиваемых различными мето
дами измерений. Каждое отдельное измерение можно рассматривать как отдельный метод оценки одной конструк
ции. Проводят анализ ответа на вопрос: «Присутствует ли значительная связь между информативными
измерениями с соответствующей конструкцией?»
С.3.5 Сравнительная пригодность
Сравнительная пригодность оценивает степень отличия конструкции и ее измерений от какой-либо другой
конструкции и ее измерений. Для обоснованного измерения вариативность должна отражать только ту разницу,
которая относится к соответствующей этому измерению скрытой переменной, а не к другим скрытым переменным
Сравнительная пригодность представляет собой набор конструкций, которые оценивают после установления
сравнительной пригодности отдельных конструкций. В качестве примера можно привести вопрос о том. в какой
степени порядковая шкала уровня возможностей представляет собой отдельную конструкцию.
С.4 Спецификация конструкции
Подтверждающий тетрадный анализ (СТА) используют для спецификации статистически тестируемой
конструкции (информативные или формирующие спецификации). Термин «подтверждающий» предполагает, что
модель указана заранее. Термин «тетрадный» относится к разнице между результатом одной пары ковариаций и
результатом другой пары согласно [3]. СТА следует использовать для тех моделей, которые не были полностью
идентифицированы или вложены и которые не могут быть тестированы обычным способом. Более того,для СТА не
требуется числовая минимизация, что дает возможность избежать связанных с ним проблем обобщенности, прису
щих другим подходам коценке. СТА может быть проведен с помощью процедуры CTA-SAS согласно (35). (44).
15