ГОСТ Р 70250—2022
Ф12: избирательность (показатель истинно отрицательных результатов) измеряет долю правиль
но идентифицированных отрицательных результатов и рассчитывается по следующей формуле:
+
Избирательность =
TN
;(15)
где TN— истинно-отрицательный результат (True Negative);
Ф13: среднеквадратичная ошибка между прогнозируемыми и фактическими значениями, и она
рассчитывается по следующей формуле:
/=1
m s e
=~!i h y i - y i f ’(16)
где, в регрессионной модели, у,-— фактическое значение, а у)— прогнозируемое значение;
Ф14: средняя абсолютная ошибка (или среднее абсолютное отклонение) — метрика, определяю
щая среднее абсолютное расстояние между прогнозируемыми и целевыми значениями, рассчитывает
ся по следующей формуле:
MAE= jjH \y i - y ’i[(17)
/=1
Представленные метрики оценки элементов фактора «Эффективность» являются рекомендуе
мыми для испытания алгоритмов, основанных на методах машинного обучения при решении задач
классификации и регрессии. При этом в конкретных случаях рекомендуемые метрики могут быть до
полнены или заменены специфическими метриками оценки фактора «Эффективность», применимыми
для конкретного метода машинного обучения.
8.2.5Измерение показателей корректности
К метрикам показателей корректности относятся следующие:
а) К1 — полнота реализации:
1) К1-1 — полнота документации разработчика;
2) К1-2 — полнота программной документации;
3) К2 — согласованность;
4) К2-1 — единообразие интерфейсов между модулями;
5) К2-2 — единообразие кодирования, символики и определения общих переменных;
6) К2-3 — непротиворечивость документации разработчика;
7) К2-4 — соответствие документации разработчика стандартам;
8) К2-5 — соответствие алгоритма стандартам программирования;
9) К2-6 — непротиворечивость алгоритма;
10) К2-7 — соответствие алгоритма документации;
11) К2-8 — соответствие изменений, внесенных в алгоритм, изменениям в документации;
б) КЗ — логическая корректность:
1) КЗ-1 — реализация алгоритма;
2) КЗ-2 — реализация всех ветвей процесса автоматизации;
3) КЗ-З — отсутствие явных ошибок и достаточность реквизитов;
в) К4 — проверенность:
1) К4-1 — полнота тестирования алгоритма.
Оценочные элементы фактора «Корректность» приведены в таблице 7. Для всех показателей с
расчетным методом оценки в графе «оценка» указан код типа «Ф#», соответствующий формулам (17),
(18).
Таблица 7 — Оценочные элементы фактора «Корректность»
Код элемента
Наименование
Метод оценкиОценка
К1-1-1
Наличие всех необходимыхдокументовдля понимания ииспользования
алгоритма
Экспертный
0—1
К1-1-2
Наличие описания и схемы иерархии модулей алгоритма
Экспертный
0—1
26