ГОСТ Р 59921.7—2022
анализируемой области, сериями двумерных изображений, соответствующих сечениям анализируемой
области, а также могут содержать метаданные).
При выполнении тестирования каждой функции результаты оформляют в табличном виде, при
мер представлен в таблице 2.
Таблица 2 — Анализ и оценка результатов тестирования на функциональную полноту
Наименование параметра
Оценочные данные
Результат
Визуальная оценка выходных
данных СИИ
Соответствие заявленным
в технической документации
Соответствует/не соответствует
Тип принимаемого решения
Соответствие заявленным
в технической документации
Соответствует/не соответствует
Формат возвращаемого СИИ
заключения
Соответствие заявленным
в технической документации
Соответствует/не соответствует
Набор заключений СИИ
Соответствие заявленным
в технической документации
Соответствует/не соответствует
Формат входных данных
Соответствие заявленным
в технической документации
Соответствует/не соответствует
Тип анализируемого объекта
Соответствие заявленным
в технической документации
Соответствует/не соответствует
7.6.6При тестировании функциональной корректности выполняют тестирование СИИ на наборе
данных, объем которых достаточен для получения статистически значимого результата.
Примечание — Нижнюю границу объема набора данных оценивают из расчета 10 образцов (экземпля
ров) на каждый оцениваемый параметр. Данный объем набора данных будет обеспечивать получение статистиче
ски значимого результата.
Порядок тестирования определяют исходя из установленного набора метрик:
- для оценки метрик точности выполняют регистрацию выходных данных СИИ при обработке на
бора данных;
- для оценки повторяемости выполняют повторную обработку набора данных в одинаковых усло
виях тестирования и регистрацию выходных данных СИИ;
- для оценки воспроизводимости выполняют повторную обработку одного набора данных в раз
ных условиях испытаний (разные испытательные стенды, операторы, распределение во времени и т. д.)
и регистрацию выходных данных СИИ.
Пример — Есть задача сегментации ткани на изображении магнитно-резонансной томографии,
которая требует от пользователя ввода начальных точек или выбора срезов для анализа СИИ. Для
данной задачи определение повторяемости будет заключаться в повторном анализе одного изображе
ния семь раз одним и тем же оператором (в случае необходимости получения степени свободы не ме нее
6). Определение воспроизводимости может быть выполнено путем анализа данного изображения двумя
операторами или одним оператором на разных испытательных стендах.
7.7 Анализ и оценка результатов тестирования
7.7.1Оценка функциональной полноты возможна путем расчета метрики полноты реализации
функций. Допустимо использовать другие показатели.
определяют по следующей формуле (см. ГОСТ Р 59898—2021,
Полноту реализации функций
пункт 8.2.2):
А
где А — количество недостающих или неправильно реализованных функций, обнаруженных при те
стировании;
В — общее количество функций, описанных втехнической и эксплуатационной документации СИИ.
9