ГОСТ Р 59921.7—2022
Таблица 4 — Анализ и оценка результатов функционального тестирования — согласованность
Наименование параметра
Оценочные данные
Результат
Согласованность
Соответствие нормативным требованиям
Соответствует/не соответствует
Пример заполнения протокола по результатам функционального тестирования СИИ приведен в
приложении В.
8 Уровень производительности
8.1 Назначение
В рамках оценки уровня производительности (performance efficiency) рекомендуют оценивать сле
дующие характеристики: характер изменения во времени, характер изменения ресурсов и производи
тельные возможности (см. ГОСТ Р 59898—2021, подраздел 8.3).
8.2 Общие требования к проведению испытания
Для выбора номенклатуры характеристик, подготовки набора данных, а также для проведения
тестирования и оценки результатов создают экспертную группу, которая должна удовлетворять требо
ваниям ГОСТ Р 59898—2021 (пункт 7.1.2).
Непосредственно выполнение испытания уровня производительности проводят силами квалифи
цированных технических специалистов, имеющих опыт тестирования программного обеспечения, в том
числе СИИ.
Набор данных для тестирования уровня производительности должен включать такой объем, что
бы выполнить тестирование на максимальном уровне загрузки СИИ. Наборы данных для данного те
стирования не должны включать примеры медицинских изображений, отличающиеся от нормы и (или)
патологии, применительно как к качеству изображения, так и к его содержанию (см. [1], статья 12).
Тестирование выполняют на испытательном стенде (может быть как отдельным автоматизирован
ным рабочим местом, так и виртуальной тестовой средой, которая удовлетворяет техническим требо
ваниям СИИ (см. [1], статья 10).
Возможно использование виртуальной тестовой среды, позволяющей выполнять автоматические
тестирования (benchmarking) (см. [1], статья 79).
Перед выполнением тестирования необходимо удостовериться в отсутствии существенных раз
личий между средой проведения тестирования и средой эксплуатации СИИ (см. ГОСТ Р 59898—2021,
подраздел 7.2).
8.3 Метрики
Метрики характера изменения во времени (time behaviour) характеризуют соответствие требова
ниям временных ресурсов на выполнение операции, а также производительность — количество одно
типных задач за определенное время. Методика расчета приведена в ГОСТ Р 59898—2021 (пункт
8.3.4).
Метрики характера изменения ресурсов (resource utilization) относят к объему используемых ре
сурсов и продолжительности такого использования при выполнении функции (см. ГОСТ Р 59898—2021,
пункт 8.3.5).
Метрики производительных возможностей (capacity) характеризуют степень соответствия требо
ваниям таких параметров СИИ, как количество параллельно обрабатываемых наборов данных, коли
чество параллельно работающих пользователей, емкость канала, пропускная способность по транзак
циям.
8.4 Обработка результатов и оформление протокола
В протокол испытания включают параметры, влияющие на уровень производительности: параме
тры центрального процессора, объем памяти, объем хранения, сетевой трафик и прочее.
Результаты тестирования оформляют в виде протокола испытаний в соответствии с ГОСТ ISO/IEC
17025 (см. таблицу 5).
11