ГОСТ Р 70321.5—2022
ГОСТ Р 59795—2021 Информационные технологии. Комплекс стандартов на автоматизирован
ные системы. Автоматизированные системы. Требования к содержанию документов
ГОСТ Р 59898—2021 Оценка качества систем искусственного интеллекта. Общие положения
СП 42.13330 Градостроительство. Планирование и застройка городских и сельских поселений
СП 475.1325800 Парки. Правила градостроительного проектирования и благоустройства
Примечание — При пользовании настоящим стандартом целесообразно проверить действие ссылочных
стандартов (сводов правил) в информационной системе общего пользования — на официальном сайте Федераль
ного агентства потехническому регулированию и метрологии в сети Интернет или по ежегодному информационному
указателю «Национальные стандарты», который опубликован по состоянию на 1 января текущего года, и по вы
пускам ежемесячного информационного указателя «Национальные стандарты» за текущий год. Если заменен ссы
лочный документ, на который дана недатированная ссылка, то рекомендуется использовать действующую версию
этого документа с учетом всех внесенных вданную версию изменений. Если заменен ссылочный документ, на кото
рый дана датированная ссылка, то рекомендуется использовать версию этого документа с указанным выше годом
утверждения (принятия). Если после утверждения настоящего стандарта в ссылочный документ, на который дана
датированная ссылка, внесено изменение, затрагивающее положение, на которое дана ссылка, то это положение
рекомендуется применять без учета данного изменения. Если ссылочный документ отменен без замены, то положе
ние, в котором дана ссылка на него, рекомендуется применять в части, не затрагивающей эту ссылку. Сведения о
действии сводов правил целесообразно проверить в Федеральном информационном фонде стандартов.
3 Термины и определения
В настоящем стандарте применены термины по ГОСТ ISO/IEC 17000, ГОСТ Р 52438, ГОСТ Р 59276,
ГОСТ Р 59753, ГОСТ Р 59754, ГОСТ Р 59898.
4 Общие положения
4.1 Объектами испытаний являются алгоритмы ИИ.
4.2 Стадии жизненного цикла, на которых проводят испытания алгоритмов ИИ, и группы лиц, осу
ществляющие тестирование, — по ГОСТ Р 59898—2021 (раздел 6).
4.3 Общие принципы и порядок испытаний алгоритмов ИИ — по ГОСТ Р 59898—2021 (раздел 7)
с дополнениями, приведенными в настоящем стандарте.
5 Подготовительные работы
5.1 Перед проведением испытаний алгоритмов ИИ заказчикам испытаний рекомендуется устано
вить (не ограничиваясь):
- перечень существенных факторов (внешних воздействий), оказывающих влияние на работу ал
горитмов ИИ (далее — существенные факторы) и статистические характеристики их распределений;
- требования к квалификации экспертов, выполняющих разметку снимков для тестовых наборов
данных (при необходимости);
- целесообразность проведения валидации разметки тестовых наборов данных и анонимизации
снимков для тестовых наборов данных;
- показатели для оценки функциональной корректности алгоритмов ИИ и их критериальные пороги.
Перед проведением оценки качества СИИ необходимо удостовериться в отсутствии существен
ных различий между средой проведения тестирования и средой эксплуатации, т. е. убедиться, что
потенциальные различия не влияют на надежность, валидность и репрезентативность результатов
тестирования.
[ГОСТ Р 59898—2021, 7.2.1.2]_______________________________________________________________
Примечание — СИИ — системы искусственного интеллекта.
5.2 Подготовительные работы — по ГОСТ Р 59898—2021 (7.2.1) с дополнениями, приведенными
в настоящем стандарте.
5.3 Требования к тестовым наборам данных — по ГОСТ Р 59898—2021 (9.2) с дополнениями, при
веденными в настоящем стандарте.
Примечание — Описание наборов данных для тестирования — по ГОСТ Р 59898—2021 (9.1).
2