ГОСТ Р ИСО/МЭК 19795-2—2008
- краткое изложение;
- описание сценария;
- особые процедуры испытания;
- сбор данных;
- метод анализа данных;
- способ хранения данных;
- результаты испытания, эксплуатационные характеристики;
- полное описание программы испытания.
8 Другие аспекты технологического и сценарного испытаний
8.1 Участники испытаний
Испытание должен проводитьэкспериментатор. Испытуемаябиометрическая система предостав
ляется одним или несколькими разработчиками. Если экспериментатор и разработчик являются одной и
той же организацией или они каким-либообразом связанны между собой, то это должно быть указано в
протоколе испытания.
Участие разработчика в технологическом и сценарном испытаниях должно ограничиваться по
ставкой. установкой и настройкой программного иУили аппаратного обеспечения. Испытательная орга
низация должна проводить испытания регистрации и сравнения без участия разработчика.
П р и м е ч а н и е — При необходимости возможно проведение испытания, в котором роли экспериментато
ра и разработчика будут отличаться от описанных в 8.1. В так называемых внутренних испытаниях, проводимых не
посредственно разработчиком, могут использоваться образцы, предоставленные экспериментатором, но при этом
разработчик сам проводит настройку и работу с биометрической системой. Вданном случае экспериментатор осво
бождается от ответственности в том случае, если результаты испытаний будут не соответствовать
действитель ности. Подобные испытания должны использовать принцип «клиент — сервер». Следует иметь
в виду, что подобная схема вызывает много вопросов, связанных с затратами, возможностью фальсификации
результатов и конфиденциальности образцов.
8.2 Объективность испытаний
Условия проведения сравнительногоиспытаниядолжны быть одинаковыдля всех разработчиков.
П р и м е ч а н и е 1 — Данное положение не относится к организациям, проводящим технологические испы
тания для целей собственной научно-исследовательской деятельности.
П р и м е ч а н и е 2 — Как правило, после анонсирования испытания предполагаемые разработчики пыта
ются получить разного рода информацию (например, о формате образцов, их свойствах, качестве, интерфейсах,
различных административных процедурах и т.п ): если подобная информация предоставляется, то она должна
быть предоставлена публично. Например, можно создать некую базу вопросов и ответов, доступную через сеть
Интернет. В таком случае информация о пользователе, запрашивающем подобную информацию, будет недоступ
на. Уведомление о подобном решении должно быть во вводной информации к данной базе и при анонсировании
самого испытания.
П р и м е ч а н и е 3 — В случае проведения технологического испытания экспериментатор должен пре
доставить всем разработчикам некоторый типичный образец данных в том формате, который будет использовать ся
в процессе испытания.
Экспериментатор должен указывать в протоколе испытания любое участие испытательной орга
низации в настройке, модификации, обновлении или адаптации испытуемой биометрической системы.
Экспериментатор должен указывать в протоколе испытания любой интеллектуальный или физи
ческий вклад испытательной организации, который может повлиять на результаты испытаний.
Если испытаниям подвергаются несколько компонентов или систем, то экспериментатор должен
указать, испытывались ли они на одинаковых по своим аппаратным и программным средствам испыта
тельных стендах и переустанавливалась ли операционная система перед началом каждой отдельной
стадии испытания.
8.3 Основания для включения в испытания
В протоколе испытанияэкспериментатордолжен указатьоснования, согласно которым алгоритмы
и системы включаются в технологическое или сценарное испытание. Включение алгоритмов и систем в
испытание должно основываться на:
а) непосредственной заявке на участие;
27