ГОСТ Р ИСО 10303-31-2002
Комплект выполняемых тестов создается в результате выбора и параметризации абстрактного контрольного примера (см. выше этапы f и h); данный комплект включает основные тесты (при необходимости" и тесты возможностей.
На основе данного комплекта фиксируются ТР и область применения процесса оценки соответствия, которые в дальнейшем не могут быть изменены. Это должно проводиться по согласованию между клиентом и испытательной лабораторией.
Примечание 2 — Более подробная информация по данному вопросу приведена в ГОСТ Р ИСО 10303-32.
6.6 Тестовая кампания
Тестовая кампания является процессом, охватывающим реализацию комплекта выполняемых тестов и описания в журнале соответствия результатов тестирования и любой связанной с ними информации. В журнале соответствия также должны быть описаны исходные данные для ТР и результаты тестирования, полученные после выполнения каждого контрольного примера. Описание и сохранение всей информации, полученной для ТР в ходе тестовой кампании, необходимо для анализа результатов и последующего аудита.
6.7 Анализ результатов
Анализ результатов проводят путем оценки полученных результатов тестирования на соответствие критериям вердикта, установленным абстрактным контрольным примером. Несмотря на наличие четких отличий между стадиями тестовой кампании и анализа результатов они могут перекрываться по времени.
Примечание — Средства проведения подобной оценки в настоящем стандарте не определены, но описаны в ИСО 10303-34.
Вердикт теста определяет прохождение, безуспешность или неокончательное^ выполнения данного теста. Прохождение и безуспешность являются основными вердиктами, но в исключительных случаях может быть выдан неокончательный вердикт. Должно быть приведено обоснование каждого безуспешного или неокончательного вердикта, а также для них может быть приведена дополнительная информация.
a) Прохождение означает, что полученные результаты тестирования дают явное подтверждение соответствия реализации требованиям соответствия, определенным в цели тестирования, и являются правильными по отношению к конкретному стандарту и ЗСРП.
b) Безуспешность означает, что полученные результаты тестирования демонстрируют неудовлетворение цели тестирования или по крайней мере одному требованию соответствия из конкрет-ного(ных) стандарта(ов).
П р и м е р 3 — Аварийное прерывание, если по какой-либо причине преждевременно прервана работа выполняемого контрольного примера.
c) Неокончательность означает, что на основании полученных результатов тестирования не может быть выдан вердикт прохождения или безуспешный вердикт. Неокончательный вердикт должен присваиваться только в исключительных случаях.
П р и м е р 4 — Ошибка контрольного примера.
Вердикт должен присваиваться по результату конкретного теста на основании критерия вердикта, связанного с конкретным абстрактным контрольным примером.
Присвоенные вердикты далее должны быть обобщены в итоговых результатах тестирования
ТР.
6.8 Отчет об аттестационном тестировании
Результаты аттестационного тестирования должны быть документально оформлены в виде отчета. Отчет должен состоять из двух частей: итоговой и подробной. Формы каждой части определены в ГОСТ Р ИСО 10303-32.
Первая часть отчета должна описывать общие итоговые результаты о степени соответствия ТР. Здесь должны быть обобщены все вердикты, присвоенные при оценке соответствия результатов выполнения контрольных примеров. Во второй части отчета должны быть описаны результаты выполняемых контрольных примеров, приведены ссылки на журнал соответствия, содержащий результаты тестирования. В этой части также должны быть приведены ссылки на документы, необходимые для оценки соответствия заданному стандарту.
11