ГОСТ Р 53452—2009
Приложение А
(справочное)
Пример оценки
А.1 Управление и контроль: управляемый голосом вызов в сети GSM1>
Проводится сравнение двух управляемых голосом GSM-телефонов с голосовой системой вызова номера,
предназначенных для автомобиля. Для этой цели использована модель автомобиля, в которой установлена систе ма
голосового вызова21для GSM-телефона. Акустическое окружение включало в себя фоновый шум с частотным
спектром, имитирующим шум в салоне автомобиля. Система голосового вызова оснащена специальным микрофо
ном с шумоподавлением, который расположен в типичной позиции (50 см от рта испытателя). Телефонная система
автомобиля подсоединена к реальной телефонной сети, которая поддерживает услугу голосового вызова. По
результатам испытаний определены и сопоставлены показатели голосового ввода по исследуемым моделям
GSM-телефонов с применением двух систем голосового вызова. Чтобы исключить нежелательное взаимодей
ствие между сетью и GSM-телефоном, в испытаниях использованы два различных GSM-телефона от двух разных
производителей.
В испытаниях участвовали 20 испытателей, не имевших опыта использования систем голосового вызова.
Выбор испытателей был сбалансирован с учетом пола и возраста (возраст от 18 до 60 лет).
До начала испытаний испытатели были ознакомлены с руководством пользователя сетевого оператора,
предоставляющего услуги голосового вызова. Испытатели должны были читать руководство в течение 10 минут.
После обучения испытателей просили выбрать 5 человек среди своих знакомых. Имена этих людей использова лись
для управляемого голосом вызова. Преимуществом этой процедуры является то. что испытатели произносят имена
без ошибок и заминок, кроме того, выборка имен является репрезентативной, поскольку соответствует реальным
пользователям. Каждое испытание выполнялось в два этапа:
a) обучение системы по пяти выбранным именам в соответствии с указаниями в руководстве пользователя:
b
) проведение испытаний, включающих в себя последовательное произнесение всех пяти имен в случайном
порядке.
В процессе испытаний каждый испытатель использовал.
- две системы голосового вызова;
- два GSM-телефона.
- два вида автомобильного шума (80 и 110 км/ч):
- две группы по десять испытателей (мужчины, женщины).
Последовательность изменений условий испытаний подобрана таким образом (система вызова. GSM-теле
фон. шумовые условия), чтобы избежать привыкания испытателя при сравнении систем вызова.
В процессе испытаний фиксировались время реакции системы с момента начала вызова выбранного имени
до момента соединения, а также количество и виды ошибок соединения. Процедура подсчета была основана на
штрафной системе. При каждом последовательном вызове не было штрафа, если требуемое соединение удава
лось после произнесения нужной команды. Если для соединения требовалось дополнительное взаимодействие с
пользователем, были использованы следующие штрафные баллы: подтверждение имени — 1. удаление име
ни — 2. замена — 5. ошибка обучения — 15. Среднее значение штрафных баллов было вычислено для испытате
ля и условий испытаний.
Результаты испытаний приведены в таблице А.1. Основной интерес представляет сравнение показателей
двух систем голосового вызова. Поскольку среднее значение штрафных баллов для системы А составило 3.1, для
системы Б — 5.1. то можно сделать вывод, что система А функционирует лучше. Однако для доказательства этого
был проведен дисперсионный анализ (ANOVA). позволяющий оценить значимость различий этих двух результа
тов. Результат дисперсионного анализа показал, что по предоставленному количеству соединений две системы
значимо отличаются по количеству успешных соединений с вероятностью ошибочного решения р = 0.03.
Следующим показателем функционирования системы является время полного соединения. Среднее время
соединения составило 27.7 и 17.4 сдля систем А и Бсоответственно. Исследование ANOVA показало, что эта разни ца
является существенной с вероятностью ошибочного решения р = 0,001. Таким образом, по этому показателю
система 6 работает лучше.
Кроме того, было исследовано влияние на работу системы всех независимых переменных (пол испытателя,
комплект GSM и уровень шума). Эти исследования не приведены в настоящем стандарте.
1’ GSM — Global System for Mobile Communications (Глобальная система мобильной связи).
21 Система «свободные руки».
9