МЕТОДИКИ ПРОВЕДЕНИЯ ЭКСПЕРИМЕНТОВ

Согласно , качественное исследование интерфейса человек— ЭВМ требует особого внимания к подбору пользователей для проведения эксперимента, к внешним условиям работы и методам сбора и анализа данных.

Правильный подбор пользователей для проведения экспериментов крайне важен для качества оценивания. В случае, когда программный интерфейс проектировался для пользователей-новичков, неприемлема его оценка опытными пользователями. Определение подходящего уровня квалификации часто является сложным вопросом, потому что интерфейс характеризуется целым рядом параметров. Обычно пользователь хорошо знаком лишь с каким-либо одним аспектом работы, например с языком программирования, но оказывается некомпетентным в вопросах работы конкретного интерактивного редактора. Поэтому определение характеристик соответствующей категории пользователей и уровня их квалификации является центральным пунктом проблемы эффективности итогового оценивания. С проблемой выбора пользователей непосредственно связан вопрос о продолжительности их обучения работе с интерфейсом перед проведением эксперимента. Можно сформировать относительно однородную группу пользователей, проведя с ними занятия до начала этапа формативного оценивания. В результате к моменту проведения эксперимента все участвующие в нем пользователи могут в равной мере владеть навыками работы с интерфейсом. Необходимые продолжительность и способ обучения зависят от конкретной ситуации и могут определяться предварительным тестированием.

Одна из особенностей процесса оценивания программного интерфейса человек—ЭВМ заключается в том, что он обычно автоматизируется. Представление и сбор данных осуществляются программным обеспечением ЭВМ. В связи с этим тому, кто проводит оценивание, часто приходится выполнять функции управления повторным циклическим выводом на печатающий терминал или дисплей в замкнутом контуре взаимодействия. Тем не менее очень важно тщательно проводить наблюдение для обеспечения уверенности в том, что неверные действия пользователя не являются следствием сбоев в аппаратной части системы или непонимания им задания. Даже в случае полностью автоматизированного процесса оценивания при вычислительной машине всегда должен находиться человек, выполняющий функции наблюдателя. В дополнение к этому необходимо качественно разработать и предварительно проверить инструкции для пользователя, чтобы гарантировать полное понимание последним поставленных перед ним задач.

Требуется также рассмотреть различные параметры условий исследования. В случае, когда итоговое оценивание проводится в лабораторных условиях разработчика, следует проанализировать рабочие условия организаций, для которых предназначена система, для того чтобы учесть все ключевые параметры, характерные для рабочей среды.

Поддержание порядка на рабочем месте, освещение, расположение оборудования, всевозможные посторонние помехи — все это взаимосвязанные факторы, которые могут отрицательно повлиять на результаты непосредственного оценивания интерфейса в рабочей обстановке и потому должны быть приняты во внимание. Для оценивания разрабатываются либо подробные схемы решения задач, либо только их краткие описания, что определяется типом задачи, характером оценивания и уровнем квалификации пользователя.

В процессе итогового оценивания учитываются как эффективность работы пользователя, так и даваемые им субъективные оценки интерфейсу. Несмотря на то что на этой стадии обычно проводится измерение пользовательских предпочтений, подобные методы оценки еще недостаточно хорошо разработаны. Часто субъективные мнения пользователей о системе расходятся с фактической оценкой эффективности работы, что отражает действительное расхождение между эмоциональной оценкой, даваемой пользователем системе, и рабочими возможностями интерфейса или свидетельствует о субъективности суждений. Требуются дополнительные исследования по проблеме повышения эффективности субъективных оценок, и с этой целью в настоящее время желательно использовать оценочные шкалы в сочетании с измерениями фактически выполненной работы во время оценивания. Перспективным инструментом субъективного оценивания представляются методики, использующие количественные оценки и двухаспектные характеристики.

Одним из преимуществ процесса оценивания программного интерфейса является возможность проводить его средствами самого программного обеспечения независимо от пользователя. Описано применение как специальных файлов протоколирования для оценивания эффективности работы пользователя в оперативном режиме, так и программ отметки данных при неверных действиях пользователя для последующего их анализа в автономном режиме.

Авторы работы включили в пакет программ по оцениванию качества интерфейса процедуру просмотра архивных данных, посредством которой последовательность действий пользователя может быть выборочно пересмотрена в режиме поиска отдельных символов и действий определенного функционального назначения. При разработке систем измерения эффективности работы с интерфейсом важно правильно выбирать степень детализации производимой ими оценки. Например, протоколирование последовательности всех нажимаемых пользователем клавиш в состоянии обеспечить любую форму обобщенной оценки интерфейса самыми разными способами, но требует чрезмерной емкости памяти и последующего длительного автономного анализа данных. Предварительное планирование основных стратегий анализа данных поможет избежать неудач, возможных при бессистемном экспериментировании.

Январь 24, 2019 Психология труда, инженерная психология, эргономика
Еще по теме
2.4.3. ФОРМАЛЬНОЕ ПЛАНИРОВАНИЕ И ПРОВЕДЕНИЕ ЭКСПЕРИМЕНТОВ
1.1.5. ЭТИЧЕСКИЕ НОРМЫ ПРОВЕДЕНИЯ ЭКСПЕРИМЕНТА
2.1. Описание используемых методик и организация проведения исследования.
3.2. Методика формирующего эксперимента.
МЕТОДИКА «ВЫЯВЛЕНИЕ СМЕЛОСТИ В ЕСТЕСТВЕННОМ ЭКСПЕРИМЕНТЕ» (А. И. Высоцкий)
ДЕТАЛЬНЫЙ АНАЛИЗ ПО РЕЗУЛЬТАТАМ ПРОВЕДЕННЫХ ПАТОПСИХОЛОГИЧЕСКИХ МЕТОДИКУ СТУДЕНТОВ ФАКУЛЬТЕТА ПСИХОЛОГИИ ОБУЧАЮЩИХСЯ НА 4 КУРСЕ.
АНАЛИЗ ПРОВЕДЕННЫХ ПАТОПСИХОЛОГИЧЕСКИХ МЕТОДИК У СТУДЕНТОВ СГУ ФАКУЛЬТЕТА ФИЗКУЛЬТУРЫ И СПОРТА, ОБУЧАЮЩИХСЯ НА 4 КУРСЕ.
АНАЛИЗ ПРОВЕДЕННЫХ ПАТОПСИХОЛОГИЧЕСКИХ МЕТОДИК У КУРСАНТОВ СТАВРОПОЛЬСКОГО ФИЛИАЛА РОСТОВСКОГО ВОЕННОГО ИНСТИТУТА РАКЕТНЫХ
Анализ результатов проведенных патопсихологических методик и СТУДЕНТОВ СГУ ФАКУЛЬТЕТА ФИЗИЧЕСКОЙ КУЛЬТУРЫ И СПОРТА, ОБУЧАЮЩИХСЯ на первом курсе
ДЕТАЛЬНЫЙ АНАЛИЗ ПРОВЕДЕННЫХ ПАТОПСИХОЛОГИЧЕСКИХ МЕТОДИК ШИЗОИДНОГО ПСИХОТИПА СТУДЕНТОВ 1-ГО КУРСА. АНАЛИЗ ПО ШКАЛАМ ПДО (ОТ ОБЩЕЙ ВЫБОРКИ):
АНАЛИЗ ПРОВЕДЕННЫХ ПАТОПСИХОЛОГИЧЕСКИХ МЕТОДИК У КУРСАНТОВ СТАВРОПОЛЬСКОГО ФИЛИАЛА РОСТОВСКОГО ВОЕННОГО ИНСТИТУТА РАКЕТНЫХ ВОЙСК, ОБУЧАЮЩИХСЯ НА ПЕРВОМ КУРСЕ. ДЕТАЛЬНЫЙ АНАЛИЗ ПО ШКАЛАМ ПДО (ОТ ОБЩЕЙ ВЫБОРКИ):
Добавить комментарий