Почему вам нужно тестировать только с 5 пользователями
- Итеративный дизайн
- Почему бы не протестировать с одним пользователем?
- Когда проверять больше пользователей
- Ссылка
Некоторые люди думают, что удобство использования очень дорого и сложно, и пользовательские тесты должны быть зарезервированы для редкого проекта веб-дизайна с огромным бюджетом и щедрым графиком. Не правда. Сложные юзабилити-тесты - пустая трата ресурсов. Наилучшие результаты достигаются при тестировании не более 5 пользователей и выполнении столько маленьких тестов, сколько вы можете себе позволить.
В более ранних исследованиях Том Ландауэр и я показали, что число проблем с юзабилити, обнаруженных в юзабилити-тесте с n пользователями, составляет:
N (1- (1- L ) n )
где N - общее количество проблем с юзабилити в проекте, а L - доля проблем с юзабилити, обнаруженных при тестировании одного пользователя. Типичное значение L составляет 31%, усредненное по большому количеству проектов, которые мы изучали. Построение кривой для L = 31% дает следующий результат:
Самая поразительная правда кривой - то, что нулевые пользователи дают нулевое понимание .
Как только вы соберете данные от одного тестового пользователя , ваши идеи возрастут, и вы уже узнали почти треть всего, что нужно знать о юзабилити дизайна. Разница между нулем и даже небольшим количеством данных поразительна.
Когда вы протестируете второго пользователя , вы обнаружите, что этот человек делает то же самое, что и первый пользователь, так что в изучаемом вами материале есть некоторые совпадения. Люди, безусловно, разные, так что будет также что-то новое, что сделает второй пользователь, чего вы не заметили с первым пользователем. Таким образом, второй пользователь добавляет некоторое количество нового понимания, но не так сильно, как первый.
Третий пользователь сделает много вещей, которые вы уже наблюдали с первым пользователем или вторым пользователем, и даже некоторые вещи, которые вы уже видели дважды. Плюс, конечно, третий пользователь будет генерировать небольшое количество новых данных, даже если не так много, как первый и второй пользователи.
По мере того, как вы добавляете все больше и больше пользователей, вы все меньше и меньше учитесь, потому что вы будете снова и снова видеть одни и те же вещи. Нет необходимости постоянно наблюдать за одной и той же вещью несколько раз, и вы будете очень заинтересованы вернуться к чертежной доске и перепроектировать сайт, чтобы устранить проблемы с юзабилити.
После пятого пользователя вы тратите свое время, наблюдая за одними и теми же результатами, но не узнавая много нового.
Итеративный дизайн
Кривая ясно показывает, что вам нужно протестировать не менее 15 пользователей, чтобы обнаружить все проблемы с юзабилити в дизайне. Так почему я рекомендую тестировать с гораздо меньшим количеством пользователей?
Основная причина в том, что лучше распределить свой бюджет на пользовательское тестирование во многих небольших тестах вместо того, чтобы бросать все на одном, сложном исследовании. Допустим, у вас есть средства для привлечения 15 представительных клиентов и их тестирования вашего дизайна. Отлично. Потратьте этот бюджет на 3 исследования с 5 пользователями каждый!
Вы хотите запустить несколько тестов, потому что реальная цель юзабилити-проектирования состоит в том, чтобы улучшить дизайн, а не просто документировать его недостатки. После того, как первое исследование с пятью участниками выявило 85% проблем с юзабилити, вы захотите исправить эти проблемы в редизайне.
После создания нового дизайна вам необходимо снова протестировать . Хотя я и сказал, что редизайн должен «исправить» проблемы, обнаруженные в первом исследовании, правда в том, что вы думаете, что новый дизайн преодолевает проблемы. Но поскольку никто не может разработать идеальный пользовательский интерфейс, нет гарантии, что новый дизайн действительно решит проблемы. Второй тест покажет, сработали ли исправления или нет. Кроме того, при представлении нового дизайна всегда существует риск появления новой проблемы с юзабилити, даже если старый исправился.
Кроме того, во втором исследовании с 5 пользователями будет обнаружено большинство из оставшихся 15% исходных проблем с юзабилити, которые не были обнаружены в первом раунде тестирования. (Все еще останется 2% первоначальных проблем - им придется подождать, пока не будет определено третье исследование.)
Наконец, второе исследование сможет глубже изучить юзабилити фундаментальной структуры сайта, оценить такие проблемы, как информационная архитектура, поток задач и соответствие потребностям пользователей. Эти важные проблемы часто скрываются в начальных исследованиях, где пользователи находятся в тупике из-за глупых проблем с юзабилити на уровне поверхности, которые мешают им действительно копаться в сайте.
Таким образом, второе исследование будет служить как гарантия качества результатов первого исследования, так и поможет обеспечить более глубокое понимание. Второе исследование всегда приведет к новому (но меньшему) списку проблем с юзабилити, которые нужно исправить в редизайне. То же самое относится и к этой редизайн: не все исправления будут работать; некоторые более глубокие проблемы будут обнаружены после очистки интерфейса. Таким образом, третье исследование также необходимо.
Абсолютный пользовательский опыт улучшается гораздо больше за 3 исследования с 5 пользователями в каждом, чем за одно исследование с 15 пользователями.
Почему бы не протестировать с одним пользователем?
Можно подумать, что 15 исследований с одним пользователем будет даже лучше, чем 3 исследования с 5 пользователями. Кривая действительно показывает, что мы узнаем гораздо больше от первого пользователя, чем от любых последующих пользователей, так зачем продолжать? Две причины:
- Всегда существует риск быть введенным в заблуждение ложным поведением одного человека, который может выполнить определенные действия случайно или непредставительным образом. Даже трех пользователей достаточно, чтобы получить представление о разнообразии поведения пользователей и понять, что является уникальным и что можно обобщить.
- анализ затрат и результатов пользовательского тестирования обеспечивает оптимальное соотношение около 3 или 5 пользователей, в зависимости от стиля тестирования. Всегда есть фиксированные начальные затраты, связанные с планированием и проведением исследования: лучше амортизировать эти начальные затраты по результатам, полученным от нескольких пользователей.
Когда проверять больше пользователей
Вам нужно протестировать дополнительных пользователей, когда на сайте есть несколько очень разных групп пользователей . Формула верна только для сопоставимых пользователей, которые будут использовать сайт довольно похожими способами.
Если, например, у вас есть сайт, который будет использоваться как детьми, так и родителями, то две группы пользователей будут вести себя достаточно по-разному, что становится необходимым для тестирования с людьми из обеих групп. То же самое можно сказать и о системе, нацеленной на объединение агентов по закупкам и торгового персонала.
Даже когда группы пользователей сильно различаются, между наблюдениями двух групп все же сохраняются большие сходства. Все пользователи люди, в конце концов. Кроме того, многие проблемы с юзабилити связаны с тем, как люди взаимодействуют с Интернетом, и с влиянием других сайтов на поведение пользователей.
При тестировании нескольких групп разрозненных пользователей вам не нужно включать столько членов каждой группы, сколько вы бы включили в один тест для одной группы пользователей. Перекрытие между наблюдениями обеспечит лучший результат тестирования меньшего числа людей в каждой группе. Рекомендую:
- 3–4 пользователя из каждой категории при тестировании двух групп пользователей
- 3 пользователя из каждой категории при тестировании трех или более групп пользователей (вы всегда должны по крайней мере 3 пользователя, чтобы убедиться, что вы охватили разнообразие поведения в группе)
Ссылка
Нильсен, Якоб и Ландауэр, Томас К .: «Математическая модель нахождения проблем юзабилити» Материалы конференции ACM INTERCHI'93 (Амстердам, Нидерланды, 24-29 апреля 1993 г.), с. 206-213.
Последующие статьи
Похожие
Лучшая SIM-карта действует только в июне 2019 года... сделки с SIM-картой - это ваш путь к более дешевым счетам за мобильный телефон и экономии денег. Если у вас есть деньги, чтобы потратить их на совершенно новую разблокированную телефонную трубку, или вы расторгли свой контракт и хотите продолжить со своим старым смартфоном, дешевые сделки только на SIM-карте помогут вам. Правда заключается в том, что невероятные сделки с SIM-картами приходят и уходят, но всегда есть где-то выгодная сделка с большими данными или дешевый тариф. Такие компании, Это не всегда должен быть iPad: тестирование продукта выбирает лучшие планшеты
Профессионалы берут iPad Pro - у кого меньше ожиданий, может уйти дешевле. (Фото: Apple) Stiftung Warentest проверяет 17 таблеток. IPad Pro работает лучше всего, но он также является самым дорогим устройством. Второй лучший планшет стоит меньше половины - и даже лучше в одном отношении. Это не Сказать «ОК, Google» не разблокирует телефоны Pixel 3
Kaufdex / Pixabay Телефоны Google Pixel 3 теперь поставляются, и они оснащены многими новыми функциями, включая несколько новых помощников функции , Однако вы будете Почему меняется рейтинг сайтов Google?
... когда вы проводите исследование. Конечно, это правда, но вы должны знать, что за стабильной позицией сайта существует множество специалистов, вносящих изменения на сайте, которые заботятся о его достоверности и что на него будет помещен только ценный контент. Это тяжелая и постоянная работа. Это не может быть достигнуто в течение нескольких месяцев. Вслед за действиями конкурса на изменение рейтинга сайтов повлияло обновление алгоритмов Google. Google постоянно совершенствует Как обезопасить Turbo NAS больше?
Относится к следующим моделям: ответ: QNAP стремится предоставить пользователям Turbo NAS максимально безопасную среду для решения задач новых и более сложных сетевых атак. Для защиты окружающей среды мы также рекомендуем нашим пользователям следовать приведенным ниже инструкциям для защиты своих файлов и данных. В: Как я могу улучшить безопасность своего Turbo NAS, используя сервисы, предоставляемые QNAP? A: QNAP предоставляет множество Светодиодная лампа G4 1.5W 12V 80LM
... создатели атмосферы в Европе! Бесплатная доставка от 300 злотых Бесплатный возврат товара до 30 дней Клиенты дали нам рейтинг 4.8 / 5 Вам нужна помощь? Отдел обслуживания клиентов в вашем распоряжении с понедельника по пятницу с 10:00 до 18:00. Чат в прямом эфире описание Светодиодная лампа, которая Женская бизнес идея: реклама в кино
Кино является наиболее распространенной формой культуры, выбранной поляками. Кроме того, все чаще они выбирают традиционные кинотеатры, где нет попкорна, а реклама короче, чем в мультиплексах. Но вы когда-нибудь задумывались, кто отвечает за рекламу в традиционных кинотеатрах? Кинга Доленга-Лесиньска отвечает за эту часть рынка рекламы в кино, которая уже 15 лет ассоциируется с индустрией и ее собственной компанией. Правильная одежда для отдыха на Балтийском море
Правильная одежда для отдыха на Балтийском море Также на Балтийском море есть: Там нет плохой погоды, в большинстве случаев неправильная одежда. Хотя летом обычно завлекает богатый солнцем пляжный отдых, но погода на Балтийском море также может быть очень изменчивой. Поэтому в чемодане красочная смесь одежды. Для солнечных часов Цинновиц на Узедом - самое солнечное место Германии. В этом месте на втором по величине немецком острове солнце светит в среднем 1971,5 «Алкогольная» и «табачная» лицензии: все, что вы хотели знать и не побоялись спросить
... когда лицензию сдано для проставления отметки об очередном платеже? Как мы уже говорили, плату за розничную «алкогольную» и «табачную» лицензии вносят ежеквартально равными частями и причисляют в местный бюджет. Однако имейте в виду! Просто своевременно вносить в бюджет плату за лицензию недостаточно. Об оплате каждый раз нужно обязательно сообщать налоговикам, уполномоченных контролировать внесение платы за лицензию. Этого Прежде чем перейти на музыку в FLAC качестве, проверьте, может ли ваше оборудование это сделать
Знаете ли вы, какая из пяти песен была воспроизведена с более высоким качеством звука? Я встретил много голосов людей, которые не были уверены, что они могли слышать и замечать разницу в музыке, подаваемой в более высоком качестве. Я говорю о качестве flac, которое совсем недавно пришло к стримингу. Я знаю, что некоторые люди беспокоятся о том, достаточно ли хороши их игровое оборудование или наушники для получения более качественного звука от настоящего удовольствия. Sony Xperia T3, мы проверили это
... смартфон японской компании Sony, который был официально представлен в начале июня этого года 2014"> Sony Xperia T3 Это смартфон японской компании Sony, который был официально представлен в начале июня этого года 2014 . Это мобильный телефон среднего класса, который имеет такие характеристики, как 5,3-дюймовый экран с разрешением 1280
Комментарии
А что делать, если и контрагент отсутствует, и ваш руководитель не на месте, когда вам нужно срочно подписать отчет или отправить оригинал договора в электронном виде?А что делать, если и контрагент отсутствует, и ваш руководитель не на месте, когда вам нужно срочно подписать отчет или отправить оригинал договора в электронном виде? С «Медок» таких проблем нет, так как в программу добавлена функция «Мобильный подпись». Она позволяет просмотреть и подписать отчет или любой другой документ из любой точки мира с помощью мобильного телефона. Теперь можно не нервничать по поводу квитанций о доставке отчета в налоговую или иную строгую инстанцию. Сообщение о доставке Почему просто слушать только местные радиостанции, когда весь мир может себе это позволить?
Почему просто слушать только местные радиостанции, когда весь мир может себе это позволить? С каналом, совместимым с интернет-радио, вы можете легко путешествовать по миру, не покидая своего кресла (десятки тысяч доступных станций). Некоторые модели даже предлагают возможность загрузки Podcast или записи программ на карту памяти или USB-ключ. Не ждите больше, чтобы расширить свой музыкальный кругозор. Хоча ви встановили драйвери, чи не розпізнає пристрій Windows?
Хоча ви встановили драйвери, чи не розпізнає пристрій Windows? Потім, підключивши телефон до ПК, спробуйте розгорнути меню сповіщень Android (якщо ви цього не знали, просто проведіть пальцем у верхній частині екрана вниз), виберіть піктограму USB-з'єднання і поставте знак поруч із пунктом Мультимедійний пристрій (MTP) . Якщо у вас Mac , вибачте, але ви не можете отримати доступ до вмісту вашого смартфона з Finder. Если не я, то кто?
Если не я, то кто? Как не сейчас, когда? - Я помню лицо моего мужа, когда я пришел домой и сказал ему, что я ухожу с работы. Он был очень удивлен. Со временем он привык к этому факту и очень быстро решил, что это блестящая идея. Моя идея для бизнеса состояла в том, чтобы войти в нишу и развивать ее. Любой мог позаботиться об этом, но я был первым, кто взял на себя эту задачу - позаботиться о рекламе в традиционных кинотеатрах, - говорит Кинга. Позже началась Вы всегда даете чаевые или только когда нас хорошо обслуживают?
Вы всегда даете чаевые или только когда нас хорошо обслуживают? Искусство чаевых делается в разных странах очень по-разному, но, конечно, не одинаково. Как не делать «Подделка» в парижском ресторане вы узнаете из этой статьи ... Швеція - туристичне агентство Ecotravel Что делать если забыл пароль или не получается войти в систему?
Что делать если забыл пароль или не получается войти в систему? С просьбой уточнить Ваш логин Вы можете обратиться к тех. поддержки сервиса. В целях безопасности мы не храним пароли наших пользователей, изменить пароль и восстановить доступ в Личный кабинет Вы сможете самостоятельно, воспользовавшись Формой восстановления пароля . Использование сервиса и оплата Почему этого не происходит?
Почему этого не происходит? - Я не знаю. - Каковы ваши дальнейшие действия? - Я делаю то, что могу сделать в этой ситуации. - Можете рассказать об этом СМИ. - Я об этом говорил. Вы же спросили, почему я так много интервью даю. RPS: Почему я получаю этот ужасающий поток адреналина, когда я борюсь онлайн?
RPS: Почему я получаю этот ужасающий поток адреналина, когда я борюсь онлайн? Фергус: Это просто порыв играть в файтинги. В конце концов, вы буквально пытаетесь избить своего противника, ха-ха. Это одно из лучших переживаний, когда-либо преодолевать противника, который раньше вас уничтожал, но потом вы постепенно поправлялись и превосходили его. Это просто острые ощущения от боя. RPS: Меня публично унизил стример. Целых 18 человек смотрели, как меня загружают Почему браузеры используют пробел в качестве стандартного ярлыка для прокрутки страницы, а не просто с помощью клавиши со стрелками ?
RPS: Почему я получаю этот ужасающий поток адреналина, когда я борюсь онлайн? Фергус: Это просто порыв играть в файтинги. В конце концов, вы буквально пытаетесь избить своего противника, ха-ха. Это одно из лучших переживаний, когда-либо преодолевать противника, который раньше вас уничтожал, но потом вы постепенно поправлялись и превосходили его. Это просто острые ощущения от боя. RPS: Меня публично унизил стример. Целых 18 человек смотрели, как меня загружают Только SIM-карта: какая лучшая мобильная сеть?
Только SIM-карта: какая лучшая мобильная сеть? Хотя EE, O2, Vodafone и Three, как правило, считаются основными четырьмя сетями для контрактных планов, когда речь идет только о SIM-карте, есть некоторые другие ключевые игроки, которые стоит посмотреть. Посмотрите, что мы думаем о них ниже, и получите ли вы какие-либо бесплатные льготы, чтобы убедить вас зарегистрироваться. Кроме того, мы расскажем вам о паре других продавцов SIM-карт, которые могут поставить вас в тупик. Вы хотите общаться с другими пользователями?
Вы хотите общаться с другими пользователями? Тогда посетите немецкое сообщество Huami Amazfit на Facebook! Сообществу Amazfit дизайн Прямоугольный корпус часов (41,5 х 34 х 9 мм) изготовлен из поликарбоната и доступен в черном, сером, хаки-зеленом и оранжевом цветах . Благодаря защите IP68 SmartWatch защищен
Так почему я рекомендую тестировать с гораздо меньшим количеством пользователей?
Почему бы не протестировать с одним пользователем?
Кривая действительно показывает, что мы узнаем гораздо больше от первого пользователя, чем от любых последующих пользователей, так зачем продолжать?
В: Как я могу улучшить безопасность своего Turbo NAS, используя сервисы, предоставляемые QNAP?
Вам нужна помощь?
Но вы когда-нибудь задумывались, кто отвечает за рекламу в традиционных кинотеатрах?
Когда лицензию сдано для проставления отметки об очередном платеже?
А что делать, если и контрагент отсутствует, и ваш руководитель не на месте, когда вам нужно срочно подписать отчет или отправить оригинал договора в электронном виде?
Почему просто слушать только местные радиостанции, когда весь мир может себе это позволить?
Хоча ви встановили драйвери, чи не розпізнає пристрій Windows?