lviv md day 2015 Олександр Дзюба "Користувацьке тестування...
TRANSCRIPT
Користувацьке тестування додатків - що дає і як проводити
4% ігор заробляють
Electronic Entertainment Design and Research
Geoffrey Zatkin, president
60% бюджету витрачається на переробки
Electronic Entertainment Design and Research
Geoffrey Zatkin, president
ефективні інвестиції
Зустріч з реальністю
неминуча
Бізнес - це клієнти.
Ви запитуєте їхню думку?
Всі роблять ЦЕ!
Запитайу юзера!
Де знайтиюзера?
Місця потенційногоскупчення
Які інтереси мають?Де бувають?
Де і з ким спілкуються?
Планування проектуДослідження ринку
Актуальність проблематикиВибір та опис ЦА
Споживацькі практикиКанали інформування
Референсні групиОцінка та вибір рішення
Драйвери, трігери, бар’єриБачення ідеального додатку
Фокусованегруповеінтерв’ю
4-8 респондентів90-120 хвилин
План бесіди, модератор
Експрес інтерв’ю(масове опитування)
від 200 респондентівзамір якісних показників
Експертнеінтерв’ю
Концентрат знаньДопомагає зробити ОК
Нічого показувати в прототипі?
Стратегічні рішення
прийняті
Ідея додаткуОсновна механіка
Набір супутніх задачДоречні інтеграції
Модель управління Манера взаємодії
Уточнення ЦА
α, β, реліз
User InterfaceНавігація
КеруванняФункціонал
НалаштуванняІнтеграції
Прогноз ретеншнМонетизація
Плейтест- замір оцінок ЦА
Формати плейтеста
Хол-тестХоум-тест
Формування досвіду
Список завдань
Анкетування
Методи збору даних
Методи збору даних
Невключене спостереження
Методи збору даних
Інтерв’ювання
Методи збору даних
Думки вголос
Методи збору даних
Ранжування
Методи збору даних
Відеореєстрація
Обмеження методики
-не очікувати ідей-тривалість до 2 годин-оцінювати лише побачене
Без ТЗ - результат ХЗ
Обмеження методики
Tехнічне завдання
Оцінка рекламних матеріалів для Appstore(які очікування формують)
Визначити корисність туторіалу(чи дає розуміння задачі і вигоди)
Виявити драйвери та бар’єри першої сесіїОцінка навігації
Логіка побудови анкетиЧас
користування
Етап формування
досвідуПро що питаємо
0 хвилин ВідсутнійДані респондента (прізвище, ім’я, вік, стать, інтереси, використовувані додатки, інше)
0 хвилин ОчікуванняБажання встановити додаток, почати користування, очікування від додатку (завдання, функціонал, для кого). Сформовані маркетинговими матеріалами - іконка, назва, опис у сторі, скріншоти
2 хвилини Перший досвідЧи розібрався з керуванням, чи зручне керування (коротко). Туторіал. Наскільки справдилися очікування.
10 хвилинПерший значний досвід
Комфорт керування, звикання до керування. Якість розв’язання ключової задачі.
30 хвилин Значний досвідЯкість реалізації задуму, інтеграцій, придатність для використання на ходу та розв’язання комплексних задач, адаптованість под мобільний девайс,
60 хвилин Повний досвідГоловні питання, винесені на плейтест. Зручність нотифікейшнів. Готовність рекомендувати друзям, ділитися у соцмережах. Бажання залишити у девайсі. Монетизація.
Типи питань
Закриті питаннякількісна оцінка якості об’єкта
- Номінальні шкали- з одиничним вибором альтернативи- з множинним вибором альтернатив
- Порядкові (або рангові) шкали - Метричні шкали
Відкриті питаннямісце для розгорнутого коментаря, думки, ідеї
Самі лише відкриті питання - зло
- Користувач не обмежений у висловлюваннях
- Легше готувати інструментарій
- Складно формулювати думки
- Важко обробляти дані, треба кодувати
- Важко отримати кількісні показники
- Важко порівнювати відповіді різних респондентів
- Більшість лінуються писати, відповіді односкладні, малозмістовні
З вибором однієї альтернативиВ Google Forms тип питання - З варіантами , Список, Сітка, Шкала
Номінальні шкали
Відповіді ранжовані за певною ознакоюВ Google Forms тип питання - З варіантами , Список, Сітка, Шкала
Порядкові (рангові) шкали
З множинним вибором альтернативВ Google Forms тип питання - Прапорці
Номінальні шкали
Біполярна оціночна шкала з градаціямиВ Google Forms тип питання - Шкала, Таблиця
Метод семантичного диференціалу
Порядкова шкала, в якій для кожного об’єкту порівняння гравцю важливо визначити ранг за інтенсивністю певної характеристикиВ Google Forms тип питання - Шкала, Таблиця
Ранжування
Однозначність формулювання питань
Одне питання за раз
Нейтральність питань
Уточнюючі питання
Основні правилаформулювання питань
Респондент має точно знати, про що саме ви запитуєте
- Наскільки зрозуміла для Вас специфіка використання навігації?
Про що саме ми питаємо?+ Чи очевидно, що маршурт враховує дорожній
трафік?+ Чи зрозуміло, що є можна оптимізувати час,
відстань, та оплату проїзду?
Однозначністьформулювання питаннь
Одне питання за раз
Питання необхідно розділитина два питання
Слід уникати питань, що схиляють респондента до певної відповіді.Формулювання мають бути нейтральними.
- Оцініть, наскільки Вам подобається додаток?+ Дайте вашу оцінку додатку
- Чи цікаво було б мати внутрішній чат з іншими користувачами?
+ Виберіть зі списку можливих апдейтів один, найбільш критичній на ваш погляд
Нейтральність питань
Важливі питання слід перепровірити на уважність та правду
Уточнюючі питання
Перепитуємо, використовуємо “пастки”
