5 кроків, які допоможуть швидко почати А/В тестування

5 кроків, які допоможуть швидко почати А/В тестування

тест

Суперечка про вибір кращого кольору для тулбару сторінки. Команді подобався певний відтінок синього, а продуктовий менеджер більше схилявся до зеленого відтінку. Обидві сторони твердо відстоювали свій вибір. Але кому вирішувати?

Рішення з таких питань часто приймаються на основі дипломатії, авторитету, або думки. Згадана вище історія дійсно мала місце в Google - в результаті, щоб зрозуміти який колір більше подобається користувачам, команда протестувала 41 відтінок синього. Навіщо? Тут мова йшла про щось більше, ніж юзабіліті або призначений для користувача досвід. Від того, чи призведе вибір дизайнера до збільшення кількості кліків, залежить кількість прибутку. Такі компанії, як Google, розуміють важливість проведення А\В тестування для визначення правильного підходу за допомогою даних, а не на основі думок або здогадок.

коло

Чи є метою поліпшення лендінгової сторінки або СТА кнопки? А\В тестування - кращий спосіб, що допомагає UX командам впроваджувати інкрементні поліпшення. Добре побудований А\В тест допоможе команді зробити вибір між двома кнопками, двома шрифтами, або навіть двома мікросайтами. А\В тести говорять нам що працює добре, і де є проблеми. Якщо коротко, результати А\В тестування можуть привести до прийняття поінформованих рішень, заснованих на даних.

То ж що заважає іншим людям його проводити? Помилкові уявлення про його складність, страх великих масивів чисел, або нерозуміння можливостей тестування можуть стати перешкодами на шляху до інформованого експериментування. У цій статті Бізнес Майстерня демістифікує А\В тестування і розповість про те, які кроки потрібно зробити, щоб почати проводити прості тести.

А\В тестування: Основне визначення

А\В тестування - це експеримент. Іноді званий спліт тестом, - це метод порівняння двох версій чогось, для визначення того, яка версія підходить краще. Щоб визначити який дизайнерський підхід краще, дві його версії демонструються цільовій аудиторії. Тест визначає яка версія показала себе краще. В результаті той варіант, що змусив більшу частину користувачів виконати необхідну дію, виграє.

Для проведення А\В тесту повинно бути створено принаймні дві версії тестованого елемента: версії А і В. Наприклад, можна протестувати дизайн сторінки або тільки одного екрану мобільного додатка. Половина трафіку буде варіантом А, а друга половина стане модифікованою версією - варіантом В. Різні версії у випадковому порядку показуються користувачам. Реакція кожного користувача, з метою подальшої оцінки, записується аналітичним інструментом. По завершенні тесту, для оцінки результату використовується статистичний аналіз. Експеримент може показати, що зміни справили позитивний, негативний вплив, або взагалі не мали ефекту.

аналітика
Приклад вимірювання А\В тесту з використанням Google Analytics Events

Навіщо проводити А\В тестування

Пам'ятаєте ситуацію, коли ви стикалися з новою ідеєю і відчували сумніви і невпевненість? Це спрацює? Добре чи погано вплине зміна на сайт? А\В тестування допоможе позбутися від більшості сумнівів. Команда зможе перестати говорити «ми думаємо», і почати говорити «ми знаємо». А\В тестування може допомогти:

  • Приймати поінформовані рішення
  • Підтвердити, що новий дизайн рухається в правильному напрямку
  • Вирішити, яку версію застосувати
  • Зрозуміти, що найкраще працює серед текстових і UI елементів
  • Зрозуміти, як маленькі зміни можуть вплинути на поведінку користувачів
  • Постійно покращувати призначений для користувача досвід
  • Оптимізувати рівень конверсій

В кінцевому рахунку, переваги A/B тестування компенсують час, витрачений на його проведення. Збільшення рівня конверсій, будь то підписка на електронну розсилку або нові потенційні клієнти, в кінцевому підсумку вплине на успіх вашої ініціативи і виправдає рентабельність інвестицій. Якщо ви можете довести, що щось добре працює, то зможете легко виправдати продовження цієї практики.

5-ступінчастий план А\В тестування

Немає однієї правильної відповіді, яка підказали б, що конкретно потрібно тестувати. Тестуйте те, що при наявності даних про поведінку користувачів, буде мати найбільший вплив на проект. Перегляньте аналітику на предмет низьких конверсій, рівня відмов, областей підвищеного трафіку (для швидкого отримання результатів), або порожніх областей в тих процесах або діях, в яких ви хочете задіяти користувачів. Знання важливих показників кампанії, програми, або бізнесу - це ключ до концентрації на проблемі, яку спробує вирішити А\В тестування. Це підводить нас до першого кроку.

1. Визначте мету

Ви тестуєте рекламне оголошення, веб сторінку або e-mail, усі А\В тести потребують чіткої мети. Метою може бути те, що ви хочете дізнатися, чи позитивно вплине зміна. Які метрики або конверсію ви хочете поліпшити? Подумайте про необхідні результати, і визначте пов'язану з вашою метою метрику.

2. Сформулюйте гіпотезу

А\В гіпотеза - це припущення, на якому базується тест. Щоб сформулювати гіпотезу, поставте питання, і спробуйте у відповіді передбачити, що стоїть на шляху конверсій. «Я думаю, що зміна А в В принесе результати С». Гіпотеза повинна включати в себе те, що ви хочете змінити, і ваша думка про те, який вплив ця зміна надасть.

3. Побудуйте і проведіть тестування

Для проведення тесту створіть дві версії - А і В. Потім оберіть тільки одну тестовану змінну. Вибір кількох елементів можливий, але такий тест називається мульти-варіантним тестуванням, який збільшує складність тесту. Новачкам варто починати з простого. Протестувати можна майже все, що завгодно, але оберіть щось, що найпростіше змінити, і що зможе зробити значний вплив.

тест

Ось кілька прикладів простих змінних:

Заголовки і підзаголовки

Довжина тексту, мовні нюанси, зрозумілість, і настрій можуть мати значний вплив на те, як користувачі відреагують на текст. Спробуйте протестувати:

  • мова і стиль
  • довжину тексту
  • твердження і питання
  • слова тригери
  • позитивні і негативні послання

СТА

СТА - це ключ до успіху. Як його зміна може змусити людей частіше його використовувати? Експериментуйте з:

  • текстом або фразою на кнопці
  • розміром, кольором, або формою кнопки
  • використанням тільки тексту або іконки з текстом
  • застосуванням гіперпосилань замість кнопки
  • розміщенням СТА на сторінці
  • зміною самої пропозиції

Зображення і графіка

Зображення можуть допомогти встановити зв'язок з користувачем або віддалити його:

  • Порівняйте використання зображень та публікування на головній сторінці
  • Протестуйте різні варіації зображень людей: стать, раса, вік, група людей або одна людина.
  • Порівняйте застосування зображень людей і продуктів

Форми

Можливо форми важливі, але вони не повинні напружувати користувачів. Невеликі зміни можуть сильно вплинути на їхню продуктивність. Спробуйте протестувати:

  • довжину форм
  • поля
  • розміщення і підписи до полів
  • обов'язкові поля

Пам'ятайте, змінюйте тільки одну змінну за раз, тоді її вплив буде максимально очевидним.

жовтий

4. Проаналізуйте результати

Слідкуйте за проведенням тесту за допомогою програми для тестування, щоб переконатися, що все йде правильно, але не шукайте результати до його закінчення. Тест повинен тривати досить довгий час, щоб надати статистично значущі результати. Це означає, що щоб виробляти впевнені зміни вам потрібно зібрати достатню кількість даних. Це може зайняти від одного тижня до двох місяців, в залежності від обсягу тестування. Чим більше зібрано інформації, тим стабільніше будуть результати.

Як тільки ви визначилися з обсягом тестування - дотримуйтесь його. Визначте також мінімальну кількість відповідей, необхідних для отримання статистично значущих результатів; в результаті, ви повинні бути в змозі з упевненістю сказати, що така-то зміна призвела до такого-то результату. Не припиняйте тестування заздалегідь, тільки тому, що вважаєте, що визначили переможця. Зачекайте, поки переможець визначиться результатом.

5. Застосуйте результати

Застосуйте виграшний варіант, але не припиняйте тестування. А\В тестування - це спосіб інкрементного впровадження поліпшень, а дані додаткових тестів допоможуть з подальшими поліпшеннями. Чим більше ви тестуєте, тим більше знаєте.

Не гадайте, тестуйте!

Наявність свідчень, що підкріплюють впровадження змін, полегшує прийняття оптимальних рішень. А\В тестування може вплинути на результат, даючи вам зрозуміти що працює, а що ні. Після того, як ви проведете кілька тестів і покажете, як одна версія може працювати краще іншої, вам перестануть ставити питання про те, чому ваша команда хоче провести А\В тестування - всі думатимуть лише про те, чому ви не проводили його раніше.

Фото: flickr.com
Обробка: Vinci
назад
далі