Виявилось, що A/B тести можна запускати прямо в App Store.

interfaces.prjctr | napriienko week

interfaces.prjctr | napriienko week

@interfaces_prjctr

Найбільший український канал присвячений дизайну продуктів від спільноти Projector Institute. Наші курси ➡️ https://shorturl.at/5Zpvf @projector_online — менеджер на звʼязку з 10 по 19 💙

10,692 subscribers
Open in Telegram
Виявилось, що A/B тести можна запускати прямо в App Store. Це відкриття прийшло до мене завдяки партнерству з маркетингом.

На минулій роботі я збирав весь user journey, від креативів до першої цінності в продукті. І на одному з відрізків я побачив те, як додаток виглядає в App Store, і як він виглядає насправді — це були два різні продукти.

Пішов знайомитись з маркетинг менеджером яка відповідала за цей напрямок і дізнався дві речі. Перша — просто так оновити скріншоти не можна. Друга — щоб їх змінити, треба запускати A/B тест. В App Store є вбудований інструмент експериментів — Product Page Optimization. І більшість дизайнерів про нього просто не знає.

Чому це кайф саме для дизайнера. Тут не потрібна команда розробки. Зробив скріни і запустив. Через декілька тижнів вже є результат. Time to market мінімальний, і за один тиждень роботи можна нагенерувати гіпотез на місяць-два вперед.


Можна тестувати самі скріни, додавання відео або зміну іконки. iPhone та iPad скріни або разом, або окремо. Запускати можна на англомовні країни або worldwide. 1-3 тестові групи, трафік порівну по дефолту.

Головна метрика звісно ж conversion to install. В App Store Connect видно деталі для аналітики, як improvement та confidence в цих даних.

Як краще тестувати скріни? Якщо взяти й замінити їх всі одразу то як проаналізувати результат? Що саме спрацювало? Новий фон, інші тексти, мокапи, що всередині них тощо. Чистота експерименту вирішує все.

Перший скрін найважливіший. Бо перед тим, як відкрити сторінку додатка, юзер бачить його у пошуковій видачі, а там видно тільки перші 3 скріни, а вже при відкритті перший і половину другого.

На прикладі продукту FastEasy нам було складно знайти виграшну гіпотезу, бо перший екран обіцяв швидкість результату, яку продукт не витримував. Тому ми пішли іншим шляхом. Спочатку змінили екрани з другого по останній, але перший екран лишили без змін → спрацювало.
І тільки після цього ми взялись за перший екран окремо: 5+ ітерацій нового дизайну, поки не знайшли варіант, який теж виграв.

Виглядає повільно, але це дієвий спосіб знати, що саме дало результат.

Ще в App Store є Custom Product Pages. Це окремі сторінки додатка під конкретні keywords. Юзер шукав одну задачу і бачить скріни саме про неї, а не універсальну пейджу про все. Працює краще, ніж здається, бо зникає розрив між запитом і тим, що людина побачила.

Цей досвід сильно підтягнув моє розуміння A/B тестів і все, чого я навчився там, я приніс у PDF Expert з перших місяців роботи.
Open post in Telegram