Зміна товарної сторінки збільшила середній чек на 2%: A/B-тест Anatta
Середній чек зріс приблизно на два долари. Для одного замовлення небагато, але за великого обсягу це може означати значну річну суму. У кейсі Anatta прогноз становив близько $1,27 млн додаткового доходу. Перш ніж повторювати пропозицію комплекту, варто перевірити дві речі: наскільки надійно оцінено приріст і скільки залишається після вартості додаткових товарів. Більший кошик може принести більше виручки й водночас менше грошей на покриття витрат.
Дата публікації:
Що насправді змінили на сторінці
Convert описує серверний A/B-тест Anatta на Shopify-сайті зі змішаними роздрібними й оптовими продажами. Тестували товарну сторінку, не форму оплати: новий блок вибору робив помітнішим комплект «три за ціною двох».
За 25 днів спостережуваний AOV становив $102,63 у контролі та $104,74 у варіанті. Модельна оцінка приросту — $2,12, трохи відмінна від прямої різниці округлених середніх. Імовірність позитивного ефекту в байєсівській моделі дорівнювала 97,6%, а 94% credible interval простягався від $0,03 до $4,25.
Приблизний розподіл становив 85/15. Автори працювали з даними окремих замовлень, відфільтрувавши оптові, аномальні та замовлення до $20. Це важлива частина висновку: кілька великих кошиків могли спотворити загальне середнє. Відтворювати такий фільтр навмання у власному тесті не варто — спершу потрібно визначити, для яких покупців робите висновок.
Чому $1,27 млн ще не є отриманим результатом
Річна сума — екстраполяція приросту на очікуваний обсяг замовлень. Вона залежить від збереження ефекту й кількості покупок. Тест не спостерігав ці гроші протягом наступного року.
Інтервал оцінки також нагадує: невеликий позитивний приріст і значно більший приріст залишаються сумісними з моделлю. 97,6% не є гарантією конкретної суми для майбутнього періоду.
Для власного прогнозу запишіть число замовлень, до яких застосовується зміна. Якщо комплект купують тільки окремі клієнти, не множте його ефект на всю базу без перевірки. Окремо врахуйте повернення та сезонні зміни попиту.
Перевірте, що залишилося після комплекту
Ось умовний приклад без доставки, податків та інших витрат. Він показує, чому виручку потрібно доповнити собівартістю, і не відтворює економіки клієнта Anatta.
| Показник | Один товар | Три за ціною двох |
|---|---|---|
| Виручка | 100 грн | 200 грн |
| Собівартість, 60 грн за одиницю | 60 грн | 180 грн |
| Залишок до інших витрат | 40 грн | 20 грн |
Чек подвоївся, але залишок зменшився вдвічі. Комплект може мати іншу користь: звільнити склад або зменшити витрати доставки на одиницю. Проте це потрібно порахувати окремо, а не вважати автоматичним наслідком зростання AOV.
Яку зміну залишати
У власному тесті поруч із чеком потрібні кількість виконаних замовлень, дохід і внесок після змінних витрат на відвідувача. Якщо частина людей через дорожчий комплект відмовиться від покупки, AOV тих, хто залишився, може зрости без поліпшення загального результату.
До масштабування порівняйте фактичний внесок варіантів і потрібний запас товарів. Якщо додатковий оборот потребує більше закупівель, а залишає менше грошей, високий річний прогноз не є достатньою причиною впровадження. Корисним буде комплект, який поліпшує економіку за вашого реального обсягу, а не лише середню суму в звіті.
