UX/UI и AB-тестирование: почему редизайн с гарантией роста конверсии не работает
Не так давно общались с одним e-com. У ребят всё в целом нормально, но пришли они с задачей поднять конверсию с условных пяти до семи процентов за счёт редизайна.
Посмотрели метрики, текущий UX и все хотелки и быстро поняли: подписываться под такие вещи — это форма самообмана. Никто не может честно гарантировать, что набор изменений в интерфейсе точно даст рост в два процента. Можно верить, надеяться, но это не про управление продуктом.
Мы предложили идти через мелкие изменения и замеры конкретных метрик. Зацепили гипотезами, показали, что так безопаснее и прозрачнее. Но понимания не нашли. Клиент хотел увидеть в ТЗ формулировку «вырастить конверсию в N раз» и переложить риски на исполнителя. Как цель это звучит красиво, но чтобы под такое подписаться, нужно быть либо слишком самоуверенным, либо рассчитывать на удачу. Мы туда не пошли.
Отдельная история — как вообще замерять результат. Инструментов море, но важнее другое: понимать, что именно мы ожидаем увидеть. Если, к примеру, дорабатываем карточку товара и добавляем бесконечный скролл с похожими товарами, то конечную конверсию можно смотреть, но толку от этого мало. Она слишком инертная и размазанная. Гораздо честнее заметить рост по количеству добавлений в корзину и глубине просмотра — это и есть прямой эффект улучшения. Но это уже продуктовая логика, а не магия «конверсия выросла — молодцы».
С технической стороны тоже всё не так романтично. В Битриксе есть встроенные AB-тесты, которые автоматически делят трафик. Работает, но выглядит архаично. Есть Яндекс Метрика и её же Varioqub в базовом виде. Можно развернуть Varioqub on-prem и крутить тесты в больших объёмах. Все эти решения рабочие, но вопрос никогда не в инструменте. Вопрос в том, что мы пытаемся померить и зачем.
И здесь встаёт немой вопрос. Готовы ли вы подписаться под разработку UX/UI с гарантированным результатом? Для меня это почти как обещание построить дом, который понравится всем соседям, будет вечным, красивым и вообще идеальным при любых вкусах. Так не работает.
Ну и последняя мысль, которая обязательно всплыла в процессе. Такие работы точно нельзя продавать по модели time & material. Если вам перекладывают риск на достижение результата, то TM размывается, превращается в лотерею и работает против исполнителя. Если уж подписываться под такую историю, выигрыш должен быть действительно значительным, иначе проще сразу сказать «нет».