Новая обложка может увеличить долю кликов, но снижение цены или рост рекламной ставки в тот же день способны дать похожий результат. Чтобы выбрать изображение осмысленно, сначала определите, какое изменение проверяете и по каким данным будете судить о результате. Простая замена фотографии «до/после» полезна как наблюдение, но сама по себе не является строгим A/B-тестом.
Коротко. Сравнивайте версии по заранее выбранной метрике и сопоставимому трафику. Если площадка или ваш инструмент действительно распределяет посетителей случайно между вариантами, проверяйте настройки эксперимента и единицу распределения. Если показываете обложки последовательно, фиксируйте изменение рекламы, цены, остатков, акций и дня недели; вывод о причине будет ограниченным.
Сформулируйте одну проверяемую гипотезу
«Сделать картинку красивее» — не гипотеза. Назовите один элемент, который может повлиять на решение покупателя: товар занимает слишком мало места, ракурс не показывает существенную деталь или главный вариант цвета путают с другим. Пример: «На мобильной выдаче крупный вид крепления поможет заметить отличие товара; доля кликов из сопоставимых показов вырастет, а заказов на один клик не станет меньше».
Сохраните исходную обложку, дату изменения и файлы обеих версий. Не меняйте одновременно заголовок, цену, остальные фото и описание. Перед тестом проверьте, что оба изображения соответствуют действующим требованиям Ozon к фото и точно показывают продаваемую комплектацию. На нашем сайте отдельно разобраны фото и видео карточки; эксперимент не отменяет базовую корректность контента.
Сначала выясните, какой тест вам доступен
Настоящий A/B-тест требует одновременного показа разных версий сопоставимым, случайно разделённым посетителям. Проверьте, поддерживает ли выбранный инструмент такую настройку именно для вашей карточки: кто видит варианты, на каком уровне разделяется трафик, одинаковы ли места показа и как исключаются повторные визиты. Наличие двух файлов обложки не означает, что Ozon автоматически проводит такой эксперимент. До фактчека конкретного интерфейса мы не называем его штатной функцией.
Если случайного разделения нет, можно провести последовательное сравнение: сначала показывать A, затем B. Его результат слабее. В разные недели меняются спрос, конкуренты и состав трафика; даже одинаковое число показов не делает посетителей одинаковыми. Сопоставляйте аналогичные дни недели и сохраняйте историю всех существенных изменений.
<!-- IMAGE SLOT NEW-TG15-080-IMG-01: две схемы рядом — случайное одновременное разделение посетителей A/B и последовательная замена A→B по времени. Подпись у второго варианта: «сезон, цена, реклама и состав трафика могут измениться». Filename: new-tg15-080-test-oblozhki.webp; alt: «Чем A/B-тест обложки отличается от сравнения до и после»; title: «Два способа сравнить обложки»; caption: «Последовательное сравнение не доказывает причинность само по себе»; WebP 16:9, мобильная версия — два вертикальных блока; никаких скриншотов неподтверждённой функции Ozon. -->
Определите метрики до запуска
Выберите одну основную метрику, связанную с гипотезой. Для обложки часто интересна доля кликов из показов: CTR = клики / показы × 100%. Но CTR не равен продажам. Отдельно следите за заказами на сопоставимое число кликов, выкупами и маржинальным результатом. Если новая обложка привлекает любопытные, но нерелевантные клики, основной показатель может вырасти при падении экономики.
| Метрика | Что она отвечает | Что не доказывает |
|---|---|---|
| Показы и клики | Сколько раз товар увидели и открыли в выбранном отчёте | Равенство аудитории и мест показа |
| CTR | Долю переходов из учтённых показов | Рост заказов или чистой прибыли |
| Заказы на клики | Реакцию пришедших в карточку покупателей | Окончательные выкупы и отсутствие возвратов |
| Выкупы и вклад в маржу | Последствие для денег после уточнения статусов | Что именно обложка, а не цена, вызвала изменение |
Перед расчётом проверьте определения показов, кликов и заказов в том отчёте Ozon, который используете. Данные из рекламного отчёта и общего товарного отчёта нельзя механически объединить без совпадения периодов, SKU и правил учёта. Для выбора источников есть разбор показателей рекламной кампании.
Запишите паспорт эксперимента
До изменения карточки зафиксируйте в одном документе:
- SKU, варианты и ссылки на два файла обложки;
- гипотезу, основную и защитные метрики;
- источник данных и точное определение каждого поля;
- способ распределения трафика либо последовательность периодов;
- цены, рекламные кампании и ставки, акции, остатки и доступность доставки;
- минимально полезное для бизнеса улучшение и допустимый риск по заказам;
- заранее выбранные условия остановки и обработки периода с распродажей или отсутствием товара.
Не назначайте универсальное число показов вроде «тысячи достаточно всем». Требуемый объём зависит от исходного CTR, размера интересующего изменения и допустимой неопределённости. Если таких данных пока нет, начинайте с пилотного наблюдения и не объявляйте его доказательным тестом.
Сравните результат, не выбирая победителя по первому пику
Условный пример: версия A получила 10 000 показов и 200 кликов, версия B — 10 000 показов и 230 кликов. CTR равен 2% и 2,3%; разница составляет 0,3 процентного пункта. Эти итоги сами по себе не показывают, что B лучше именно из-за обложки. Для причинного вывода нужно понимать дизайн эксперимента, состав трафика и неопределённость оценки. Если в период B выросла ставка или изменилась цена, причина особенно неясна.
Проверьте защитные показатели. Больше кликов при меньшей доле заказов может быть сигналом неверного обещания на фото. Смотрите на выкупы и экономику после того, как статусы заказов созреют. Не останавливайте проверку в момент, когда цифра впервые стала приятной: правило остановки должно быть записано заранее.
Как оформить честный вывод
- Есть основание предпочесть B: условия были сопоставимы, метод распределения и объём данных достаточны для выбранного критерия, защитные показатели не ухудшились.
- Различие не подтверждено: наблюдаемое изменение мало относительно разброса данных. Сохраните рабочий вариант, но не называйте обложки «одинаковыми навсегда».
- Тест неинтерпретируем: поменялись ставки, цена, наличие или состав трафика; данных мало либо отчёты не совпадают по периоду. Верните безопасный вариант и повторите эксперимент с лучшим контролем.
После выбора сохраните паспорт и файлы обеих версий. Он полезнее общего утверждения «эта обложка конвертит лучше»: через месяц можно увидеть, в каких условиях был получен результат и применим ли он к новому сезону или рекламной стратегии.
Что изучить дальше
- Если карточка получает клики, но не заказы, проверьте структуру карточки, а не только обложку.
- Если одновременно менялась реклама, разберите результаты кампании и повторите сравнение при стабильном источнике трафика.
- Если проблема в техническом качестве изображения, сначала сверяйте требования к фото товара, потом сравнивайте варианты.
Источники и ограничения редакции
- Официальный материал Ozon о поисковых запросах товара найден, но при подготовке черновика полный текст не открылся. Поэтому наличие нужных полей, их определения и доступность для продавца здесь не считаются подтверждёнными.
- Способ расчёта CTR и протокол эксперимента — редакционная методика. Мы не утверждаем, что сейчас в Ozon есть штатное случайное A/B-разделение обложек. Доступность функции, единицу разделения и определения метрик требуется подтвердить перед публикацией.
- Числовой пример условный и не является результатом теста на реальной карточке.