A b тестирование как. AB test: как его проводить и что для этого нужно
Развитие одна из главных составляющих частей, которые требуются для достижения определенного успеха. Любой бизнес нуждается в развитии, без этого он просто погибнет, потеряет свою актуальность. Рынок очень изменчив. Для каждого времени нужен свой определенный продукт. Из-за того что мир не стоит на месте, каждому бизнесу нужно подстраиваться под аудиторию, искать новые, более совершенные пути развития.
Разумеется, в первую очередь предпринимателю надо вносить новые уникальные торговые предложения. Они, в свою очередь, должны быть качественными и интересными, чтобы привлекать большое количество клиентов. Для тех, кто боится того что изменения окажут негативное влияние на работу, существует АБ тест.
АБ тест это практика тестирования многократных изменений одного и того же места, которая помогает понять, какие изменения наиболее благоприятно скажутся на проекте.
Этот метод покажет количество целевых действий, время пребывания пользователей на странице вашего проекта, также покажет объемы выручки и показатель отказов.
Руководство по настройке:
Заходим в Google Analytics, категория «Поведение», раздел «Эксперименты». Позвольте привести простой пример: вы хотите попробовать изменить на странице продукта красную кнопку на синюю. Чтобы проверить, эффективно это или нет, вам нужно создать две версии страницы. Даёте название старой версии «А», новой версии «Б». Используете Google эксперименты, чтобы показать посетителям два различных варианта, например на протяжении недели.
Указываем страницы для тестирования. Есть возможно указать дополнительные варианты для теста.
- Устанавливаем код эксперимента только на ИСХОДНУЮ СТРАНИЦУ , на вариант Б код эксперимента устанавливать не нужно. В то время как стандартный код Google Analytics должен быть на обоих вариантах.
Вставляем код на сайт или отправляем программисту
- Тестирование отлично подходит для многих задач, касающихся изменений внешнего вида веб-страницы. Вы можете протестировать любой элемент на своем сайте: различные фотографии, различные заголовки, различный контент. Даже просто перемещение различных элементов может оказывать решительное влияние на производительность.Протестируйте форму контакта справа от страницы против той же формы слева, и вы могли бы получить вдвое больше сообщений, отправленных от него. После размещения кода, мы увидим название эксперимента и статус “Выполняется”:
Статус «Выполняется»
- При клике на него, мы увидим всю статистику тестирования:
Статистика эксперимента будет доступна при клике на него
- Теперь при посещении тестируемой страницы пользователи будут видеть ссылку формата:
Кстати, если вы хотите посмотреть как работает эсперимент, и корректно ли он настроен, зайдите с разных браузеров на тестируемый сайт, с 3-5 попытки Google покажет вариант Б. Тем самым вы убедитесь в том, что эксперимент настроен корректно.
Нужно учитывать, что вы будете видеть небольшие различия и колебания даже без изменений вашего собственного сайта. На это влияют различные факторы, такие как сезон года, источники трафика, события, экономика, деятельность конкурента. Таким образом, если вы попробовали тестирование в течение недели, на следующей неделе его лучше повторить или сразу настроить тест на 2 недели.
И не забывайте, что вы можете протестировать различные элементы своего сайта одновременно вы можете не заканчивать один тест, прежде чем вы запустите следующий.
АБ тестирование
— отличная возможность улучшить контент вашего проекта!
Если вы любите синий цвет, это еще не означает успех синих кнопок на сайте)
Подписывайтесь на полезную закрытую рассылку
Определение: А/B-тестирование - это эксперимент, который проводится на интернет-сайте, мобильном приложении с целью подтвердить гипотезы по оптимизации потенциальных улучшений в сравнении с исходной версией (оригиналом). Оно позволяет Вам увидеть, что работает для Вашей аудитории, основываясь на статистическом анализе эффективности.
А/B-тестирование может также называться сплит-тестом, или Split URL testing. В классическом A/B-тесте оба варианта Ваших страниц находятся по одной ссылке . В случае Split URL testing , вариант В находится по другой URL-ссылке (Ваши посетители, соответственно, не видят разницы).
Что такое мультивариантное тестирование (MVT) ?
В некоторых случаях возможно тестировать одновременно несколько изменений на одной веб-странице: баннер, заголовок, описание или еще видео. MVT-тест позволяет вам тестировать все эти оптимизации за раз.
Ваш инструмент А/В-тестирования создаст столько вариантов, сколько имеется комбинаций, чтобы определить, какое из них имеет наибольшее влияние на Ваши показатели конверсии.
Проблема мульвариантного теста заключается в том, что он требует огромного объёма интернет-трафика для того, чтобы иметь возможность протестировать все варианты и получить статистическую значимость, которая Вам позволит принять обоснованное решение. Если Вы желаете узнать больше о том, в чем заключается разница между мультивариантным тестом и А/В-тестированием, то мы Вам советуем прочитать материалы по ссылке разница между MVT (мультивариантный) и A/B Тесты.
Пример с баннером и картинкой
(4 варианта, контрольная версия без картинки)
Bandit-тестирование или "multi-armed bandit"-тестирование
Multi-armed bandit тестирование - это когда Ваш алгоритм автоматически и постепенно перенаправляет Вашу аудиторию на выигрышную вариацию ..
“Не принимайте ничего на веру. Только решения из практических результатов, то есть - результатов тестирования. Тестировать надлежит все и вся. Я постоянно этим занимаюсь”. (с) Гари Хелберт.
И в этом с Королем продающих текстов (проще говоря, самым известным копирайтером современности) я полностью согласен.
A/Б тестирование - вот именно то, что необходимо, чтобы принять правильное решение, а не только основанное на собственных ощущениях. Что это такое и как его провести мы и поговорим в этой статье.
Дальние дали
Стандартно, A/B testing произошло от английского. Где его ещё называет split-testing или сплит-тестирование. Но самое интересное, это перевод.
A/Б тест (или сплит тест) - это один из методов маркетинга, когда одна группа элементов сравнивается с другой группой элементов с разными данными.
Цель действий - выяснить у какой группы элементов конверсия или показатели будут больше.
То есть все довольно просто. Вы создаете 2 различных варианта рекламной продукции (пусть это будут электронные письма продающие ваши услуги) и в конце этих писем делаете разный .
И просто считаете конверсия какого письма была выше. Именно это и есть суть а/б теста.
Вот наглядный пример на уровне сайтов, где мы определяем как влияет на результат изменённое расположение блоков. А именно поднятый наверх модельный ряд.
A/Б тест
А вот если Вы тестируете, к примеру, 2 посадочных страницы, в которых изменены заголовки, кнопки призыва к действию разной формы и разного размера, то это уже не просто а/b test, а многовариативное тестирование или A/B/N-test.
Так почему же про этот тест так много сейчас говорят? Все очень просто. Маркетологи любят показывать свою экспертность за счёт разного рода фишек, к которым тестирование можно отнести.
А владельцы компаний мечтают найти волшебную таблетку и считают, что сплит-тестирование - просто панацея для их рекламных материалов (в частности при ).
Что вам даст этот тест?
На самом деле не все так плохо и сплит тестирование сайта реально даёт пользу для компаний, и может за короткий промежуток времени изменить ситуацию, а именно:
- . Самый простой и при этом самый желаемый показатель любого владельца, особенно в сайтах.
- Изменение поведенческих факторов. Не самые очевидный, но опять же влияющий на увеличение продаж фактор.
- Увеличение среднего чека. Это добавление разного рода call to action или на примере сайтов, всем знакомый блок “с этим товаром покупают”.
Если обобщить, все сводится к увеличению продаж. И определённо это стоит вашего внимания.
Но есть одно “НО”. И уже возможно на этом этапе Вы поймёте, что Вам это не нужно.
Это “НО” говорит о том, что добиться взрывных продаж с помощью замены одного элемента если и можно, то очень редко.
Примерные шансы 1 к 1000. Так как идёт замена небольших составляющих, которые редко когда отличаются кардинально друг от друга.
А когда для Вас это капля в море, то лучше сфокусировать своё внимание на более важных составляющих.
К тому же, пока у Вас нет устоявшегося трафика, пока Вы только тестируете разные каналы и способы рекламы в интернете, то можете даже не начинать тестировать.
Так как показатели будут не верны, ведь трафик не однородный, а, как известно, разные люди действуют по-разному.
Если у Вас нет опыта в проведении а/б тестов (иначе вас бы тут не было), то крайне рекомендую Вам предварительно прочитать кейсы.
И особенно обратите внимание на кейсы людей, добившихся увеличения конверсии/изменения поведения в рунете. Так Вы поймете что лучше тестировать.
Либо Вы можете пойти другим путем. Составьте предварительный список (план) того, что Вы будете тестировать на сайте.
Это нужно делать исходя из своих предположений, обратной связи фокус группы (наихудший вариант) или на основе данных из . Это для того, чтобы Вас не кидало из стороны в сторону.
Важно. Забудьте про многовариативность и делайте только один тест за раз. На нашем опыте лучше всего работает связка - 1 тест = 1 изменение.
Иначе Вы не поймёте что на самом деле дало результат. А ещё интереснее будет, когда одно изменение даст +0,5, а другое изменение на этой же странице -0,5 к конверсии.
Что в результате 0 и упущенный из виду положительно влияющий элемент. Поэтому не допускайте такой ошибки.
Важно. Забудьте про расплывчатые теории. Из серии “надо что-то изменить в сайте, сделав его более продающим”.
Нормальная теория для тестирования - на одной странице кнопка красная, на другой синяя.
На одной странице есть цена, на другой нет цен. Только тогда Вы будете уверены в результатах. Четкие критерии = понятные результаты.
Важно. Результат, полученный за очень короткий срок = плохой результат.
Особенно, если за короткий срок на Ваших сайтах побывало от силы 20 человек.
Поэтому перед тем как броситься в тестирование сайта, Вам нужно понимать сколько человек его посещает ежедневно и сколько дней тестирование должно длиться.
Калькулятор времени тестирования
Чтобы Вам было не скучно, я нашел калькулятор, благодаря которому Вы сможете рассчитать оптимальную продолжительность для тестирования сайта - vwo.com/ab-split-test-duration/
Калькулятор
Он на английском языке, поэтому на всякий случай я перевел и расшифровал строчки, которые Вам необходимо будет заполнить:
- Конверсия Вашей страницы на данный момент. Как считать, читайте здесь - .
- Процент, на который Вы хотите увеличить существующую конверсию.
- Необходимое число комбинаций. Если Вы, к примеру, хотите узнать какой заголовок на сайте лучше конвертирует, то тогда это одна комбинация.
Если Вы хотите поменять заголовок, но при этом изменить его текст и размер, то это будет две комбинации.
- Число посетителей в день на Вашем сайт (естественно, усредненное).
- Число посетителей, которые будут принимать участие в тестах.
Поэтому это ещё один камень в “огород” a/б теста, касаемо его не актуальности для взрывного роста продаж.
НАС УЖЕ БОЛЕЕ 29 000 чел.
ВКЛЮЧАЙТЕСЬ
Как делать?
Теперь расскажу как сделать все правильно. Заголовок письма, кнопка призыва к действию, наличие цен в , всё это можно реализовать как вручную, так и с помощью специальных сервисов.
И сразу, без долгих объяснений в любви, вручную делать это запрещено, потому что времени займёт массу.
А если у Вас времени все-таки много, то лучше и полезнее будет вам внедрить любой канал из статьи.
A/B тестирование
A/B тестирование как способ управления конверсией
A/B тестирование - один из самых эффективных маркетинговых инструментов, который используется для оценки и управления конверсией сайта. Инструмент облегчит работу маркетолога - он встроен в продукт и не требует дополнительных настроек. В продукте доступно шесть готовых сценариев A/B тестирования - новый дизайн, главная страница, детальная карточка товара, страницы корзины, страница оформления заказа и произвольно выбранная страница. На основании тестирования будет выбран наиболее эффективный вариант для показа.
Воспользоваться инструментом может обычный контент-менеджер, поскольку система все делает сама и не требуется ничего программировать. Достаточно выбрать один из предустановленных тестов, запустить его и получить подробные отчеты по эффективности.
Для чего нужны А/В тесты
Как изменения могут отразиться на конверсии?А/В тестирование - один из лучших способов для увеличения конверсии страниц и интернет-магазина. Главная цель А/В тестирования – выяснить, какие именно составляющие сайта нравятся посетителям больше, работают лучше, а, значит, и повышают конверсию. Особенно эффективны А/В тесты для сайтов с большим трафиком.
Что именно изменить?
Хотите что-то изменить на сайте для улучшения конверсионных показателей? Проведите А/В тестирование, выясните, как изменения отразятся на этих показателях.
Даже небольшие эксперименты с контентом сайта могут изменить конверсию. В большую или меньшую сторону? Пройдите испытания, перед тем как радикально изменить, например, свои рекламные предложения.
Сделать А/В тест вручную очень сложно для обычного пользователя. Собирать данные, проводить анализ и вычислять наиболее удачные варианты страниц - все это связано с большими трудозатратами. Обращаться к услугам специальных сервисов - долго и дорого.
В продукте - готовые А/В тесты - абсолютно бесплатно!
Протестируйте новый шаблон сайта
Готовые А/В тесты
Готовые А/В тесты
Не нужно программировать, не нужно настраивать!Провести A/B тестирование самостоятельно очень сложно. Несмотря на то, что это один из самых эффективных инструментов, делают это крайне редко. «1С-Битрикс» представляет уникальный инструмент, позволяющий каждому клиенту за 5 минут провести A/B тестирование своими силами.
Шаблоны готовых тестов
В вашем распоряжении - встроенные инструменты А/В тестирования. Теперь вы легко можете проверить, какой вариант страницы работает эффективнее. С продуктом «1С-Битрикс: Управление сайтом» вы получаете комплект готовых тестов. Все тесты встроены в продукт и не требуют дополнительных технических настроек.
Тестируйте, вносите изменения на сайт и получайте прибыль.
6 сценариев A/B тестирования:
- Новый дизайн
- Главная страница
- Детальная карточка товара
- Страницы корзины
- Страница оформления заказа
- Произвольная выбранная страница
Список предустановленных тестов будет пополняться!
Не нужно программировать!
Нужный тест достаточно выбрать из списка предустановленных и запустить. Для выполнения теста достаточно знаний и прав обычного контент-менеджера.
Пройдите тест перед сменой дизайна
Воспользоваться инструментом может обычный пользователь, поскольку система все делает сама и не требует ничего программировать. Достаточно выбрать один из предустановленных тестов, запустить его и получить на руки подробные отчеты по эффективности. Система сама скопирует нужную вам страницу!
Отчеты и аналитика
Подробные отчеты по эффективности
Полная аналитика для выбора лучшего варианта!Узнайте с помощью нового инструмента, как скажется на конверсии магазина смена дизайна сайта, перестройка главной страницы, новое представление карточки товара, иная сортировка товара в каталоге и другие изменения. Достаточно выбрать и запустить нужный тест.
- Графики
- Сводные данные
- Воронка
Следует учитывать, что конверсия будет высчитываться по тем счетчикам, которые были выбраны в настройках модуля .
Отчеты по тестам В любой момент после запуска теста, даже не дожидаясь его окончания, можно посмотреть отчет о проводимом тестировании.
Сделайте свой интернет-магазин самым продающим!
Любой маркетолог может сам запустить тестирование за 5 минут!
«B» - это то, с чем вы будете экспериментировать (новый дизайн).
Обзор сервисов для A/B тестирования
Пробуем сервисы, которые помогают менять сайт к лучшему
A/B тестирование — маленький эксперимент, который проводится над пользователями сайта. Его суть — проверять гипотезы.
Если вы думаете, что пользователи сайта будут чаще кликать на фото модели в бикини, а не на бизнесмена в очках, это легко подтвердить или опровергнуть. Создайте две странички, на одну поместите бизнесмена, на другую — модель. И ждите. А время покажет, правы вы или нет. Аудитория сайта действием проголосует за тот вариант, который им симпатичнее. И так, проводя A/B тестирования и наблюдая за поведением пользователей, можно постепенно подгонять сайт под их вкусы и хотелки.
Подробнее об A/B тестировании мы писали в . Но чего-то в ней не хватало. Мы её покрутили, повертели, посмотрели на свет. И поняли — нужен обзор инструментов для тестирования! Итак, приступим.
Google Analytics Experiments
Google Anatytics умеет многое, просто скромно об этом умалчивает. Если в нем поковыряться, можно настроить A/B тестирование (или запрограммировать телефоны на Android на самоуничтожение — как повезет). Это удобно, если вы и так пользуетесь Analytics, немного можете в код или у вас есть знакомые разработчики, которые сделают страничку для тестирования.
Плюсы:
Удобно для пользователей, привыкших к Google Anatytics. Есть русский язык. И, главное, сервис бесплатный.
Минусы: Нет визуального редактора. Если элементы, которые вы хотите протестировать, не изменить через админку сайта, а перепрограммировать самостоятельно скила не хватает — придется обращаться к разработчикам.
Цена: Бесплатно.
Сервис прост и понятен. На каждом этапе — подсказки, что делать и зачем. В визуальном редакторе можно изменить текст, картинки и структуру сайта. Все элементарно: изменили сайт в редакторе, добавили код на страницу-оригинал и наблюдаете за результатами. Для сбора статистики сервис интегрируется с Яндекс.Метрикой.
Плюсы: Есть простой визуальный редактор. Поддерживается русский язык. .
Минусы: Визуальный редактор слишком прост. По-хорошему он работает только с текстом и изображениями. А вот со структурой не поиграться: RealROI предлагает элемент либо скрыть, либо удалить. Заменить, подвинуть, поменять форму — ничего этого сделать нельзя.
И у нас есть подозрение, что функция «Отправить код разработчику» не работает. Мы трижды пробовали, а письма все нет. Поэтому отправлять код рекомендуем самостоятельно, старым-добрым Ctrl+C — Ctrl+V.
Цена: Бесплатно.
В этом инструменте уже больше фишек. Визуальный редактор позволяет творить любое безумие: элементы можно менять, двигать, добавлять, удалять. Сервис позволяет запустить тест в заданную дату или приостановить поток трафика на страницу (может пригодиться в эксперименте, где участвует более 2 вариантов). Можно настроить таргетинг и персонализацию.
Плюсы: Удобный визуальный редактор — программисты не нужны, чтобы создавать страницы для тестирования. Сервис интегрируется с Google Analytics, WordPress и другими системами аналитики и CRM.
Минусы: Русский язык вроде бы есть, но чем сильнее углубляешься в сайт, чем сложнее становятся термины — тем его меньше.
Нет триальной версии. Можно потестировать визуальный редактор, но про остальные функции узнаёшь только из описаний.
Цена: 39 $ в месяц, если вам хватит 5 000 протестированных пользователей. Тариф пожирнее — 140 $ в месяц, позволяет протестировать сайт на 40 000 уникальных посетителях. 200 000 протестированных пользователей в месяц стоят 390 $. При оплате сразу за год — скидка на все тарифы.
Сервис, который может устроить A/B для компьютеров и мобильных устройств. В визуальном редакторе VWO можно сразу пометить цель для кликов. Остальные — добавить в следующем шаге.
Сервис предлагает посмотреть карту кликов, добавить всплывающие окна и рассылать пользователям, которые что-либо купили на сайте, призыв оставить отзыв.
А еще у VWO есть галерея идей. Вроде бы мелочь, а приятно. И полезно: владельцу сайта не нужно придумывать самому, что бы такого потестировать. Он может выбрать из вариантов, которые подготовили профессионалы. Идеи можно фильтровать по отрасли, сложности и затраченному времени. Очень круто.
Плюсы: Много функций, и везде — подсказки и инструкции. Понятный визуальный редактор заставляет программистов нервно курить в сторонке. Есть триальная версия на 30 дней. VWO интегрируется с Google Analytics, WordPress и еще 12 сервисами.
Минусы: Нет русского языка. И поэтому подсказки могут не помогать, а бесить.
Цена: Если на сайте ежемесячно менее 10 000 посетителей, стоимость сервиса — 59 $ в месяц. До 30 000 посетителей — 155 $, до 100 000 людей на сайте — 299 $, и так по нарастающей. Традиционно, при оплате за год — скидка.
Предлагает A/B, мультивариантное и сплит-тестирование, персонализацию. Цель для кликов можно пометить в визуальном редакторе.
Функций меньше, чем у некоторых конкурентов из обзора, зато у Convert (осторожно, сейчас будет очень субъективное мнение) самый удобный визуальный редактор в плане выделения и перетаскивания объектов. У других сервисов рамки объекта дрожат, как будто пользователь на них с топором набрасывается, а не аккуратно трогает мышкой.
Поймать рамку, изменить размер объекта и передвинуть его в редакторе A/B Tasty — испытание не для слабонервных. А в Convert все проходит гладко, приятно. Единственное — чтобы отредактировать текст, придется запустить руки в CSS-код.
Плюсы:
Удобный визуальный редактор, интеграция с 35 сервисами аналитики и CRM, бесплатный триальный период — 15 дней. Можно настраивать тесты под мобильные устройства.
Минусы: Нет русского языка. Визуальный редактор приятный, но в нем придется копаться и разбираться.
Цена: Тариф Lite (легкий, ага) — 499 $ в месяц за 400 000 посетителей, без техподдержки. Хотите, чтобы сотрудники сервиса вам помогали? Доплачивайте ещё 200 $. Чем больше посетителей, тем выше цена. Если оплатить сервис на год вперед — будет скидка.
