Эксперименты

Что такое ID?

• ID является атрибутом HTML-элемента, который обеспечивает уникальную идентификацию элемента среди всех элементов в веб-документе.

Что такое Цель?

• Цель это HTML элемент (ID, XPath, селектор), который определяет действие цели (клик, редактирование текста, тип события HTML и т.д.); это действие используется в качестве показателей конверсии вашей страницы  (это то, что мы будем отслеживать и какие данные собирать); также, используется для статистики, показывая лучшую версию вашей веб-страницы.

Что такое Пиксель отслеживания конверсий?

• Пиксель отслеживания конверсий это тип целей для A/B/N и многовариантного тестирования, что устанавливается в случае, если вам надо отслеживать конверсию на сайтах третьих сторон. Например, для завершения покупки, клиент перенаправляется на X ресурс и должен предоставить необходимую информацию. Таким образом, только после того, как этот шаг завершен, покупка считается успешной, и конверсией будет перенаправление на сайт X третей стороны. Таким образом, чтобы отслеживать такой тип конверсии, вы можете вставить пиксельный код, сгенерированный Maxymyzely и пометить веб-сайт третьей стороны этим пикселем.

Могу ли я возобновить удаленный эксперимент?

• Если вы ошибочно удалили эксперимент, вы можете сразу его восстановить, если вы не ушли со страницы. Помните, что только пользователи с правами админа могут удалять эксперименты.

Зачем мне нужны цели?

• Вы устанавливаете цели для мониторинга ключевых показателей на вашем сайте (например, кнопку Купить, нажав на баннер, и т.д.).

Что такое Контентный блок?

• Контентный блок это HTML элемент или группа HTML элементов (ID, XPath, селектор), который имеет свои варианты (с небольшими изменениями) для конкретного контента.

Что такое Вариация?

• Вариация это число порожденных альтернативных вариаций тестовой веб-страницы. Вариации помогают определить, какие страницы приносят наибольшее количество переходов из конечных пользователей.

Что такое Шанс победить всех?

• Шанс победить всех — это расчет шансов страницы, которая, скорее всего, выиграет в текущем многовариантном тестировании. (с англ. Chance to Beat All)

Что лучше A/B/N тестирование или многовариантное тестирование? 

• A/B/N тестирование — это индивидуальный случай многовариантного тестирования. Если у вас есть более 2-х страниц версий для сравнения, используется многовариантное тестирование.

Что такое коэффициент конверсии (КК)?

• Это процент посетителей, которые делают желаемое действие. Чтобы быть точным, то это доля принимаемых целевых действий (желаемых действий) (A_A) на веб-сайте для всех генераций ваших вариантов страницы (G_A):

Пример: Скажем, у нас есть A/B/N эксперимент с такими компонентами:
Вариация A, Вариация B и целевые действия A_{A и} A_B; таким образом КК — это доля соответствующих показателей:

Что такое ошибка? 

• Ошибка (Sigma) это отклонение от точности или правильности в вашем расчете коэффициента конверсии.

Почему случаются ошибки? Могу ли я их избежать?

• Нет, вы не можете, но вы можете уменьшить ошибки путем закачивания большего количества трафика на ваш сайт/приложение; на простом языке это означает чем больше трафика, выделенного для данного эксперимента, тем больше посетителей делает целевые действия. Больше целевых действий — более точные результаты, которые мы получаем.

• Вы должны продолжать тестирование достаточно долго, вплоть до момента когда Шанс Победить Всех=95% и выше. В противном случае вы получите не достаточно ясную картину.