Вопросы и проблемы

Можно ли проводить эксперименты с JS‑скриптами?

Да, в визуальном редакторе. Для этого включите в setConfig параметр enableJS.

В эксперименте с редиректом тест сильно отличается от контроля

В Varioqub сначала загружается страница из контроля, после этого к ней применяются экспериментальные изменения. Если изменение — редирект, то происходит быстрая смена страниц. Это может влиять на поведение пользователей.

Можно скрыть отображение исходной страницы до применения редиректа. Однако это может замедлить загрузку страницы, что также повлияет на поведение пользователей.

Желательно применить другое решение: добавить редирект в контрольный вариант. Создайте копию исходной страницы и укажите ссылку на нее в контрольном варианте.

Данные в эксперименте и в отчете Метрики разные

Отчеты в Метрике и в экспериментах строятся по‑разному.

Частые причины расхождений:

  • В URL есть GET‑параметры.

  • Часть визитов не попадает ни в одну из выборок из‑за условий эксперимента.

При попадании в эксперимент пользователь идентифицируется по first-party cookie — __ymab_param. Однако, отчеты Метрики используют для идентификации более сложные методы.

Если вы удалите cookie‑файлы, то можете попасть в другую выборку. Но Метрика будет считать вас тем же самым пользователем.

А если нужных условий нет в интерфейсе Varioqub?

Используйте пользовательские параметры. Они доступны в расширенной версии.

При создании эксперимента все поля заблокированы

Проверьте ваши права доступа к текущему счетчику Метрики.

Чтобы создавать, запускать и останавливать эксперименты, нужен доступ на редактирование.

Визуальный редактор не работает

Тип эксперимента может не работать на некоторых сайтах.

Это происходит, если сервер устанавливает заголовок Cross-Origin-Opener-Policy со значением same-origin. Такая настройка запрещает обмен данными между интерфейсом Метрики и сайтом.

В настоящее время это техническое ограничение не имеет обходного решения.

Экспериментальные изменения появляются на странице не сразу

В Varioqub сначала загружается страница из контроля, после этого к ней применяются экспериментальные изменения. Из‑за этого вы можете видеть, как одна версия страницы быстро сменяет другую.

Чтобы экспериментальный вариант загружался сразу, скройте отображение контроля до начала эксперимента.

Как отключить тип эксперимента на всем сайте или странице?

В setConfig для нужных параметров установите значение false.

Элемент загружается после страницы. Как включить его в эксперимент?

Включите в setConfig параметр enableWatch.

enableWatch включает режим слежения за изменениями страницы.

На моем сайте меняются ID элементов. Получится ли использовать визуальный редактор?

  1. В визуальном редакторе в окне выбора режима редактирования нажмите .

  2. Отключите опцию ID элемента в селекторе и нажмите Сохранить.

Можно ли сделать редирект на другой домен?

Мы не предоставляем такой функциональности в типе эксперимента Ссылки для редиректа из-за соображений безопасности. Для перехода между доменами используйте флаги в коде. Подробнее см. на GitHub.

Статистика по монетизации в Метрике и в партнерском интерфейсе разная

Значения могут отличаться из-за разной постобработки данных.

Чтобы принять решение по эксперименту, мы сравниваем тест и контроль в Метрике. Постобработка влияет на них одинаково.

В AA эксперименте тест отличается от контроля

При AA тестировании такая ситуация допустима, ее вероятность равна уровню значимости alpha = 0.05. Это значит, что один из 20 экспериментов может показать статистически значимые отличия.

Если ваши AA эксперименты показывают статистически значимые отличия чаще, проверьте корректность подключения эксперимента. Если это не помогло, обратитесь в Службу поддержки.

Расхождение аудитории в эксперименте с редиректом

Если вы наблюдаете несоответствие аудитории в экспериментах с редиректом, убедитесь, что код Varioqub корректно установлен на каждой странице, которая участвует в эксперименте, включая те, на которые происходит редирект.