Как правильно провести тестирование

Как правильно провести тестирование

Теперь вы видите, насколько полезными могут быть тесты. Положим, вы решили применить свои знания на практике, но не до конца в себе уверены. Например, как вы докажете остальным, что результаты тестирования являются верными? При проведении любых тестов обязательно учитывайте такие факторы, как сезон и даже время суток. Лучше запускать проверку двух версий одновременно и отслеживать результаты на протяжении двух недель. Убедитесь, что размер выбранной контрольной группы достаточно большой, а разница между результатами является статистически значимой.

Майк Сэк, исполнительный директор и главный инженер компании Inceptor, дает несколько советов по проведению А/В-тестирования:

В первую очередь решите, в каких пропорциях будете делить своих посетителей на группы: 50/50, 90/10 или 80/20. Вы можете сформировать группы по какому-либо признаку, например по времени суток или даже по поисковой системе, из которой пришли посетители (пользователи Google увидят вариант А, а пользователи Yahoo! – вариант В). Во-вторых, определите стабильность теста. Другими словами, если посетитель ушел с сайта и зашел на него вновь, увидит ли он тот же самый вариант, что и раньше? Вы можете сохранять версию тестовой страницы в течение одной сессии или устанавливать для посетителя соответствующий вариант страницы с помощью cookies. Желательно, чтобы тестируемая страница не менялась хотя бы в течение сессии, хотя cookies, конечно, дают больше возможностей, поскольку позволяют отследить покупку, совершенную через какое-то время.

Данный текст является ознакомительным фрагментом.