#Googleplay Вопрос по АВ тестам 1 - подходит ли рассчет выборки от

Question

#Googleplay Вопрос по АВ тестам 1 - подходит ли рассчет выборки от

калькулятора evanmiller если у меня не АВтест, а АВС тест (те два новых варианта против одного текущего)?
2 - Есть калькулятор расчета необходимой выборки. Например, нужно набрать мин 1500 установок на каждый вариант. А что будет, если держать тест и дальше? и например, набрать в полтора или два раза больше необходимого кол-ва установок. Будет ли держаться победитель или данные могут измениться

0

22.07.2023

3 ответов

13 просмотров

Nataliia Автор вопроса

Altai Zeinalov
Ты про этот расчёт? https://mindbox.ru/tools/ab-te...

спасибо! я поняла логику я имела в виду этот калькулятор https://www.evanmiller.org/ab-testing/sample-size.html но в нем нет возможности настроить просчет на три варианта

0

23.07.2023

Combot

Nataliia
спасибо! я поняла логику я имела в виду этот кальк...

Nataliia (4) увеличил репутацию Altai Zeinalov (688)

0

23.07.2023

Altai Zeinalov · Accepted Answer

Ты про этот расчёт? https://mindbox.ru/tools/ab-test-calculator/ Разницы нет сколько вариантов - там просто математика. Чем больше вариантов, тем больше данных тебе нужно. Чем сильнее хочешь быть уверенным в результатах, тем больше нужно данных. Я ни раз замечал, что когда какой-то вариант выходит вперёд при доверительном интервале в 95%, то это ещё ничего не значит, потом может всё резко поменяться. Прирост должен быть ощутимым, чтобы делать выводы при 95%. Тут ещё надо здравый смысл включать. Например, тестируя иконку звука нельзя делать вывод, что в новом варианте с иконкой платежей стало больше на 10% - ибо тут просто мало данных, и поэтому такая разница.

Похожие чаты

#Googleplay Вопрос по АВ тестам 1 - подходит ли рассчет выборки от

3 ответов

Похожие вопросы