Расчет метрик методом Байеса

При расчете конверсии по пользователям в цель Varioqub использует метод Байеса. Метод Байеса помогает рассчитывать вероятность того, что конверсия по пользователям в цель для тестовой группы выше, чем конверсия по пользователям в ту же цель для контрольной группы.

Вероятность вычисляется по формуле:

P(λT>λC​ ​)=sumi=0αT1exp(logBeta(αC+i,βC+βT)log(βT+i)logBeta(1+i,βT)logBeta(αC,βC))P(\lambda_T > \lambda_C​ ​) = sum_{i=0}^{\alpha_T - 1} \exp(logBeta(\alpha_C + i,\beta_C + \beta_T) - \log(\beta_T + i) - logBeta(1 + i, \beta_T) - logBeta(\alpha_C, \beta_C) )
где logBeta(x,y)=logGamma(x)+logGamma(y)logGamma(x+y)logBeta(x,y) = logGamma(x) + logGamma(y) - logGamma(x+y).

Вероятность отображается в отчете о результатах эксперимента — Вероятность тест > контроль. Если по расчетам тестовый вариант лучше контрольного, он подсвечивается зеленым, если хуже — красным.

Написать в службу поддержки