Applying Chi-squared to A/B Testing

方案一：全部访问：100；点击量：25；不点击量：75

方案二：全部访问：120；点击量：20；不点击：100；

方案1平均点击量为：（25+20)/220*100=20.5;平均不点击量为：（75+100)/220*100=79.5

方案2平均点击量：（25+20)/220 *120=  24.5;不点击量为：（175)/220*120=95.5;

（20-24.5）²/24.5=0.83;

(25-24.5)²/24.5=0.99;

(100-95.5)²/95.5=0.21;

(75-79.5)²/79.5=0.75;相加得出：2.278；
自由度：为你的选择减去1，比如对于硬币，存在两面，自由度为1：如果你有一个6面的色子，自由度就是5；
因此这个案例中，点击和不点击两种选择：自由度为1；

对照表格得出：P值在0.25和0.1之间；所以这个点击率存在可能发生；