一、分析、理解問題

主要問題：由于產(chǎn)品更新迭代，需要測(cè)試頁面的模塊設(shè)計(jì)問題，哪個(gè)模塊的形狀會(huì)更吸引人

所以我們希望通過一個(gè)實(shí)驗(yàn)可以對(duì)比兩個(gè)同時(shí)發(fā)生的組，一個(gè)組的用戶可以看到新內(nèi)容，而另一個(gè)組看不到新內(nèi)容。這樣就可以排除其他變量而只關(guān)注是否新內(nèi)容可以促進(jìn)該模塊的點(diǎn)擊量。這個(gè)實(shí)驗(yàn)就是A/B測(cè)試

?

?

?

二、實(shí)驗(yàn)設(shè)計(jì)

2.1 確定實(shí)驗(yàn)組與對(duì)照組

由于A/B測(cè)試只能改變一個(gè)變量并且在同一個(gè)時(shí)間段發(fā)送，投放在相同的人群中

所以我們只需要把流量分成2組

對(duì)照組：用戶看到的是舊模塊

實(shí)驗(yàn)組：用戶看到的是新模塊

?

2.2 確定分析指標(biāo)

改變模塊的形狀主要是吸引用戶進(jìn)入點(diǎn)擊，所以我們關(guān)心的該模塊的點(diǎn)擊率，所以我們這一次選擇的是轉(zhuǎn)化率

?

2.3 形成假設(shè)

A/B測(cè)試的基本思想是小概率反證法思想。小概率思想是指小概率事件（P<0.01或P<0.05）在一次試驗(yàn)中基本上不會(huì)發(fā)生。反證法思想是先提出假設(shè)(零假設(shè))，再用適當(dāng)?shù)慕y(tǒng)計(jì)方法確定假設(shè)成立的可能性大小，如可能性小,則認(rèn)為假設(shè)不成立，若可能性大，則還不能認(rèn)為假設(shè)不成立。

接下來我們要針對(duì)問題提出假設(shè)，包括零假設(shè)和對(duì)立假設(shè)

零假設(shè)：舊模塊的轉(zhuǎn)化率>新模塊的轉(zhuǎn)化率

對(duì)立假設(shè)：舊模塊的轉(zhuǎn)化率<新模塊的轉(zhuǎn)化率

?

?

2.4 確定需要收集的數(shù)據(jù)

用戶ID，登陸時(shí)間，組別，展示頁面，是否點(diǎn)擊

我們需要排除同一用戶的重復(fù)點(diǎn)擊行為去除刷點(diǎn)擊率對(duì)實(shí)驗(yàn)的影響，所以只把用戶ID第一次瀏覽記錄作為實(shí)驗(yàn)數(shù)據(jù)

?

?

2.5 流量分配設(shè)計(jì)

?

我們投入實(shí)驗(yàn)組和對(duì)照組的測(cè)試數(shù)量是一致的（1:1）

?

?

2.6?部署數(shù)據(jù)收集并確保實(shí)驗(yàn)功能和數(shù)據(jù)錄入正常運(yùn)行

實(shí)驗(yàn)設(shè)計(jì)的最后一步是部署數(shù)據(jù)收集并測(cè)試每個(gè)環(huán)節(jié)運(yùn)行正常，以確保實(shí)驗(yàn)可以收集到正確的數(shù)據(jù)

?

三、實(shí)驗(yàn)分析

3.1分析總結(jié)與建議

由于拒絕原假設(shè)，所以拒絕舊模塊的轉(zhuǎn)化率>新模塊的轉(zhuǎn)化率,但是轉(zhuǎn)化率比之前高不了多少，建議修改模塊的其他屬性

?

?

?

?

總結(jié)

以上是生活随笔為你收集整理的数据分析A/BTest之APP页面的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。