停止無(wú)效實(shí)驗(yàn),產(chǎn)出高質(zhì)量實(shí)驗(yàn)假設(shè)(下)
市面上大多數(shù)關(guān)于增長(zhǎng)實(shí)驗(yàn)的建議都聚焦于如何執(zhí)行。但是,真正的秘訣不在于執(zhí)行,而在于如何識(shí)別并停止那些注定無(wú)效的實(shí)驗(yàn)。
01 通過(guò)多輪數(shù)據(jù)分析提升假設(shè)質(zhì)量
當(dāng)你完成了三類數(shù)據(jù)(定量分析、定量分析、參考最佳實(shí)踐)的收集和分析后,如果仍然沒(méi)有形成清晰的實(shí)驗(yàn)假設(shè),或者假設(shè)過(guò)多,可以通過(guò)多輪數(shù)據(jù)分析來(lái)提升假設(shè)質(zhì)量。
接下來(lái)我們以“社交APP小恩愛(ài)注冊(cè)轉(zhuǎn)化率優(yōu)化”作為案例,詳解去粗留精的優(yōu)化過(guò)程。
1. 分析數(shù)據(jù)發(fā)現(xiàn)問(wèn)題,形成初步假設(shè)
首先第一步通過(guò)漏斗數(shù)據(jù)分析發(fā)現(xiàn),小恩愛(ài)APP的注冊(cè)流程,第三步資料填寫頁(yè)的轉(zhuǎn)化率非常低。
據(jù)此產(chǎn)品運(yùn)營(yíng)同學(xué)形成了一些初步的假設(shè),比如說(shuō)是不是資料轉(zhuǎn)化頁(yè)上添加頭像的字體不明顯,或者我要的信息太多了,或者用戶找不到照片上傳,或者上傳照片太慢等等,很多個(gè)初步假設(shè)。
接下來(lái)就要去通過(guò)進(jìn)一步數(shù)據(jù)分析的方式去篩選這些假設(shè)。
2.細(xì)查流失用戶路徑,篩選優(yōu)化假設(shè)
第二個(gè)動(dòng)作是細(xì)查流失用戶的操作路徑。這個(gè)時(shí)候就發(fā)現(xiàn)了很有意思的現(xiàn)象,在所有流失的用戶里面,有兩個(gè)路徑是最常見(jiàn)的:
- 第一,用戶在這個(gè)整個(gè)過(guò)程中沒(méi)有找到合適的頭像,數(shù)據(jù)顯示點(diǎn)擊了添加頭像,然后等了一會(huì)兒,但最后也沒(méi)有上傳,就走掉了。
- 第二,用戶點(diǎn)了添加頭像,并且上傳了照片,但是怎么都傳不上來(lái)
這兩種路徑是比較普遍的路徑。
據(jù)此,他們進(jìn)一步篩選出兩個(gè)假設(shè):
- 優(yōu)化注冊(cè)頁(yè)面邏輯,頭像上傳改為非必須
- 優(yōu)化上傳服務(wù),提升上傳速度
最終,經(jīng)過(guò)實(shí)驗(yàn)驗(yàn)證,這兩個(gè)改動(dòng)使注冊(cè)轉(zhuǎn)化率提升了20%。從這個(gè)案例可以看出,多輪數(shù)據(jù)分析能夠幫助產(chǎn)出高質(zhì)量的實(shí)驗(yàn)假設(shè)。只要以數(shù)據(jù)分析去尋根問(wèn)底,驗(yàn)證假設(shè)就能點(diǎn)石成金。
02 產(chǎn)生高質(zhì)量實(shí)驗(yàn)想法的兩種方法
1. 應(yīng)用三類數(shù)據(jù)
(1)定量數(shù)據(jù):通過(guò)定量數(shù)據(jù)分析,可以發(fā)現(xiàn)具體問(wèn)題所在。
(2)定性數(shù)據(jù):運(yùn)用定性數(shù)據(jù)和用戶調(diào)研,可以深入理解問(wèn)題發(fā)生的原因。
(3)參考最佳實(shí)踐:參考業(yè)內(nèi)最佳實(shí)踐,可以獲得問(wèn)題的解決思路。當(dāng)然最佳實(shí)踐也不是需要盲目的去遵從,還是通過(guò)自己的測(cè)試和實(shí)驗(yàn)得到最終的結(jié)論。
上一篇文章有詳細(xì)說(shuō)明,本文就不贅述了。
2.通過(guò)多輪數(shù)據(jù)分析提升假設(shè)質(zhì)量
如果一輪數(shù)據(jù)分析沒(méi)能找到高質(zhì)量假設(shè),或假設(shè)過(guò)多,可以通過(guò)多輪分析提升假設(shè)質(zhì)量。
因?yàn)槲覀冎篱_(kāi)發(fā)一個(gè)實(shí)驗(yàn)是非常成本高昂的,如果能通過(guò)數(shù)據(jù)分析的方式排除掉那些不靠譜的實(shí)驗(yàn),相當(dāng)于間接的就節(jié)省了實(shí)驗(yàn)開(kāi)發(fā)的成本,瞄準(zhǔn)高質(zhì)量假設(shè),顯著提高增長(zhǎng)實(shí)驗(yàn)的整體效率。
三、形成清晰的實(shí)驗(yàn)假設(shè)
在產(chǎn)生大量想法后,需要將它們整理成清晰的實(shí)驗(yàn)假設(shè)。清晰假設(shè)應(yīng)具備以下特征:
1. 清晰實(shí)驗(yàn)假設(shè)的特征
(1)明確可衡量
(2)有時(shí)間限制
(3)可被證偽
(4)可解釋背后原因
什么是清晰的實(shí)驗(yàn)假設(shè)?
舉例:
- “寫公眾號(hào)可以帶來(lái)新用戶注冊(cè)”——這是個(gè)清晰的假設(shè)嗎?顯然不是,它只是非常虛的一句話。
- “寫公眾號(hào)可以帶來(lái) 100 個(gè)新用戶注冊(cè)”——這個(gè)會(huì)比上面一個(gè)強(qiáng)一點(diǎn),因?yàn)樗袛?shù)字去支持,但是它還是不是特別清晰,因?yàn)榍逦膶?shí)驗(yàn)假設(shè)必須有時(shí)間限制,寫公眾號(hào)如果等一年可能可以帶來(lái) 100 個(gè)新用戶注冊(cè),這件事就沒(méi)有什么意義了。
- “寫一篇公眾號(hào)可以在發(fā)表兩周內(nèi)帶來(lái) 100 個(gè)信用戶注冊(cè)”——這個(gè)就已經(jīng)清晰很多了,有非常明確的可以去衡量的結(jié)果。
- “寫一篇關(guān)于產(chǎn)品的公眾號(hào)長(zhǎng)文,可以在發(fā)表兩周內(nèi)帶來(lái) 100 個(gè)新用戶注冊(cè),因?yàn)檫@篇公號(hào)會(huì)給大家清晰的介紹產(chǎn)品的價(jià)值主張?!?/b>——這就是一個(gè)非常清晰的實(shí)驗(yàn)假設(shè),它有非常明確的指標(biāo),也時(shí)間的限制,同時(shí)解釋了背后的原因,且是可以被證偽的,也就是可以根據(jù)實(shí)際的結(jié)果去推翻它。
其實(shí),沒(méi)有清晰的假設(shè)就直接開(kāi)干是很多實(shí)驗(yàn)失敗的最常見(jiàn)的原因。
2.實(shí)驗(yàn)假設(shè)輸出模板
以上一篇文章中提到的海報(bào)設(shè)計(jì)應(yīng)用canva優(yōu)化實(shí)驗(yàn)為例,輸出假設(shè)建議采用以下模板:
(1)做什么具體改動(dòng):可以設(shè)計(jì)個(gè)人化的海報(bào)新用戶引導(dǎo)流程
(2)預(yù)計(jì)某指標(biāo)提升百分比:預(yù)計(jì)海報(bào)功能新用戶激活率可以提升10%
(3)深層原因是什么:當(dāng)人們通過(guò)海報(bào)功能找到canva,他們想要很快的完成設(shè)計(jì),如果沒(méi)有找到合適的模板,就很容易流失掉
(4)有數(shù)據(jù)支持的假設(shè):使用海報(bào)功能是最多的,但是很多用戶開(kāi)始使用海報(bào)功能之后沒(méi)有完成就流失掉了
這一模板能幫助清晰記錄假設(shè)內(nèi)容、預(yù)期效果、原因解釋和支持證據(jù)。
04 應(yīng)對(duì)產(chǎn)生實(shí)驗(yàn)想法時(shí)的兩種情況
在產(chǎn)生實(shí)驗(yàn)想法時(shí),可能遇到兩種極端情況,需要采取不同應(yīng)對(duì)策略。
1.沒(méi)有想法時(shí),通過(guò)群組討論快速產(chǎn)生想法
面對(duì)實(shí)驗(yàn)?zāi)繕?biāo)沒(méi)有任何想法時(shí),可采用以下方式快速集思廣益:
(1)頭腦風(fēng)暴:通過(guò)群組討論的方式,所有人各抒己見(jiàn),集中提想法且不做評(píng)判和回答,只做記錄,事后再評(píng)估篩選想法。
(2)閃電Demo:每個(gè)人快速的拿幾個(gè)競(jìng)品和非競(jìng)品來(lái)給整個(gè)團(tuán)隊(duì)進(jìn)行Demo演示,并共同從中找到可借鑒的點(diǎn)子。
(3)設(shè)計(jì)沖刺:帶領(lǐng)團(tuán)隊(duì)在5天內(nèi)高效的解決設(shè)計(jì)問(wèn)題,并且測(cè)試想法是否奏效。
2.想法過(guò)多時(shí),通過(guò)實(shí)驗(yàn)想法庫(kù)管理
群組討論后若想法過(guò)多,可建立實(shí)驗(yàn)想法庫(kù)進(jìn)行管理:將每個(gè)人的假設(shè)和想法集中記錄在同一個(gè)表格中,excel想法庫(kù)也可以為后續(xù)尋找實(shí)驗(yàn)靈感提供豐富素材。
最后總結(jié)一下,精準(zhǔn)的數(shù)據(jù)分析、清晰的假設(shè)構(gòu)建、有效的假設(shè)驗(yàn)證——這三個(gè)步驟是落地高質(zhì)量實(shí)驗(yàn)假設(shè)的關(guān)鍵。相信你掌握了這一流程后,增長(zhǎng)實(shí)驗(yàn)的貢獻(xiàn)效率將大大提升。
本文由 @小黑哥 原創(chuàng)發(fā)布于人人都是產(chǎn)品經(jīng)理,未經(jīng)許可,禁止轉(zhuǎn)載
題圖來(lái)自 Unsplash,基于 CC0 協(xié)議
該文觀點(diǎn)僅代表作者本人,人人都是產(chǎn)品經(jīng)理平臺(tái)僅提供信息存儲(chǔ)空間服務(wù)。
- 目前還沒(méi)評(píng)論,等你發(fā)揮!