有個(gè)小伙伴在微信上問(wèn)我這個(gè)問(wèn)題，說(shuō)他在面試中被問(wèn)到如何評(píng)判產(chǎn)品改版后的效果這個(gè)問(wèn)題，問(wèn)我該如何回答，今天就來(lái)給大家拆解這道題。
題目分析
這道題主要考察求職者的數(shù)據(jù)分析能力，那些對(duì)數(shù)據(jù)不關(guān)注，只埋頭畫原型的小伙伴可能回答不好這個(gè)問(wèn)題。
參考答案
產(chǎn)品的改版效果可從以下6個(gè)方面進(jìn)行評(píng)估：
1、新功能有多少人使用？
一個(gè)產(chǎn)品功能上線后，越多人使用，越說(shuō)明這個(gè)產(chǎn)品是成功的。當(dāng)然，剛需+壟斷的產(chǎn)品除外。
衡量指標(biāo)：活躍用戶比=（某段時(shí)間）活躍用戶中使用過(guò)新功能用戶數(shù)/(同一段時(shí)間）活躍用戶總量
比例越高，代表功能越受歡迎，但使用人數(shù)的多少還會(huì)受到功能本身之外的很多因素影響，一定要結(jié)合下面說(shuō)的其他指標(biāo)進(jìn)行綜合評(píng)估，千萬(wàn)不能僅僅憑借這一指標(biāo)來(lái)判斷功能的好壞。
如果新功能沒(méi)有滿足用戶需求或者說(shuō)體驗(yàn)比較糟糕，那往往用戶使用過(guò)一次之后，便不會(huì)使用第二次。相反，如果功能既能滿足用戶需求，用戶體驗(yàn)又很棒，則會(huì)經(jīng)常受到用戶的光顧。衡量指標(biāo)：功能的重復(fù)使用用戶比例（這個(gè)指標(biāo)和產(chǎn)品的次日留存率、7日留存率以及月留存率有點(diǎn)像，只不過(guò)把產(chǎn)品的次日留存率、7日留存率以及月留存率變成了功能的次日留存率、7日留存率以及月留存率）。一般來(lái)說(shuō)，留存率越高，代表產(chǎn)品功能越受用戶歡迎。3、新功能對(duì)所處的使用流程是否起到優(yōu)化作用如果新上線的功能處于某個(gè)用戶使用流程中（比如下單流程，分享流程、登錄/注冊(cè)流程等），那么你可以評(píng)估一下該流程是否對(duì)使用流程起到優(yōu)化作用。衡量指標(biāo)：對(duì)比改版前后用戶流程的轉(zhuǎn)化率和完成率。比如下單流程為：搜索商品》選擇商品屬性》點(diǎn)擊購(gòu)買》輸入密碼》支付成功改版前的輸入密碼，如果輸入錯(cuò)了，沒(méi)有提示用戶重置密碼或者再試一次，即使提示了，當(dāng)用戶修改密碼完成以后，沒(méi)有引導(dǎo)用戶跳回之前下單頁(yè)面，結(jié)果導(dǎo)致轉(zhuǎn)化率降低，而改版后，在提示用戶修改密碼之后，引導(dǎo)用戶返回之前下單頁(yè)面，從而使得整個(gè)流程的轉(zhuǎn)化率和完成率得到提高，那你的這個(gè)功能設(shè)計(jì)就是有用的。4、產(chǎn)品的改版對(duì)用戶的留存產(chǎn)生了哪些影響？一般來(lái)說(shuō)，如果你的產(chǎn)品改版比較成功，或者新增了一項(xiàng)優(yōu)秀的功能，用戶肯定對(duì)你產(chǎn)品的粘性更高，從而更加頻繁的使用你的產(chǎn)品，在數(shù)據(jù)表現(xiàn)上，就是你的留存率變得更高。當(dāng)然，如果一個(gè)產(chǎn)品改版增加了多個(gè)功能，就沒(méi)辦法用這個(gè)單一的指標(biāo)進(jìn)行評(píng)判，還要結(jié)合我們上面說(shuō)到的其他評(píng)判指標(biāo)。衡量數(shù)據(jù)指標(biāo)：留存率（包含次日留存率：用戶第一次使用產(chǎn)品后，第二天接著使用的人數(shù)比例；7日留存率：用戶第一次使用產(chǎn)品后，第7天接著使用的人數(shù)比例；月留存率：用戶第一次使用產(chǎn)品后，第30天接著使用的人數(shù)比例）當(dāng)然，這個(gè)留存率要以改版后的新增用戶留存率和改版前的新增用戶留存率做對(duì)比，這樣的比較才有意義。新功能上線了，用戶是怎么使用的？他們的使用方法是否與你預(yù)期一致？用戶在使用這個(gè)功能前后，分別做了什么?(場(chǎng)景還原)衡量指標(biāo)：用戶行為記錄（通過(guò)洞察單個(gè)用戶的行為記錄，詳細(xì)了解用戶的具體用法以及場(chǎng)景）用戶行為數(shù)據(jù)，為我們提供了一種低成本的，便捷的觀察用戶行為的手段，雖然不能完全代替產(chǎn)品經(jīng)理對(duì)用戶在真實(shí)場(chǎng)景中的觀察和研究（現(xiàn)場(chǎng)可能有一些表情、肢體動(dòng)作等，這些是數(shù)據(jù)所傳達(dá)不出來(lái)的），但配合使用，也可以極大的提升整體的效率和準(zhǔn)確率。6、收集新版本發(fā)布后的crash（崩潰）以及報(bào)錯(cuò)的一些數(shù)據(jù)雖然有的時(shí)候整體數(shù)據(jù)上表現(xiàn)不出來(lái)明顯的錯(cuò)誤，但是一些小眾機(jī)型發(fā)生錯(cuò)誤的話，這個(gè)用戶就很可能流失，所以說(shuō)我們還需要去關(guān)注這些數(shù)據(jù)，如果發(fā)現(xiàn)一些重大錯(cuò)誤，需要發(fā)布緊急版本去修復(fù)。對(duì)于版本迭代的效果最好用新用戶去衡量，對(duì)于已經(jīng)升級(jí)的老用戶來(lái)說(shuō)，他本身就是忠誠(chéng)用戶，他的使用率和忠誠(chéng)度都要優(yōu)于新用戶，如果用老用戶衡量就很難去除老用戶本身比較優(yōu)質(zhì)帶來(lái)的偏差。這套方法，已經(jīng)被與諸葛IO合作的多個(gè)產(chǎn)品團(tuán)隊(duì)驗(yàn)證，被證明是一套可行的、高效的方法，大家可借鑒一下。最后，關(guān)于這道題，你覺(jué)得該如何回答呢？可在評(píng)論區(qū)說(shuō)出你的看法。參考內(nèi)容：《產(chǎn)品經(jīng)理數(shù)據(jù)分析實(shí)戰(zhàn)手冊(cè)》也歡迎有問(wèn)題的小伙伴加微信：yw5201a1 溝通交流。此外我們的官方網(wǎng)站也上線了，每日分享高質(zhì)量的文章、原型素材和行業(yè)報(bào)告，小伙伴可自行前往索取，支持搜索，需要的小伙伴可點(diǎn)擊底部的閱讀原文直接查看，或者復(fù)制網(wǎng)址：www.dadaghp.com 打開(kāi)。更多干貨可關(guān)注微信公眾號(hào)：產(chǎn)品劉想學(xué)習(xí)更多關(guān)于產(chǎn)品、職場(chǎng)、心理、認(rèn)知等干貨，可長(zhǎng)按右邊二維碼，關(guān)注我們。··················END··················
