特邀作者： Mr. PM (曾友志)
Mr. PM 是一位資深的產品與增長顧問,擁有豐富的產品企劃、產品增長、數據分析以及建構數據驅動的敏捷產品團隊等方面的專業經驗。 >”>個人專欄>>
上一篇 【Mr. PM X 思想科技】活用 Amplitude Compass 功能，定義產品 Activation 指標 ~ Part 2 有提到，用戶有很多行為，都和留存有正相關，通常的做法就是「天數」+「行為」＋「次數」三個變數來組成指標，你可以列出一堆可能的指標所以會衍生出很多可能是 Activation 指標，例如：
「聽1首歌，在註冊當天」
「聽1首歌，在註冊七天內」
「在七天內，參加一個音樂社團」
「在七天內，建立一個音樂播放清單」
「在七天內，將自己個歌單分享給自己朋友」…
這些指標，到底哪一個是最有詮釋力的指標？我們需要手動一個一個計算嗎？有沒有更有效率的方法呢？
超好用的 Amplitude Compass 功能
幸好的是，Amplitude Compass 已經幫我們把這個繁瑣的計算過程，直接做好，有多方便呢？我們可以看一下面這個示意圖
介面非常簡單，三個步驟
- For Users in the following cohort 你選 New User
- How does performing 你選 Any event
- 最後在 Predict they will be in the following cohort 你可以選 2nd week retetnion，或是你要選 4th week retention 也可以。
這樣三個步驟，就可以讓 Amplitude 幫你計算過所有和 Retention 有關的指標。
這邊不得不說一下 Amplitude 的介面設計真的很好懂，介面就說得很明白，就是在找兩個圈圈的重合程度。操作的第一步驟和第二步驟的的意思就是把所有 event 都跑過一次，畫出黃色圈圈或藍色區圈，第三步驟是在選 Retained user 的定義，也就是畫出灰色圈圈，看你要 2nd week retention 或是 4th week retention 都可以。
解讀 Amplitude Compass 的數據
Amplitude Compass 跑下去，會產出許多數據，以下圖為例，這些都是相關係數，一般來說，大於 0.2 就算正相關，若大於 0.4 就可稱為高度正相關。
要注意一下，相關係數不是越大越好，反而是刪去法，一開始先刪去低於 0.4 的，然後再刪除那些在邏輯上不通、沒有因果關係的，以下圖為例 End Session 和 Start Session 就會被刪除，因為這些事件和 A-ha moment 在邏輯上並無因果關係。剩下的就是潛在有機會的 Activation 指標。
以上圖為例，就是 Search、Play、Select Songs or Video 三個事件。
剩下的三個指標候選人當中，又該怎麼挑選呢？回到下面這張圖，我們要找的是重合度最好的，就數學上來說，就是要考慮 PPV (positive predictive value)、sensitivity 和 NPV (Negative Predictive Value)，PPV 代表的是符合指標的人，有多少比例的人真的 Retained，以下圖來說，黃色圈圈的Search 的 PPV 是最好的，但我們可以知道，search 並不是重合度最好的，
所以除了 PPV 之外，我們還要看 sensitivity。
sensitivity 指的是代表的是符合指標且有 Retained 的人，和不符合指標但 Retained 的人的比例，這個值是越大越好。以 sensitivity 來看，Select 是最好的，但但我們可以知道，select 並不是重合度最好的，所以 PPV 和 sensitivity 要一起看，找出一個最佳的平衡，那就是 Play。
同樣的道理，我們可以繼續用不同天數，然後都是 Play 來比較，如下圖：
以 PPV 和 sensitivity 來看，7天和14天 play 一首歌都不錯，那該怎麼選指標呢？
那就要再看 NPV了，NPV 就是指預測不會 Retain 然後真的不會 Retain 的比例，以7天 Play 一首歌和 14 天 Play一首歌來看，就是比不重合的比例，很明顯 7 天 Play 一首歌的 NPV 應該會比較高。
小結：指標選擇的藝術
選擇 Activation 的指標，有三個要件
- 在邏輯上符合因果關係，這個事件在邏輯上可以讓用戶感受到 A-ha moment
- 和 Retained 有正相關
- PPV 和 sensitivity 的組合度最好
但我在這邊還是要提醒一下，選出了指標之後，還要考慮組織內溝通的問題，不一定是數據上表現最好的指標獲選為 Activation 指標，而是要好記、好溝通，好記好溝通的指標，在組織內執行起來比較容易到位。
舉例來說，若最後做出來的指標是 6 天內 Play一首歌是數據上表現最好的指標，那最後的 Activation 應該定義成「七天內Play一首歌」，比較符合一般人的認知週期，會比較記得住，執行上就是每次一週開一次會議來 review，實際執行落地也比較方便。
一個能被執行落地的 Activation 指標，才是最重要的。
