PostHog vs Mixpanel:新手引導實驗該計算曝光使用者,還是旗標請求?

兩者目前都支援原生旗標與實驗。新手引導選型應先核對曝光時點與身分,再區分 PostHog 請求額度和 Mixpanel 每月實驗使用者;已有 Mixpanel 資料的團隊不必因舊印象而遷移。

來源: posthog.com
November 2, 2026
1 min

準備把新手引導從一張長表單改成分步填寫時,團隊需要回答的是「新流程是否提高首次完成率」,而不是哪家分析平台的功能清單更長。PostHog 和 Mixpanel 目前都提供原生功能旗標與實驗,已使用 Mixpanel 的團隊不應因為過去對產品的印象就啟動遷移。更有用的比較,是哪個平台能沿用既有事件、正確辨識真正看見引導的使用者,並在實驗結束前維持可負擔的成本。不包含實際執行實驗或效能測試。

先分清楚「被分組」和「看見引導」

假設使用者登入後先到首頁,只有點選「建立第一個專案」才進入引導。應用程式可能在首頁就請求旗標、取得分組結果,但這不代表使用者已看過新的表單。若把所有取得分組的人都納入引導實驗,團隊實際回答的可能是另一個問題。啟動前應寫清楚:參與條件是什麼、在哪個頁面或操作記錄曝光,以及從哪個時間點開始計算完成事件。這裡的範例是實驗設計建議,不是任一平台已產生的結果。

PostHog 的曝光文件說明,一般 SDK 路徑會在呼叫 getFeatureFlag,或讀取伺服器端 evaluateFlags 結果中的旗標時,記錄 $feature_flag_called。實驗透過曝光事件辨識參與者,曝光前的指標事件不納入分析。因此,呼叫位置本身就是實驗定義的一部分。如果應用程式必須預先取得值,而真正進入引導才算參與,可以評估自訂曝光事件,並正確附帶對應的變體屬性。不能只看到旗標介面請求成功,就認為參與者統計已經準確。

Mixpanel 的文件同樣區分 assignment 與 exposure:前者決定分配到哪個版本,後者是應用程式實際使用該版本進行畫面呈現。它提供原生旗標,並可透過 $experiment_started 追蹤曝光;已有 CDP 事件管線的團隊,也可以分開實作分組與曝光回報。這個選項有助於沿用既有資料收集路徑,但需要明確指定由誰負責傳送事件,避免一條路徑自動回報、另一條路徑又重複記錄。比較時應檢查實際 SDK 和追蹤埋點,而不是把「支援實驗」當作已完成串接。

接著要核對身分。Mixpanel 允許依使用者 distinct_id、裝置 device_id 或群組鍵分配變體,旗標啟用後便不能修改這個分配鍵。若引導跨越匿名瀏覽與註冊登入,團隊應先決定研究的是同一個人、同一部裝置,還是整個企業帳戶。PostHog 也提醒,多裝置、清除儲存資料,或辨識使用者前後進行求值,都可能讓同一位使用者接觸多個版本。針對此情境,建議用測試帳號走過匿名、登入、重新整理、切換裝置等路徑,檢查曝光與完成事件是否仍正確對應;這比先討論哪家的報表更漂亮更重要。

一百萬次請求,不等於一百萬名實驗使用者

PostHog 目前的價格頁列出每月一百萬筆產品分析事件與一百萬次功能旗標請求的免費額度,實驗隨旗標計費。這裡至少有事件量和旗標請求量兩筆帳,不能理解成一百萬名免費實驗使用者,也不能將應用程式內每次讀取旗標都直接當成一次收費的網路請求。預算應結合使用的 SDK、快取與實際呼叫方式估算,再查看超額價格。少量但重複造訪頻繁的使用者,與大量只造訪一次的使用者,可能形成不同的用量結構。

Mixpanel Free 目前包含每月一百萬筆事件、一千名每月實驗使用者(MEU),以及最多十個作用中旗標。Growth 包含五千 MEU、最多五十個作用中旗標;頁面所寫可擴充至十萬 MEU,不代表預設包含十萬。MEU 依曆月內曾曝光的不重複使用者計算,官方也規定,同一位使用者參與至多三十個實驗時僅計一個 MEU,超出此範圍另有計算規則。評估新手引導實驗時,應先估算真正參與的人數,而不是以全站事件量代替。

額度影響的不只是帳單。Mixpanel 的實驗文件說明,Free 達到 MEU 上限後,實驗功能會暫停,直到下個月額度重設或升級方案,旗標仍持續為流量提供服務;Growth 超額則涉及計費。若預計一個月有兩千名使用者進入引導,即使分析事件遠低於一百萬,也不能假設 Free 足以完成整輪實驗。此人數只是預算範例,不代表足以偵測某個提升;樣本需求仍取決於基準值、希望辨識的變化與實驗設計。

已有可靠事件時,先確認新增工作量

若團隊已在 Mixpanel 維護可信的首次完成事件、漏斗與使用者身分,先確認目前的原生實驗是否符合需求,通常比為一個引導實驗重建整套資料更合理。其實驗報表可選用既有指標,也能分析外部旗標產生的曝光事件。需要遷移時,應列出歷史指標定義、身分銜接與並行驗證資料所需的工作,而不只是比較兩個免費方案的數字。

若團隊已在 PostHog 使用旗標與產品分析,就能沿用同一套事件與實驗流程;其實驗文件也將各版本與工作階段重播連結,方便在指標變化後查看使用者經歷。對從零開始的團隊,這種連貫流程值得試行,但不會自動省去曝光定義與資料品質工作。不要為了湊齊平台功能,連目前實驗不需要的資料收集都一起啟用。

最後,以同一份驗收說明比較兩者:誰有資格參與、何時曝光、完成事件如何對應身分、預期用量是否能涵蓋觀察期,以及誰負責發布與撤回變更。已使用 Mixpanel 的團隊應優先確認增量串接,已使用 PostHog 的團隊應優先沿用既有流程;只有明確的能力或成本缺口,才值得推動遷移。真正決定新手引導實驗是否可信的,是參與者與指標能否對應,而不是把旗標請求數當成看見新流程的人數。

內容說明:本文基於公開資料整理,僅供工具選型參考。產品功能、價格及相關政策可能隨時調整,請以官方最新資訊為準。

原文出處:posthog.com