海狗丸研究寫「顯著改善」,你一定會有感覺?統計結果點樣讀
研究介紹寫「顯著改善」,好容易令人以為每位服用者都會感到明顯分別。但統計上嘅顯著、改善幅度,以及個人感受,並唔係同一回事。睇海狗丸相關研究時,唔應只停喺一個形容詞。
「統計顯著」唔係「人人明顯有效」
統計檢定係按研究設計及假設評估數據,唔會直接保證某位消費者嘅結果。「顯著」亦不能單獨交代改善有幾大、持續幾耐,或實際生活有幾大分別。
要了解意思,需要連同原本測量項目、對照組及數據一齊看。不能將某項分數嘅統計差異,直接寫成人一定更精神。
先問改善幅度,而唔係只問有冇過關
假設一份研究量表滿分100,兩組平均差2分。呢個係假設例子,單知道差2分仍然唔夠:要再睇量表意義、原本分數及有冇達到具實際意義嘅變化。
另一項研究用嘅可能係完全不同量表,唔可以將兩個分數直接比較。產品介紹若只寫百分比,亦要搵返原始數值同計算方法。
平均數會唔會掩蓋個別差異?
研究平均結果並唔等於每位參加者都改善相同幅度。有人變化較多,有人較少,亦可能有人冇改善。應留意結果嘅不確定性及個別反應資料。
如果研究材料與手上海狗丸不同,仲要先處理成品能否套用研究嘅問題。唔應跳過材料核對,直接討論自己會有幾大感覺。
讀研究摘要,可以追問四點
問清楚測量咗乜、兩組差幾多、結果有幾大不確定性,以及有冇實際意義。呢四點通常比單看「顯著」更接近購買者真正關心嘅問題。
NCCIH研究結果閱讀指南解釋統計及實際意義嘅分別,可用作延伸閱讀。
總結
海狗丸資料所講嘅「顯著改善」,要連同幅度、測量方式及研究材料理解,唔等於你服用後一定有明顯感覺。