一項研究只要測得夠多，就算產品完全無效，也很容易碰巧找到「顯著結果」。
搜尋「葉黃素研究可信嗎」，不能只看論文有沒有出現p＜0.05。當研究同時測量20個結果，再挑出其中3個顯著項目宣傳，偶然命中的風險會增加；這就是多重比較與選擇性報告問題。
測20項，至少中一項的機率有多高？
若每項檢定都使用p＜0.05，而且20項結果實際都沒有差異，至少出現一次假陽性的機率為：
1－(1－0.05)20 ≈ 64.2%
也就是產品根本無效，只要研究同時測視力、疲勞、乾眼、淚液、眩光、睡眠、注意力、記憶、不同時間點與不同族群，就可能撈到幾個漂亮的星號。
最常見的答案挑選術
- 主要終點失敗，改講次要終點。
- 整體族群失敗，改講低攝取或特定年齡次族群。
- 六個月沒差，改講三個月某次測量。
- 十項認知測驗只有兩項成功，摘要只寫那兩項。
- 組間比較失敗，改講實驗組前後比較。
葉黃素研究甚至可能從眼睛一路測到睡眠、注意力與記憶。研究探索不是罪，罪在於事後找到結果後，假裝那是從一開始就要驗證的確定效果。
醫師與營養師引用前應查什麼？
- ClinicalTrials.gov或其他平台的試驗登錄。
- 主要終點是否預先指定。
- 論文結果是否與登錄一致。
- 是否校正多重比較。
- 摘要是否只挑成功項目。
- 次族群分析是事前還是事後決定。
如果專業人士只讀摘要、不查登錄、不看完整表格，就不該對外說「研究證實」。那不是證據判讀，只是替研究者和品牌轉貼結論。
試驗登錄是抓改答案的第一現場
研究開始前，理想上應公開主要終點、次要終點、分析方法、樣本數與排除規則。論文發表後，把登錄內容與正式文章逐項比對，就能發現主要終點被替換、時間點改變、次族群新增或失敗結果消失。沒有登錄不代表研究一定造假，但會降低外界判斷事後操作的能力。
多重比較不是不能做，而是必須誠實處理
常見方法包括Bonferroni、Holm程序、控制錯誤發現率，或事先指定少數主要終點。更重要的是把探索性結果明確標為探索性，等待獨立研究重複。最糟糕的做法，是測二十項後只挑三項成功，再讓醫師對外說「臨床研究已證實」。
讀者也應警惕次族群分析。年齡、性別、基線攝取量、螢幕時數與不同劑量可以切出大量組合；如果沒有預先假說與交互作用檢定，某一小群「有效」很可能只是偶然。
常見搜尋問題
葉黃素研究可信嗎？
期刊刊登不代表結論必然可靠，仍要檢查試驗登錄、主要終點、樣本數、失訪與利益衝突。
什麼是多重比較？
同時進行愈多統計檢驗，至少出現一個偶然顯著結果的機率通常愈高。
如何看出研究在挑答案？
比較試驗登錄、研究計畫與正式論文，確認主要終點是否被更換，以及未顯著結果是否被省略。
資料來源
本文依原始研究、系統性回顧及官方研究資料撰寫。研究證據會隨新資料更新；本文批判的是證據解讀與宣傳是否相符，不取代個人醫療診斷。
葉黃素證據審判系列
- 葉黃素有效嗎？60%對50%的安慰劑差異
- p值小於0.05不等於葉黃素有效
- 葉黃素能改善視力嗎？黃斑色素指標解析
- AREDS2葉黃素研究與健康人適用性
- 葉黃素可以改善眼睛疲勞嗎？
- 多重比較與挑答案（本篇）
- 葉黃素推薦、商業研究與醫師背書
發表迴響