4

22
2

文字

分享

4
22
2

心理學界的再現性危機,研究數據指出別輕易相信你所看到的「研究數據指出」

Te-Yi Hsieh_96
・2021/06/25 ・5224字 ・閱讀時間約 10 分鐘

「培養媒體識讀能力」已是這個資訊爆炸時代,人人都須具備的基本素養。閱讀報章雜誌時檢查資料出處、收到危言聳聽的訊息時先查明是否為假消息,這些幾乎都己經是基本常識。然而,撇除一些惡意扭曲事實的報導、刻意造假的研究結果不算,那些發表在國際科學期刊、經過嚴謹審查機制的研究報告,我們就真能全盤相信嗎?首先,讓我們從 2015 年心理學界的再現性危機1(reproducibility crisis,或作replication crisis)案例說起……

在資訊爆炸的時代,我們生活可能充斥著各種假消息。圖/Giphy

2015 年,有鑒於學界出版偏誤2(publication bias,註一)、選擇性分析資料、選擇性報告結果等問題,一大群世界各地的心理學家集結一起,合作進行了 100 個複製性研究 (replication studies),要看看如果以同樣的研究方法、實驗配置,能否成功重現一些刊登於三個心理學領域重要期刊(註二)的研究結果。畢竟,若一現象為真,研究人員能再次發現相同結果的機率應是相當高。心理學家們先是利用準隨機抽樣 (quasi-random sampling) 方式選擇要進行重複驗證的研究題目,分工合作、嚴謹複製原實驗的研究設計、程序與工具,過程也經過原作者的認證,並以相當高的統計考驗力(average replication power = 0.92)去檢定原實驗效果。原本,在他們參照的 100 個已發表研究結果中,高達97%的結果是有統計顯著性的,簡單來說,幾乎所有的原始研究都成功驗證某假說,或者發現某個顯著的現象、關聯。

然而令人驚訝且失望的是,重複驗證的結果中僅有 36% 是有統計顯著性的,即使是那些達到統計顯著的結果,新發現的平均效果值(mean effect size = 0.197)也小於原本發表於期刊上的效果值(mean effect size = 0.403)。這樣的結果給心理學界丟下了一個巨大的震撼彈!畢竟,可重複性(或作再現性,reproducibility)是科學的重要特徵之一,在眾多條件都控制的情況下,仍有如此高比例的研究結果無法被再現,不禁使人懷疑,是否多數心理學發現僅是曇花一現?在某個陰錯陽差的機緣下「幸運」達到的統計顯著性?再者,如果一項科學發現可以有時候是對的、很多時候是錯的,那這項科學發現的價值何在?

心理學期刊充斥著「有統計顯著性」的結果,但其中有多少是真實存在、能被重複驗證的現象?圖/Giphy

2018 年,另一批超過 200 位心理學家參與的大型研究計畫(Many Lab 2)3, 4中,他們針對 28 個常見的心理學現象進行重複驗證。類似於前述 2015 年的例子1,28 個重複驗證的研究中只有約一半(15 個)結果是支持原發現的,並有高達 75%(21 個)研究的效果值是低於原期刊中報告的效果值。另外,Many Lab 2 這項大型研究計畫廣納 36 個國家的 15305 位受試者,以確認心理學研究結果是否會受到族群間異質性等背景因素影響,他們的結果顯示,只有 39%(11 個)的研究結果呈現群體異質性(heterogeneity),而這 11 個研究大多是那些成功被重複驗證、效果值很大的研究題目。

-----廣告,請繼續往下閱讀-----

換句話說,要以受試者、情境的不同來解釋那些無法被重複驗證的結果,似乎是不成立的,因為反而是那些能成功重複驗證的研究題目會受到群體異質性影響4。複製性研究的成敗,更多取決於研究的現象本身1, 4。真實存在的現象、貼近事實的理論與假設,通常都能在不同環境、對象、時空背景下被重複驗證;相對的,僅因為偽陽性 (false positive) 機率或其他因素而發現的顯著結果,即使完美重現原研究場域、工具、對象,能再次有相同發現的機率也不高。

更令人吃驚的是,在近年無法被重複驗證的案例中,甚至不乏一些對心理系學生來說耳熟能詳、出現於教科書的經典心理學現象,例如,「臉部回饋假說」(facial-feedback hypothesis,註三)4-6、促發效應(priming effect,註四)4和自我耗損(Ego Depletion,註五)7, 8

在這波重複驗證風潮中最諷刺的莫過於,最經得住考驗的發現居然是「大約只有一半的心理學研究結果能被重複驗證」9

複製性研究的結果,令人大失所望!圖/Giphy

讀到這,先別急著把心理學教科書、期刊丟進垃圾桶!也先別急著下定論說:「果然心理學、社會科學都是主觀的!是不可信的!」當然不是。事實上,再現性不高的現象,在生物學、工程學、物理學、甚至醫學,都不算罕見10, 11。在質疑批判之前,或許我們更該思考:是什麼造成目前的現狀?以及,作為知識的產出者、使用者、讀者,我們能做些什麼?

-----廣告,請繼續往下閱讀-----

為何無法重複驗證?

假設研究員 A 和研究員 B 使用同樣研究設計、實驗方法,但得出的結果卻不一致,例如 A 發現的東西 B 沒發現,我們可以懷疑的解釋有:

  1. A、B 所研究的對象與環境不同,情境與個體差異的因素造成結果不同
  2. A 或 B 在研究時不小心出了錯,以至於 A 與 B 的實驗事實上不完全一樣
  3. 結果不同僅是由於抽樣誤差(sampling error)、機率的關係,A 的結果可能是偽陽性(false positive),或者 B 的結果是偽陰性(false negative)。此點的深入探討可參考「p 值的陷阱:p 值是什麼?又不是什麼?」12一文。
心理學的再現性危機,是由於實驗情境誤差?機率?抑或是其他因素?圖/Giphy

像是在 2015 年1與 2018 年4的大型複製性研究中,無法重複驗證的原因較不可能是實驗方法誤差或個體差異等混淆變項。原因是,可能影響結果、但無關於研究主題的混淆因素,都已被研究人員納入考量並透過統計方法排除,例如,樣本數、個體差異、文化差異等。並且,研究團隊在進行重複驗證時都與經過原作者審核、同儕審查,以確認實驗程序成功複製原始實驗。也就是說,現實條件下能控制的都控制了,但仍有如此高比例的研究結果與原始發現不同,究竟是哪裡出了問題?

Open Science Collaboration 團隊認為1,多數研究無法重複驗證的結果,指出了目前心理學領域出現的出版偏誤與選擇性報告等問題。一直以來,期刊出版者重視原創性研究多於複製性研究,加上過去期刊多半傾向發表有統計顯著性的結果,少數研究者甚至為了能成功在期刊發表,選擇性的報告結果,甚至修改原先假設、操弄資料以達到成功驗證假說的假象。而重複驗證危機正是顯現了這樣不當的風氣、行為造成的後果,並彰顯施行複製性研究的重要性與必要性。

當然,針對個別研究,單一一次重複驗證的失敗,不代表我們應該全盤否認原始發現,而應是蒐集更多、更透明、更全面的證據,以後設分析 (meta-analysis) 等統計方式,得出真正有可信度的結論1, 4

-----廣告,請繼續往下閱讀-----

研究人員可以如何應對?面對這樣系統性的問題,矯正方法當然也需要系統性的合作與改變。出版決策者在判斷是否發表一篇研究報告的標準,不該單靠結果的顯著與否,而是主題重要性、研究方法正確性、嚴謹性等,並給予支持性與不支持性的證據同等重視;研究資金贊助者,可以更鼓勵這類複製型研究、而非僅是創新研究;此外,目前學者也建議研究人員在開始進行實驗前進行預先註冊(Preregistration)13,或選擇進行註冊研究(registered report)14

例如,在 OSF (Open Science Framework)15此平台上,研究人員可以在實驗、收資料之前,先將實驗設計、實驗假設、受試者的排除標準(Exclusion Criteria)等,先在網頁上進行註冊16,如此一來便能保證研究的透明性、可信性,並避免有心懷不軌的研究人員在蒐集資料後,才事後操弄假設、扭曲數據13

此外,也越來越多心理學期刊提供「註冊研究」(registered report)17。此投稿方式,有別於以往只在完整撰寫完一篇研究報告後才投稿,進行註冊研究時,會在研究緒論、方法撰寫好時(實驗開始前),就先投稿到期刊接受第一階段審查(Stage 1 peer review),待該領域專家認可其研究價值、方法正確性之後,再開始實際進行實驗、收受試者的步驟。此舉也確保了,不管之後的研究結果是支持或不支持原先假設,其結果的報告都會在第二階段審查(Stage 2 peer review)之後刊登在該期刊上,藉此,多少有辦法校正目前文獻中支持性和不支持性證據失衡、研究發現過於正向的狀況14

同時,Open Science Collaboration 團隊也強調1,再現性危機不代表心理學家們應該志在讓所有初始研究都能在未來被重複驗證,因為這樣反而是變相地鼓勵研究者只去探討那些「明顯會成功」的研究題目,限制了該領域的創新性與探索性。也許我們該做的,單純就是回歸科學、理性的本質,真正聚焦在一研究主題的價值、方法嚴謹度、結果解釋的正確性等。而非單純因為某一研究題目有多「吸睛」或是某一研究「感覺」會不會成功,來決定研究以及領域的走向。

-----廣告,請繼續往下閱讀-----

身為讀者、知識使用者,我們可以如何看待再現性危機?

科學成果的品質很大程度取決於研究者,但同時,任何研究人員都不是完人、每個研究都可能因資源限制、現實考量而有其限制。另一方面,我們也不太可能要求社會上所有人都熟悉統計、數據分析的判讀,但身為讀者、知識使用者,我們可以做到的是,用正確、理性的態度面對所接受到的資訊。尤其是針對新穎、單一、小規模、樣本數少的研究證據,不要馬上視之為「真理」,並在之後有相斥、反駁的證據出現時,保持開放的心態,才不會落入確認偏見 (confirmation bias) 的陷阱中18

科學是一種問題解決、探究世界的方式,而非一種盲目的「信仰」。更重要的是,科學是依循序漸進的過程,也許我們很多時候會以為,科學發現的過程像是卡通、故事中的那樣,研究者經過幾年埋頭苦幹,在某個天時地利人和的當下,對天大喊「Aha!我找到了(某現象、某理論、某關聯)!」然後留下改變世代的研究成果與發現。

偉大的科學發現都是如石破天驚般、一舉成名?圖/Giphy

當然,這種故事可能在少數案例是真的,但大多時候,科學是一個集眾人之力、不斷自我修正、相互辯論,最後達到一個「趨近」真理的過程,過程中,可能會走岔路、會誤判虛實、會自相矛對,這不代表我們必須對科學失望,相反地,我們應該為「發現錯誤與不足」感到欣喜,因為唯有診斷出現有的病灶,我們才能真正對症下藥,從而將知識探索推向一個更正確的方向。

備註

註一:出版偏誤(publication bias)意指,科學期刊傾向於發表有顯著結果、成功驗證假設的研究結果,而非無顯著性、不支持假說的其他證據,造成學界充斥著過於正向的支持性證據,使學者難以權衡正負向證據、達成客觀觀點。

-----廣告,請繼續往下閱讀-----

註二:Open Science Collaboration(2015)進行複製性研究的主題選自2008年刊登於Psychological Science (PSCI)、Journal of Personality and Social Psychology (JPSP)、以及 Journal of Experimental Psychology: Learning, Memory, and Cognition (JEP: LMC)的共100個研究

註三:「臉部回饋假說」(facial-feedback hypothesis)由美國心理學家William James提出,其假說認為臉部表情、肌肉的變化能導致心裡情緒反應上的變化,例如,咬一支筆時,做出嘴角上揚的表情能讓人心情感到快樂。

註四:促發效應(priming effect)指,藉由激發人們心中的某個概念,相關、類似的態度、信念、行為也會一同被激發。如,激發「熱」的概念,會強化人們對溫室效應的信念。

註五:自我耗損(Ego Depletion)理論認為,人的意志力(willpower)為有限資源,因此進行任何需要消耗心理能源的事之後,如自我控制、決策等,再從事其他作業的效能就會降低。例如,壓抑自己想吃零食的欲望後,專心於解數學難題的毅力就會降低。

-----廣告,請繼續往下閱讀-----

參考資料

  1. Open Science Collaboration. (2015). Estimating the reproducibility of psychological science. Science, 349(6251).
  2. Van Aert, R. C., Wicherts, J. M., & Van Assen, M. A. (2019). Publication bias examined in meta-analyses from psychology and medicine: A meta-meta-analysis. PloS one, 14(4), e0215052.
  3. https://osf.io/8cd4r/ 
  4. Klein, R. A., Vianello, M., Hasselman, F., Adams, B. G., Adams Jr, R. B., Alper, S., … & Sowden, W. (2018). Many Labs 2: Investigating variation in replicability across samples and settings. Advances in Methods and Practices in Psychological Science, 1(4), 443-490.
  5. https://digest.bps.org.uk/2016/09/01/no-reason-to-smile-another-modern-psychology-classic-has-failed-to-replicate/ 
  6. https://pansci.asia/archives/170845#:~:text=%E3%80%8C%E8%87%89%E9%83%A8%E5%9B%9E%E9%A5%8B%E5%81%87%E8%AA%AA%E3%80%8D%E6%B8%AC%E8%A9%A6,%E6%94%AF%E7%AD%86%EF%BC%8C%E4%B8%80%E9%83%A8%E7%89%87&text=%E7%84%B6%E8%80%8C%EF%BC%8C%E6%9C%89%E4%BA%BA%E8%AA%8D%E7%82%BA%E5%8F%8D%E9%81%8E%E4%BE%86,%E4%BA%86%E5%8F%88%E6%9C%83%E6%9B%B4%E5%BF%AB%E6%A8%82%EF%BC%81
  7. http://www.slate.com/articles/health_and_science/cover_story/2016/03/ego_depletion_an_influential_theory_in_psychology_may_have_just_been_debunked.html?via=gdpr-consent
  8. Hagger, M. S., Chatzisarantis, N. L., Alberts, H., Anggono, C. O., Batailler, C., Birt, A. R., … & Zwienenberg, M. (2016). A multilab preregistered replication of the ego-depletion effect. Perspectives on Psychological Science, 11(4), 546-573.
  9. https://www.theatlantic.com/science/archive/2018/11/psychologys-replication-crisis-real/576223/ 
  10. Baker, M. (2016). Reproducibility crisis. Nature, 533(26), 353-66.
  11. http://www.angle.com.tw/ahlr/discovery/post.aspx?ipost=2658#:~:text=%E6%A0%B9%E6%93%9AKNAW%E5%A0%B1%E5%91%8A%E4%B8%AD%E7%9A%84,%E7%9A%84%E7%9B%B8%E5%90%8C%E7%9A%84%E7%B5%90%E8%AB%96%EF%BC%8C%E5%8D%B3
  12. https://pansci.asia/archives/110923 
  13. Lakens, D. (2019). The value of preregistration for psychological science: A conceptual analysis. Japanese Psychological Review, 62(3), 221-230.
  14. Nosek, B. A., & Lakens, D. (2014). Registered Reports. Social Psychology, 45(3), 137–141. https://doi.org/10.1027/1864-9335/a000192 
  15. https://osf.io 
  16. https://www.cos.io/initiatives/prereg?_ga=2.70913104.1585635274.1623426782-1610779414.1622469013
  17. https://www.cos.io/initiatives/registered-reports
  18. https://pansci.asia/archives/185705
文章難易度
所有討論 4
Te-Yi Hsieh_96
6 篇文章 ・ 8 位粉絲
PhD in Neuroscience and Psychology/Social Robotics (University of Glasgow, 🇬🇧)。寫心理🧠、寫機器人🤖、寫跟你我生活有關的🙋‍♀️ 。 發表詳見 👉 https://hsadeline.wixsite.com/teyihsieh (Twitter: @TeYiHsieh)

0

2
0

文字

分享

0
2
0
人體吸收新突破:SEDDS 的魔力
鳥苷三磷酸 (PanSci Promo)_96
・2024/05/03 ・1194字 ・閱讀時間約 2 分鐘

-----廣告,請繼續往下閱讀-----

本文由 紐崔萊 委託,泛科學企劃執行。 

營養品的吸收率如何?

藥物和營養補充品,似乎每天都在我們的生活中扮演著越來越重要的角色。但你有沒有想過,這些關鍵分子,可能無法全部被人體吸收?那該怎麼辦呢?答案或許就在於吸收率!讓我們一起來揭開這個謎團吧!

你吃下去的營養品,可以有效地被吸收嗎?圖/envato

當我們吞下一顆膠囊時,這個小小的丸子就開始了一場奇妙的旅程。從口進入消化道,與胃液混合,然後被推送到小腸,最後透過腸道被吸收進入血液。這個過程看似簡單,但其實充滿了挑戰。

首先,我們要面對的挑戰是藥物的溶解度。有些成分很難在水中溶解,這意味著它們在進入人體後可能無法被有效吸收。特別是對於脂溶性成分,它們需要透過油脂的介入才能被吸收,而這個過程相對複雜,吸收率也較低。

-----廣告,請繼續往下閱讀-----

你有聽過「藥物遞送系統」嗎?

為了解決這個問題,科學家們開發了許多藥物遞送系統,其中最引人注目的就是自乳化藥物遞送系統(Self-Emulsifying Drug Delivery Systems,簡稱 SEDDS),也被稱作吸收提升科技。這項科技的核心概念是利用遞送系統中的油脂、界面活性劑和輔助界面活性劑,讓藥物與營養補充品一進到腸道,就形成微細的乳糜微粒,從而提高藥物的吸收率。

自乳化藥物遞送系統,也被稱作吸收提升科技。 圖/envato

還有一點,這些經過 SEDDS 科技處理過的脂溶性藥物,在腸道中形成乳糜微粒之後,會經由腸道的淋巴系統吸收,因此可以繞過肝臟的首渡效應,減少損耗,同時保留了更多的藥物活性。這使得原本難以吸收的藥物,如用於愛滋病或新冠病毒療程的抗反轉錄病毒藥利托那韋(Ritonavir),以及緩解心絞痛的硝苯地平(Nifedipine),能夠更有效地發揮作用。

除了在藥物治療中的應用,SEDDS 科技還廣泛運用於營養補充品領域。許多脂溶性營養素,如維生素 A、D、E、K 和魚油中的 EPA、DHA,都可以通過 SEDDS 科技提高其吸收效率,從而更好地滿足人體的營養需求。

隨著科技的進步,藥品能打破過往的限制,發揮更大的療效,也就相當於有更高的 CP 值。SEDDS 科技的出現,便是增加藥物和營養補充品吸收率的解決方案之一。未來,隨著科學科技的不斷進步,相信會有更多藥物遞送系統 DDS(Drug Delivery System)問世,為人類健康帶來更多的好處。

-----廣告,請繼續往下閱讀-----
文章難易度

討論功能關閉中。

鳥苷三磷酸 (PanSci Promo)_96
199 篇文章 ・ 304 位粉絲
充滿能量的泛科學品牌合作帳號!相關行銷合作請洽:contact@pansci.asia

0

1
0

文字

分享

0
1
0
NCC 公民培力活動百花齊放,公私協力推動媒體素養
鳥苷三磷酸 (PanSci Promo)_96
・2024/01/10 ・1036字 ・閱讀時間約 2 分鐘

本文為 國家通訊傳播委員會 廣告

疫情加速全球數位化發展,也改變了大眾接收資訊的方式。隨著影音媒體平台及自媒體崛起,每個人除了是訊息接收者,也是內容的生產者,百花齊放的訊息管道也帶來了內容及資訊管理上的挑戰。

國家通訊傳播委員會(NCC)因應全球性之數位匯流發展及監理革新趨勢,致力於促進通訊傳播健全發展,保障消費者及尊重弱勢權益,打造多元文化均衡發展,迄今持續推動「廣電媒體專業素養培訓與公民培力推廣計畫」。

本年度( 112 年)公民培力推廣部分,藉由與廣電媒體產製端合作,包括公視、正聲廣播、新聲廣播、鳳鳴廣播、陽明山電視和全聯電視,及與大學、公民團體包括國立臺灣師範大學、朝陽科技大學、法律白話文、臺灣新聞記者協會等共 11 個單位,於 7 月至 12 月在北、中、南、東四大區域舉辦共 20 場媒體識讀活動,累積超過 1,300 人次參與,參與者豐富多元,包含媒體專業人員、銀髮族、身障群體、新住民、兒童及青少年、 YouTuber 、 KOL 等,多面向推廣媒體素養意識。

-----廣告,請繼續往下閱讀-----

本次公民培力活動形式多元,合作夥伴邀請各方講師發揮所長,針對不同參與對象因材施教,如正聲廣播電臺透過辦理相聲演出,讓平時不易接觸到媒體素養資訊的長輩、偏鄉學生,透過有趣的段子逐漸認識辨別假訊息的重要;國立臺灣師範大學大眾傳播研究所舉辦媒體素養營隊,至臺東教授國中生性別平等的重要性;公視透過舉辦電視台參訪,讓想認識電視媒體運作、節目製播的民眾得以大開眼界。許多單位也透過不同議題講座、互動與大學生或地方社區產生共鳴,散播媒體素養的種子,民眾課後紛紛表示收穫良多。

公視參訪-實際走進攝影棚,認識節目錄製過程。
臺師大媒體素養營-善盡大學社會責任,向年輕學子回饋所學知識。
正聲廣播電台-以相聲演出搭配假訊息防制宣導,讓銀髮族及兒童也能辨識假訊息。

NCC 以提升廣電媒體專業及社會大眾媒體識讀能力為已任,透過每年持續舉辦公民培力活動,幫助閱聽者對廣電媒體的認識、思考,以及對訊息評估的能力,讓不同年齡層及族群得以將媒體素養教育的種子深埋在心、向下扎根,進而提高全民媒體素養,打造更優質的社會環境。

鳥苷三磷酸 (PanSci Promo)_96
199 篇文章 ・ 304 位粉絲
充滿能量的泛科學品牌合作帳號!相關行銷合作請洽:contact@pansci.asia

0

0
0

文字

分享

0
0
0
NCC 公民培力課程 邀您一同打造數位時代的媒體素養
鳥苷三磷酸 (PanSci Promo)_96
・2023/11/15 ・530字 ・閱讀時間約 1 分鐘

本文為 國家通訊傳播委員會廣告

國家通訊傳播委員會(NCC)因應數位匯流發展,為促進通訊傳播產業健全發展,保障消費者及尊重弱勢權益,持續推動「公民培力推廣計畫」,鼓勵廣電媒體及公民團體運用既有資源,協力推動全民媒體素養,以串連其影響力至閱聽眾端,並於今(112)年度規劃「認識媒體」、「防制假訊息」、「性別平權」及「公民新媒體內容產製」等議題,增進社會大眾對於通訊傳播產業的認識。

今年度藉由與廣電媒體、公民團體等合作,包括公視、法律白話文運動、正聲廣播、新聲廣播、鳳鳴廣播、陽明山電視和全聯電視等單位,於今(112)年 7 月至 12 月在北、中、南、東部地區舉辦 19 場媒體識讀活動,包括防制假訊息相聲演出、媒體素養營隊、參訪公視等,針對不同年齡層及族群設計互動課程,將媒體素養教育的種子向下扎根,提高全民媒體素養,打造更優質的社會環境。NCC 誠摯邀請銀髮族、兒少、身心障礙者、新住民及社會大眾一起參加,培養正確閱聽習慣及獨立思考能力,提升公民素養,進而創造更健全的媒體環境,報名方式及活動內容詳見活動網站

鳥苷三磷酸 (PanSci Promo)_96
199 篇文章 ・ 304 位粉絲
充滿能量的泛科學品牌合作帳號!相關行銷合作請洽:contact@pansci.asia