科學家們正在研究一項關於再現性的研究是否有一個可再現的結論。這項備受矚目的研究去年報告說,許多心理學發現無法複製,但另一組研究人員現在聲稱這一發現存在嚴重缺陷。今天在《科學》雜誌上,爭論的雙方都在擺平。一方面說心理學有問題。對方說:實際上,你的分析能力很差。這場爭論一下子說明瞭為什麼我們需要更多的科學再現性,並質疑是否真的存在再現性危機。
“元科學不能不受科學規則的約束。”
確認結果是科學過程的關鍵部分;這就是我們如何判斷什麼是真實的。為了觀察發表的研究結果多久能被覆制一次,一個研究者聯盟共同研究了最近在主要心理學期刊上發表的100項研究。他們的發現-爭論的一個-是100項研究中只有39項可以被覆制,潛在地確定了一個主要問題:要麼是糟糕的科學正在發表,要麼是重覆一項研究遠比我們預期的複雜。
在對這一發現的批評中,研究人員說,最初的研究在幾個方面存在錯誤。首先,它沒有解釋預期的失敗;它還依賴於小樣本的複製性差的研究;而且因為重覆研究的選擇過程不是盲目的,它會使結果產生偏差。”他們在結論中寫道:“元科學並不是不受科學規則的約束。”。他們說,監督這項心理學研究的開放科學合作組織(OSC)“嚴重低估了心理科學的再現性。”
“我相信我們都同意,再現性是很難估計的,”丹尼爾吉爾伯特,哈佛大學心理學教授和評論的主要作者,告訴邊緣OSC認為他們很好地剋服了這一困難,估計了心理學的可複製性,但我們並不同意這種看法。“批評人士說,這項研究甚至有可能表明心理學的可複製率還不錯。如果他們糾正了某些錯誤,他們可能已經看到了。
“即使是最頂尖的科學家在解釋什麼是非常可靠的結果時也會有分歧。”
OSC堅持其調查結果。他們說,吉爾伯特和他的同事的批評“受到統計錯誤觀念和對他們資料的選擇性檢查的限制。”“這對於產生一個假設來說是非常好的,”OSC回覆的通訊作者Brian Nosek告訴Verge然而,這並不是一個得出可靠結論的好方法。”諾斯克說,使用這種方法可以從他們的資料中得出其他強有力的結論,但這些結論與吉爾伯特及其同事得出的結論一樣“毫無道理”。
那麼哪個結論是正確的呢?目前,還沒有確切的答案。”斯坦福大學教授約翰·伊阿尼迪斯(John Ioannidis)在2005年的一篇論文《為什麼大多數發表的研究結果都是錯誤的》中說:“即使是頂尖的科學家,在解釋什麼是非常可靠的結果時也會有分歧。”,吉爾伯特說,吉爾伯特的批評並沒有改變他對OSC研究的解讀:如果有的話,他們可能高估了可複製研究的數量。”但建設性的辯論總是有用的。
OSC一直強調問題可能在於繁殖
從某種意義上說,這種批評強調了原始研究提出的一個觀點。僅僅閱讀OSC調查結果的頭條解釋可能會讓你相信大多數心理學都是無稽之談;但事實上,這項研究從來沒有找到一個確切的原因來解釋為什麼這麼多的發現無法重現。吉爾伯特和他的同事認為,這是因為OSC的方法有缺陷,允許不良的複製。OSC的回答是:是的,完全可能是這樣。
畢竟,OSC的一個原始發現是,既然沒有一個標準來確定研究複製應該是什麼樣的,那麼當複製失敗時,就沒有辦法就它的含義達成一致。原來的科學是錯的嗎?還是複製差異太大?”如果觀察到的結果與原始的不同,可能是原始的是錯誤的,複製的是錯誤的,或者兩者都是正確的,因為它們之間的差異解釋了為什麼他們發現了不同的結果。在他看來,OSC的研究並沒有足夠的資訊來說明這三種情況中的哪一種。
科學家們正在研究其他學科的再現率。在另一項同樣發表在《今日科學》上的研究中,研究人員報告說,他們試圖複製主要經濟學期刊上的18項最新研究,借鑒了OSC心理學研究的方法。在11個病例中——61%的時間——他們能夠重現最初的結果;在另外三個案例中,結果也接近複製。”我們報告的實驗經濟學的(可複製性)率是我們所知的任何領域中最高的,”因斯布魯克大學金融學教授、論文合著者尤爾根·胡伯(Juergen Huber)在一份宣告中說。然而,他們的結果來自一個小得多的複製品樣本。
“證據積累緩慢。對解釋的信心更慢。”
吉爾伯特會爭辯說,不管在哪個領域,首先採取更好的複製方法可能會導致更明確的結果。”是的,複製可以做得很好,是的,做得很好很難,”他在一封全大寫的電子郵件中寫道但是僅僅因為很難做好一件事並不意味著你就應該做得很差。這既適用於複製,也適用於在公共場合拉小提琴。”
對於OSC來說,他們的工作仍然是難題的一部分。正如他們從一開始就說的那樣,從他們的結果中還沒有得出確切的結論。”證據積累緩慢。“對解釋的信心是緩慢的,”諾斯克說我們有信心的結論是,目前還沒有足夠的證據來解釋這些差異。”
...表哲學博士。這是最高學歷。所有的學生如果想成為一名科學家,或者想成為一名專業人士,就必須讀博士學位。博士學位是提供給任何學科領域的博士學位。這意味著,如果你學習理科,你將獲得同樣的學位。不過,最後你會...
...否能完全阻斷病毒感染,或者是否主要能使人無症狀。 科學家們不知道接種過疫苗的人身上一個輕微的病例是否足以引發持續的症狀。約翰霍普金斯大學的流行病學家Priya Duggal說:“我認為他們很可能做到了。”他也在研究COVID...
...明顯,是的,不感到噁心的人有可能感染其他人。不過,科學家們仍然不知道這種情況發生的頻率。這對控制流感大流行很重要:如果只有少數人在沒有症狀的情況下傳播了COVID-19,那麼錯過它們可能不會對流感大流行的程序產...
很快,孩子們就會被診斷出另一種註意力障礙。心理學家正在研究以白日夢、心不在焉和昏昏欲睡為特徵的遲緩認知節奏(SCT)是否有一系列明顯的癥狀,是否可以作為一種合法的障礙而被納入研究行列。如果真是這樣,這將為...
說迷幻蘑菇“讓你敞開心扉”是一回事,但在科學研究中證明它的夢幻效果則完全是另一回事。然而,這正是一組研究人員在今天發表在《人腦圖譜》上的一項研究中所取得的成果。 這些影響類似於我...
...的基礎上。然而,我們知道這些趨勢存在的唯一原因是,科學家在受控的實驗室環境中測試了各種情景,以瞭解不同人群的反應。 但今天發表在《科學》雜誌上的一項新研究將道德研究從實驗室帶到了街頭,這意...
...球的一個基本問題:很可能不是來自彗星。他們今天在《科學》上發表了他們的發現。 大約40億年前,隕石多次猛烈撞擊年輕的地球,這是一場被稱為“晚期重轟擊”的暴力事件。這發生在我們星球的地殼開始冷...
...我們去火星,但專家們說,這很可能是一廂情願的想法和科學錯誤的結果。 “這是一個小小的努力,但尚未取得任何實際成果。” 就像機器本身一樣,電磁驅動器的覆蓋範圍也在不停地移動,顯然,完全沒有...
...曲的關係大約15年了,但直到最近,繭網本身還是個謎。科學家們現在不知道它與蜘蛛經常出沒的地方有什麼區別。現在,對繭網的深入分析表明,繭網與蜘蛛的“休息網”非常相似,蜘蛛在蛻皮時使用這種“休息網”。也就是...
...發的風險。 根據今天發表在《科學翻譯醫學》上的一項研究,在接受過手術和化療後,腫瘤DNA檢測呈陽性的**複發的可能性是陰性**的12倍。考慮到腫瘤DNA可以在實際臨床複發發生前幾個月被檢測到,醫...