提升再現性的方法

前一節說明了可能導致再現性不佳的原因,本節將提出可以提升再現性的方式,分別說明之(McNutt,2014;Baker,2016;Resnik and Shamoo,2017;GAO,2022)。下列的方法根源自研究者應該對於自身的研究秉持嚴謹及負責的態度。

● 仔細確認研究方法及內容

在研究完成之後,研究者應該再次仔細確認研究的內容及數據。如果研究者發現其研究結果無法重現,研究者應該重新審視研究方法、實驗材料、研究步驟,找出現有研究所忽略的細節,藉由修正或強化研究內容,提升自身研究的再現性。舉例來說,研究者根據實驗室筆記,重新檢視每一個研究步驟是否正確進行;找同儕重先跑過實驗資料的統計或核對論文表格中呈現的每一筆數字有沒有誤植等。

● 揭露研究的重要資訊

研究的透明度是研究發表及論文出版時的基本原則,許多的研究資訊應該要適當地揭露,例如研究設計、假設、方法、步驟、材料與設備、資料分析的方法和工具、受試者或實驗動物的資訊、是否有具有局限性或是例外情形,以及來自研究者可能的偏見、以及利益衝突等。

● 提升統計分析的技巧與知識

若是在研究資料的分析過程中,使用了統計相關的方法,就必須注意到再現性的問題。例如,研究的樣本數必須夠多才能確認顯著性、隨機取樣以及盲性分析可以降低醫學或動物實驗的偏差等。因此,提升統計學的基本概念,以及分析時的技巧,可以降低他人無法重複研究成果的情形。此外,作者也應該詳細揭露統計方法及細節,展現出對自身研究負責的態度。

● 強化實驗室的管理與教育

許多再現性不佳的原因,與該實驗室的管理與教育有關。與管理相關事務包含資料管理、設備維護與更新、工作的分配及責任等等;而教育的面向則是在於強化實驗室所有成員對於再現性的重視,並培養相關的學術倫理概念與素養,以提高研究結果的再現性,及避免因再現性不佳引發的學術倫理爭議。

● 妥善保存研究資料

妥善地保存及與記錄研究資料,不但可以使原作者降低無心的錯誤或是再現性不佳的問題,更可提供他人重複研究及驗證之用,進一步鞏固原作者的研究成果。簡言之,重要研究資料需具備可得性(accessibility),以供外界索取作為重現研究時的重要資訊。

除了研究者在自己的私人系統中保存資料,也可以選擇在公開的「資料典藏庫」(data repository)中保存研究資料。「資料典藏庫」可保存的資料種類很多,包含研究數據、電腦程式碼、數位聲音及影像檔案。除了妥善地保存資料外,資料典藏庫也讓所有人可以自由地取用這些資料。對研究者而言,資料典藏庫可以協助管理、組織、儲存與公開研究資料,以符合研究資助或出版單位的規範(國立臺灣大學圖書館,無日期)。透過公開研究資料與過程,可以提高研究的透明度,降低他人無法重現相同研究的可能性。現在世界有些大學都發展自己的研究數據資料庫,也有商用的系統(如 Microsoft Dataverse)可供選擇利用。

● 嘗試進行預先註冊、註冊報告、投稿預印本論文等

預先註冊(preregistration)、註冊報告(registered reports)、預印本論文(preprint)等工具及方法,其目的都是希望透過研究者的資訊揭露,以提升研究設計、資料及結果分析,以及論文出版的嚴謹度和透明度(GAO,2022)。以上的方法,也是開放科學(open science)概念中非常重要的一環(周倩,2022)。

「預先註冊」指的是作者在進行研究之前,將研究的假設、預定採用的研究法、資料蒐集的方式、統計及分析的方法等,公開給所有人可以取得。預先註冊不但可以提升研究的透明度,也可讓其他研究者可以瞭解研究的規劃、給予評論及回饋,研究者可以根據他人的意見,修正研究的設計及研究方法等,對於提升研究品質及嚴謹度很有幫助。

另一種和預先註冊十分類似的方法為是「註冊報告」,註冊報告和預先註冊最大的差異之處,在於前者所註冊公開的場域,主要是期刊出版社所提供的平台。當研究者把研究構想及計畫向期刊出版社註冊報告之後,會進行第一階段的同儕審查;當同儕審查確認了研究主題及計畫的重要性,以及研究方法可行,期刊出版社將確保研究結果可以出版刊登。此時研究者必須依循研究計畫的規劃及步驟,或是輔以合理的修正,逐步完成該研究並結果公開發表。由於註冊報告關注的重點在於研究設計及方法的品質,而非最終的結果,研究者將不會為了展現研究正面的貢獻,或是迎合既有的理論或假說,而做出學術不當行為,也可以有效地提升研究的再現性。此外,不論是「成功」或是「失敗」的研究,其研究過程及內容均可能有重要的貢獻,註冊報告可以避免當今學術界因對於「成功」的研究的讚美與偏好,而忽略了「失敗」的研究有時也有不可忽略的重要性。

「預印本論文」是指論文寫作者在公開的預印本伺服器(preprint server)上發表自己研究成果的方式,和一般期刊論文最大的差別是,多數預印本論文在上傳到伺服器時,還沒有通過同儕審查的程序(潘璿安,2022)。由於預印本論文公開在預印本伺服器,公眾可以自由取得論文,不但可以提升論文的透明度,也因為其他研究者可以立即給予回饋與建議,研究的嚴謹度也可有效地提高,進一步可以推升研究的再現性。但另一方面,由於預印本論文不需通過同儕審查,因此也可能會有論文品質不佳的情形,進而造成該研究的再現性不佳。此外,投稿預印本論文時,研究者需要注意出版的相關規範,以及避免造成一稿多投與重複出版之情形(潘璿安,2022)。