【摘要】開放科學(xué)已成為提升傳播學(xué)研究質(zhì)量的重要手段。自2015年起,西方傳播學(xué)領(lǐng)域便開始探索開放科學(xué)的多種實踐路徑,經(jīng)過近十年的發(fā)展已取得顯著進(jìn)展。與此同時,中國在開放科學(xué)的應(yīng)用上仍處于起步階段,缺乏成熟的經(jīng)驗和體系。通過分析西方傳播學(xué)如何運用預(yù)注冊研究、分享研究材料與方法、實施開放科學(xué)徽章、鼓勵復(fù)制性研究和推廣透明度及開放性指南等措施,來增強(qiáng)研究的透明度與復(fù)制性,提高公眾對科學(xué)研究的信任度,可以為開放科學(xué)于中國傳播學(xué)應(yīng)用的創(chuàng)新實踐提供重要借鑒,推動國內(nèi)傳播學(xué)高質(zhì)量研究與應(yīng)用。
【關(guān)鍵詞】開放科學(xué) 開放傳播學(xué) 研究透明性 復(fù)制性研究
【中圖分類號】G206 【文獻(xiàn)標(biāo)識碼】A
【DOI】10.16619/j.cnki.rmltxsqy.2024.20.010
【作者簡介】徐敬宏,北京師范大學(xué)新聞傳播學(xué)院教授、博導(dǎo),全域認(rèn)知與國際傳播安徽省哲學(xué)社會科學(xué)重點實驗室研究員。研究方向為新媒體與互聯(lián)網(wǎng)治理、健康傳播與跨文化傳播、影視與游戲。主要著作有《網(wǎng)絡(luò)傳播中的隱私權(quán)及其保護(hù)》《社交媒體中的隱私侵權(quán)問題研究》《建設(shè)性新聞對受眾風(fēng)險感知與應(yīng)對的影響研究——以健康傳播為例》(論文)、《習(xí)近平全球互聯(lián)網(wǎng)治理重要論述研究:理論邏輯與實踐路徑》(論文)等。
引言
早在2015年,西方傳播學(xué)就開始了對開放科學(xué)的探索,當(dāng)時Communication Methods and Measures出版了以開放科學(xué)為主題的專輯,掀起了關(guān)于“傳播學(xué)中存在的可疑研究和出版實踐”的思考。2021年,國際傳播學(xué)會(ICA)的旗艦刊物Journal of Communication以“開放傳播學(xué)研究”為主題出版特刊,其中33位知名傳播學(xué)研究者聯(lián)合署名,發(fā)表了名為《傳播學(xué)領(lǐng)域的開放科學(xué)議程》的論文,引發(fā)了傳播學(xué)學(xué)界的軒然大波。時至今日,一系列傳播學(xué)權(quán)威期刊針對開放科學(xué)進(jìn)行了專刊探討,包括Digital Journalism、Media and Communication、Communication Research Reports等,呼吁“開放傳播學(xué)”的實踐,倡導(dǎo)實現(xiàn)傳播學(xué)研究在多個環(huán)節(jié)的開放,包括預(yù)注冊、開放數(shù)據(jù)等。
經(jīng)過近十年的研究積累,西方傳播學(xué)逐漸形成了一系列促進(jìn)開放科學(xué)融入傳播學(xué)實踐的方案。開放科學(xué)在國際層面的發(fā)展顯示了其逐漸成為科學(xué)研究與學(xué)術(shù)出版行業(yè)創(chuàng)新的重要方向和手段。從早期的“三大宣言”(即2002年的《布達(dá)佩斯開放獲取倡議》、2003年的《貝塞斯達(dá)開放獲取出版聲明》以及《關(guān)于科學(xué)與人文知識開放獲取的柏林聲明》)開始,開放科學(xué)就強(qiáng)調(diào)了學(xué)術(shù)出版物作為公共資源的共享屬性,提出的開放獲取模式被學(xué)術(shù)研究領(lǐng)域和傳播領(lǐng)域廣泛采納。此外,由開放科學(xué)中心(Center for Open Science, COS)開發(fā)的開放科學(xué)框架(Open Science Framework, OSF)的推出,進(jìn)一步促進(jìn)了研究過程的透明性和可追溯性,支持研究者在研究的各個階段進(jìn)行開放和中心化的協(xié)作。2021年,聯(lián)合國教科文組織(UNESCO)發(fā)布了《開放科學(xué)建議書》,不僅標(biāo)志著國際社會對開放科學(xué)核心原則和實踐的廣泛認(rèn)可,也為全球開放科學(xué)政策和實踐提供了一個國際框架。由此,開放科學(xué)逐漸成為推動科學(xué)進(jìn)步、增強(qiáng)學(xué)術(shù)研究透明度和公眾參與的關(guān)鍵工具。
目前,我國傳播學(xué)對于開放科學(xué)的探索尚處于萌芽階段,缺乏開展開放科學(xué)的理論背書和實踐經(jīng)驗。近些年的相關(guān)研究表明,中國在開放科學(xué)理論與實踐領(lǐng)域面臨著諸如公眾對開放共享的認(rèn)識不足、數(shù)據(jù)共享的界限不清晰、缺乏數(shù)據(jù)管理的規(guī)范化以及激勵機(jī)制不完善等挑戰(zhàn)。[1]為此,詳細(xì)梳理西方傳播學(xué)通過預(yù)注冊研究、分享研究材料和方法、實施開放科學(xué)徽章、鼓勵復(fù)制性研究以及推廣透明度和開放性指南等措施,能夠增強(qiáng)研究者對開放科學(xué)的理解、促進(jìn)傳播學(xué)的學(xué)科創(chuàng)新發(fā)展,對開放科學(xué)在我國傳播學(xué)領(lǐng)域的應(yīng)用具有借鑒意義。
對研究進(jìn)行預(yù)注冊
預(yù)注冊。預(yù)注冊是開放科學(xué)中的一個重要概念,旨在提高研究的透明度和可靠性。根據(jù)Nosek等人的定義,預(yù)注冊(Preregistration)是指在數(shù)據(jù)收集或數(shù)據(jù)分析開始之前,將假設(shè)、研究設(shè)計和分析計劃明確地記載在官方的登記處的過程。[2]2013年,Nosek和Spies等學(xué)者建立了開放科學(xué)中心(Center for Open Science)網(wǎng)站(網(wǎng)址為https://osf.io/),提供免費服務(wù)。開放科學(xué)中心在2020年提出了一個全面的指南,不僅便于預(yù)注冊(網(wǎng)址為https://osf.io/jea94/),還便于存儲和共享數(shù)據(jù)、代碼及其他研究材料。在一些垂直細(xì)分的研究領(lǐng)域,研究者也開發(fā)了適合自身所在學(xué)科的預(yù)注冊規(guī)范。
預(yù)注冊包含以下幾個步驟:一是明確研究假設(shè)和目標(biāo)。在預(yù)注冊之前,研究者需要明確他們的研究假設(shè)和目標(biāo),包括詳細(xì)描述研究問題和概述預(yù)期的研究發(fā)現(xiàn)。二是詳細(xì)描述研究設(shè)計。研究設(shè)計應(yīng)包括進(jìn)行問卷調(diào)查或?qū)嶒灥姆椒?,如樣本選擇、實驗設(shè)置和數(shù)據(jù)收集方法等。三是制定數(shù)據(jù)分析計劃。這一步驟要求研究者詳細(xì)說明他們將如何分析數(shù)據(jù),包括使用的統(tǒng)計方法和數(shù)據(jù)處理的過程。四是計算樣本量和功效。為了防止樣本量過小導(dǎo)致低功效統(tǒng)計,研究者應(yīng)事先進(jìn)行功效分析,從而確定所需的樣本量。五是上傳預(yù)注冊文件。研究者將上述所有信息匯編成文檔,并在AsPredicted[3]或OSF[4]等官方平臺上進(jìn)行注冊。六是對預(yù)注冊文件進(jìn)行設(shè)置。一旦完成注冊,平臺將保存研究計劃,提供時間戳證明,研究計劃將不可以更改。研究者可以設(shè)置在一段時間后公開預(yù)注冊信息或者立即公開,也可以將預(yù)注冊鏈接到即將發(fā)表的論文上,以便讀者比較研究計劃和實際進(jìn)行的研究之間的異同。
預(yù)注冊對于提升我國傳播學(xué)研究質(zhì)量具有重要借鑒意義。首先,預(yù)注冊有助于防止“Harking”(Hypothesizing after the Results are Known,即在已知結(jié)果后提出假設(shè))和“P-Hacking”(通過選擇性地報告數(shù)據(jù)或分析達(dá)到顯著性水平的不當(dāng)操作)。“HARKing”和“P-hacking”這些行為可能會帶來虛假的研究結(jié)果,而預(yù)注冊通過事先確定研究步驟和分析方法來減少這種可能性。例如,Schafer和Schwarz從過去沒有預(yù)注冊的出版物中隨機(jī)抽取了900個效應(yīng),并與93個來自預(yù)注冊出版物的效應(yīng)進(jìn)行了比較,結(jié)果顯示預(yù)注冊研究的效應(yīng)值(r=.16)不到未預(yù)注冊研究(r=.36)的一半,這表明預(yù)注冊可以有效降低“假陽性”的風(fēng)險。[5]其次,預(yù)注冊不會妨礙研究人員進(jìn)行后續(xù)的探索性數(shù)據(jù)分析,但要求研究者明確區(qū)分驗證性分析和探索性分析。探索性分析對于科學(xué)的進(jìn)步至關(guān)重要,它們不應(yīng)該被偽裝成驗證性分析,而應(yīng)該被放在研究報告更顯眼的位置,預(yù)注冊有助于提高研究的透明度,使其他研究人員能夠更清楚地理解研究的設(shè)計和分析方法。最后,預(yù)注冊還可以提高研究的可復(fù)制性。通過公開詳細(xì)的研究計劃,其他研究人員可以更準(zhǔn)確地復(fù)制研究,從而驗證研究結(jié)果的可靠性。
預(yù)注冊報告。和預(yù)注冊緊密相關(guān)的一個概念是預(yù)注冊報告(Registered Reports)。預(yù)注冊報告的核心思想是在研究開始之前,對研究設(shè)計、方法和分析計劃進(jìn)行同行評議,審稿人根據(jù)研究問題和研究設(shè)計的優(yōu)缺點來評估手稿,而不是基于研究結(jié)果。預(yù)注冊報告可以被看作預(yù)注冊的邏輯延伸,區(qū)別在于預(yù)注冊報告將同行評議的過程提前到開展研究之前。
預(yù)注冊報告一般包含兩個階段:在第一階段,研究者提交一份包含引言、方法、樣本大小等信息的提案,然后評審人員評估這個研究提案的優(yōu)缺點。如果評審?fù)ㄟ^,研究者的論文將獲得“原則上的接受”,這意味著只要按照提案指定的方式進(jìn)行,無論結(jié)果如何,論文都保證會被發(fā)表。在獲得“原則上的接受”后,研究者按照預(yù)注冊的計劃進(jìn)行數(shù)據(jù)收集和研究。在第二階段,研究者提交完整的論文初稿,包括他們預(yù)注冊的分析計劃的結(jié)果、探索性結(jié)果和對發(fā)現(xiàn)的討論,任何偏離預(yù)注冊的內(nèi)容都需要進(jìn)行解釋。在第二輪同行評審中,評審人員評估這項研究是否符合原本的計劃,并提供反饋。
預(yù)注冊報告將同行評審的步驟提前的措施方法,對我們傳播學(xué)研究具有以下借鑒意義:首先,改進(jìn)研究設(shè)計。預(yù)注冊報告在研究進(jìn)行之前就提供了同行評議,與傳統(tǒng)的模式相比,在研究實施前評審人員可以提出建議來強(qiáng)化研究方法、提升研究質(zhì)量,從而避免潛在的設(shè)計缺陷。其次,消除發(fā)表偏見。由于預(yù)注冊報告采用“原則性接受”政策,其發(fā)表與否不依賴于研究結(jié)果。這意味著無論研究結(jié)果是正面還是負(fù)面,只要研究按照預(yù)先批準(zhǔn)的計劃進(jìn)行,就有可能被發(fā)表。這樣可以消除對非顯著結(jié)果的發(fā)表偏見,使得研究結(jié)果更加真實可靠。再次,鼓勵探索性研究。預(yù)注冊報告不僅可以用于驗證性研究,而且支持探索性研究,使研究者能夠自由地追求新的科學(xué)發(fā)現(xiàn),而不必?fù)?dān)心這些發(fā)現(xiàn)是否符合傳統(tǒng)的“顯著性”標(biāo)準(zhǔn)。最后,提高科學(xué)研究的透明度和可復(fù)制性。預(yù)注冊報告在研究開始之前明確研究設(shè)計和分析計劃,增加了科學(xué)研究的透明度,有助于其他研究者重復(fù)和驗證研究結(jié)果。
分享研究材料、數(shù)據(jù)和方法
分享的注意事項。在滿足倫理和道德要求的情況下,應(yīng)該鼓勵研究人員分享研究過程中產(chǎn)生的各類信息,這些信息包括研究材料(問卷題目、實驗刺激材料、實驗協(xié)議、實驗指導(dǎo)、內(nèi)容分析的編碼表、元分析的編碼表等)、研究數(shù)據(jù)(原始數(shù)據(jù)、聚合數(shù)據(jù)、處理數(shù)據(jù)或合成數(shù)據(jù)等)和研究方法(實驗的操作和模擬環(huán)境、內(nèi)容編碼工具、網(wǎng)絡(luò)爬蟲工具、應(yīng)用程序等)。對此,我國傳播學(xué)研究者在分享研究材料、研究數(shù)據(jù)和研究方法的時候需要注意以下事項。[6]
研究材料有多種類型,在簡單的研究中,材料可能是問卷的題項或手動呈現(xiàn)給參與者的實驗刺激(視頻、圖像、聲音等);在稍微復(fù)雜一些的研究中,研究材料可能包括復(fù)雜的視頻刺激、與參與者交互的計算機(jī)程序或者用于呈現(xiàn)刺激和收集響應(yīng)的計算機(jī)代碼。一些與人相關(guān)的實驗研究還涉及知情同意材料。分享這些研究材料對于研究結(jié)果的解釋和其他研究者進(jìn)行復(fù)制研究都是有價值的。同時,讀者或?qū)徃迦诉€可以通過實驗材料對特定現(xiàn)象或范式進(jìn)行細(xì)致的洞察。
分享數(shù)據(jù)是透明和開放的關(guān)鍵,研究人員必須決定分享哪些數(shù)據(jù)。“原始數(shù)據(jù)”是由軟件(如問卷平臺)、實驗者、攝像機(jī)或其他儀器等記錄的初始數(shù)據(jù),這類數(shù)據(jù)可能含有或能夠識別個人信息,因而分享此類數(shù)據(jù)具有較高的隱私風(fēng)險。對此,一些情況下可以對這類數(shù)據(jù)進(jìn)行匿名化處理,而另一些情況下進(jìn)行匿名化處理則非常困難,例如對視頻數(shù)據(jù)。但是對于大部分文本數(shù)據(jù)而言,可以用表格的形式對數(shù)據(jù)進(jìn)行匿名化統(tǒng)計分析。這些數(shù)據(jù)的存儲格式應(yīng)該是常見的、通用的格式(如帶有逗號分隔的txt或者csv),而不需要依賴某一特定軟件才可以讀取和編輯,理想情況下,研究者不僅分享原始數(shù)據(jù),還一同分享在處理數(shù)據(jù)過程中生成的腳本,以確保數(shù)據(jù)分析過程的公開透明。
研究方法是一份詳細(xì)的書面說明,其中包括假設(shè)、方法和分析方案等信息。對于相對簡單的研究,可以在研究報告的正文中包含所有這些信息,或者可以創(chuàng)建一個單獨的說明文件,并在報告正文中提供更高層次的總結(jié)。對于某些實驗程序,為了使讀者更好理解,可以拍攝指導(dǎo)性的視頻素材??傊?,研究方案可以被視為文字表達(dá)層次,其匯集和描述了具體的研究產(chǎn)品,如材料、軟件和分析代碼等,并告知讀者在研究中如何應(yīng)用。無論采用哪種方式,研究方案都需要具備足夠的細(xì)節(jié),這樣其他研究者可以在無原作者幫助的情況下復(fù)制前人的研究。
遵循“FAIR”數(shù)據(jù)原則。在分享研究材料、數(shù)據(jù)和方法時,需要遵循一定的標(biāo)準(zhǔn)原則。目前比較流行的是“FAIR”數(shù)據(jù)原則,該原則由Wilkinson等在2016年提出,目前被引用量已經(jīng)破萬,成為公認(rèn)的數(shù)據(jù)分享準(zhǔn)則。“FAIR”數(shù)據(jù)原則遵循可查找性(Findability)、可獲得性(Accessibility)、互操作性(Interoperability)和可重用性(Reusability)。表1羅列了Wilkinson等提出的“FAIR”數(shù)據(jù)原則的內(nèi)容。[7]
分享研究材料、數(shù)據(jù)和方法對我國傳播學(xué)研究具有重要意義:第一,可以增強(qiáng)研究的透明度和信任度。分享研究數(shù)據(jù)、材料和方法有助于提高研究過程的透明度,這種透明度對于在科學(xué)界、政策制定者和公眾之間建立信任至關(guān)重要。研究者開放其數(shù)據(jù)和材料是他們積極參與開放科學(xué)實踐的重要環(huán)節(jié),這種開放性可以增加研究發(fā)現(xiàn)的可信度。第二,方便進(jìn)行元分析和系統(tǒng)性綜述研究。通過分享數(shù)據(jù)、材料和方法,研究人員可以獲得必要的數(shù)據(jù)細(xì)節(jié),以便對前人的研究進(jìn)行元分析和系統(tǒng)性評價。同時,研究者可以總結(jié)某一領(lǐng)域的研究趨勢、概括前人的研究發(fā)現(xiàn),有助于研究者得出更加穩(wěn)健的結(jié)論,更好地理解某一領(lǐng)域。第三,可以減少重復(fù)勞動,促進(jìn)跨學(xué)科合作。不同領(lǐng)域的研究人員可以利用共享材料,而無需自己重新收集,這不僅節(jié)省了時間和資源,避免了重復(fù)努力,減少了科研成本,而且為更廣泛的研究群體參與科學(xué)對話提供了便利,并為潛在科研方向帶來新的視角、批評和對研究方法論與理論的改進(jìn)。此外,后續(xù)研究者也可以在前人的基礎(chǔ)上應(yīng)用新視角或新方法,加快科研創(chuàng)新進(jìn)程。第四,豐富教學(xué)和培訓(xùn)資料。從教育的視角來看,共享研究材料無疑是無價之寶,這些材料為學(xué)生和研究人員提供了進(jìn)行學(xué)習(xí)和分析的真實例子與數(shù)據(jù)集,增強(qiáng)了教育體驗,促進(jìn)了實踐技能的培養(yǎng)。第五,有助于數(shù)據(jù)的長期保存,增強(qiáng)數(shù)據(jù)的可訪問性,提高研究的影響力和可見性。對研究數(shù)據(jù)、材料和方法進(jìn)行分享和歸檔確保了它們能被長期保存和訪問。對于罕見或獨特的數(shù)據(jù)集而言,這一實踐尤為重要,一旦這些數(shù)據(jù)丟失,就很難重建。此外,分享科研數(shù)據(jù)還可以增加研究的可見性,使研究成果獲得更多引用,提升研究者的專業(yè)形象和影響力。第六,促進(jìn)公眾參與和支持。分享研究數(shù)據(jù)、材料和方法可以彌合學(xué)術(shù)界與公眾之間的信息和知識鴻溝,從業(yè)者、政策制定者和其他利益相關(guān)者可以直接獲取公開的數(shù)據(jù),直接將其應(yīng)用在相應(yīng)的領(lǐng)域中,從而增加研究的社會影響;同時,這種做法不僅惠及科學(xué)界,而且促進(jìn)了知情決策和公眾參與,有助于培養(yǎng)公眾對研究者的信任,使開放科學(xué)應(yīng)用更迅速、更廣泛。
頒發(fā)開放科學(xué)徽章
徽章的目的與分類。開放科學(xué)徽章(Open Science Badges)是一種旨在提升科學(xué)透明度的方法,最初是為了鼓勵科學(xué)研究中的開放實踐而設(shè)計的。開放科學(xué)徽章的引入始于2014年,最早由心理學(xué)權(quán)威刊物Psychological Science(2023年影響因子4.8)采用。開放科學(xué)徽章被用來標(biāo)記和表彰公開數(shù)據(jù)、公開材料,或已經(jīng)預(yù)先注冊的研究。
不同類型的開放科學(xué)徽章都需具備特定的申請條件。以Wiley數(shù)據(jù)庫為例,其規(guī)定了三種類型的開放科學(xué)徽章,分別代表作者實施了不同的開放科學(xué)實踐。[8]一是開放數(shù)據(jù)徽章(Open Data Badge):這個徽章表示作者共享了必要的、數(shù)字化的研究數(shù)據(jù),使其他研究人員可以訪問和使用這些數(shù)據(jù)。對于危及保密性或參與者匿名性的數(shù)據(jù),并不在開放數(shù)據(jù)的規(guī)范之內(nèi),這類數(shù)據(jù)也不會被授予開放數(shù)據(jù)徽章。二是開放材料徽章(Open Materials Badge):開放材料徽章表示作者提供了他們研究中使用的材料,如實驗設(shè)計、問卷或測量工具等,這些材料是寫作方法論的組成部分,也是復(fù)現(xiàn)所需的重要材料。任何無法數(shù)字共享的組件都必須詳細(xì)描述,以便其他研究者理解如何復(fù)現(xiàn)論文的程序,以及材料與方法論之間的關(guān)系。三是預(yù)注冊徽章(Preregistered Badge):預(yù)注冊徽章是為擁有預(yù)注冊設(shè)計的研究而授予的,而且在可能的情況下,研究材料本身也包括在內(nèi)。這并不限制作者報告額外分析的結(jié)果,作者可以隨時向徽章中添加注釋,如“預(yù)注冊+分析計劃徽章”,該徽章還包括研究的分析計劃和報告結(jié)果。
其他數(shù)據(jù)庫也采用了類似的開放科學(xué)徽章政策,例如,Sage數(shù)據(jù)庫旗下的傳播學(xué)期刊Communication Research同樣提供了三種類型的開放科學(xué)徽章。[9]一是開放數(shù)據(jù)徽章:要求提供用于訪問公開可用數(shù)據(jù)的URL、DOI或其他永久路徑。這些數(shù)據(jù)必須存放在一個公開的、永久性的開放存取數(shù)據(jù)庫中,且需要有足夠的信息使其他研究者能夠復(fù)現(xiàn)所有報告的結(jié)論。二是開放材料徽章:需要提供訪問研究材料的URL、DOI或其他永久路徑,這些材料同樣應(yīng)存放在公開的、永久性的開放存取數(shù)據(jù)庫中,必須確保有足夠的信息供其他研究者復(fù)現(xiàn)所有報告的方法。三是預(yù)注冊徽章:要求提供訪問預(yù)注冊研究計劃的URL、DOI或其他永久路徑,數(shù)據(jù)分析計劃必須在分析數(shù)據(jù)或觀察結(jié)果之前預(yù)先注冊,并且應(yīng)該詳細(xì)說明是否變更了原本的預(yù)注冊分析計劃。
徽章的呈現(xiàn)與意義。開放科學(xué)徽章一般以可視化標(biāo)志的形式在論文的檢索和內(nèi)容頁面進(jìn)行展示。例如,Communication Research Reports是傳播學(xué)領(lǐng)域最早采納開放科學(xué)徽章的期刊之一[10],它被Taylor & Francis數(shù)據(jù)庫收錄,用戶可以訪問每期期刊目錄,如果文章申請了開放科學(xué)徽章,文章文本框的右下角就會顯示。更進(jìn)一步,在文章的PDF版本中,徽章標(biāo)志會出現(xiàn)在兩個地方。一個在文章的封面,徽章會出現(xiàn)在文章屬性列表中(這些屬性還包括文章瀏覽次數(shù)、相關(guān)文章鏈接和補(bǔ)充材料等);另一個在文章的末尾,在“參考文獻(xiàn)”部分上方的“開放學(xué)術(shù)”(Open Scholarship)部分,徽章會以行內(nèi)形式顯示,與頁面的左邊距對齊。通過這些方式,Communication Research Reports將開放科學(xué)徽章的存在和其意義直觀地展示給讀者和研究人員,從而表達(dá)對開放科學(xué)實踐的鼓勵和認(rèn)可。這些徽章代表了文章在數(shù)據(jù)共享、研究方法的公開,或研究設(shè)計的預(yù)注冊等開放科學(xué)方面的貢獻(xiàn)。
Schneide等人研究了開放科學(xué)徽章是否能影響學(xué)生、科學(xué)家和公眾對科學(xué)家的信任。他們進(jìn)行了三項實驗研究,實驗對象分別為大學(xué)生(270人)、科學(xué)家(250人)和公眾(257人)。參與者被隨機(jī)分配到三種場景之一:授予開放科學(xué)徽章(表明遵守開放科學(xué)實踐),未授予開放科學(xué)徽章(表明未遵守開放科學(xué)實踐)和開放科學(xué)無徽章(對照組)。研究發(fā)現(xiàn),除了公眾樣本不顯著外,徽章對信任的影響與預(yù)期一致,即開放科學(xué)徽章是增強(qiáng)科學(xué)論文目標(biāo)受眾對科學(xué)家信任的有效手段。[11]這表明,開放科學(xué)徽章標(biāo)示出研究遵循了開放科學(xué)實踐,有助于提高目標(biāo)受眾對科學(xué)家的信任。因此,徽章作為一種可視化、直接突出的標(biāo)志,有助于強(qiáng)化科學(xué)的透明度和可信度,提升公眾對學(xué)術(shù)研究的信任度和接受度。雖然研究并未發(fā)現(xiàn)開放科學(xué)徽章在公眾樣本中具有顯著的效果,但它在學(xué)術(shù)界和教育領(lǐng)域的正面影響不容忽視。在科學(xué)傳播和教育中,應(yīng)更多地采用和強(qiáng)調(diào)開放科學(xué)實踐,以提升科學(xué)研究的整體信譽(yù)和接受度。
鼓勵復(fù)制性研究
復(fù)制性研究的類型。Dienlin等人歸納了三種復(fù)制性研究。[12]第一種是直接復(fù)制(Direct Replications)。研究者使用與原始研究相同的操作定義和數(shù)據(jù)分析方法重新進(jìn)行研究,這種復(fù)制的目的是確保原始研究的結(jié)果是可重復(fù)的,即在相同的條件下,其他研究者可以得到相同的結(jié)果。第二種是近似復(fù)制(Close Replications)。研究者雖然保持了原始研究的主要特征,但在某些方面進(jìn)行了調(diào)整。例如,可能會更新刺激材料或稍微改變研究條件,以測試研究結(jié)果在略有不同的條件下是否依然成立。第三種是概念復(fù)制(Conceptual Replications)。研究者可能會重新進(jìn)行部分研究或使用不同的操作定義,這種復(fù)制的目的是測試原始研究的概念或理論假設(shè)是否在不同的方法或條件下依然有效。同時,Dienlin等人也強(qiáng)調(diào),內(nèi)部復(fù)制(Internal Replications),即研究者復(fù)制自己的工作,并不一定能確保其他人也能獨立地復(fù)制自己的研究。鑒于科學(xué)方法的要求和自我糾錯的必要性,復(fù)制其他研究者的研究仍是非常必要的。
復(fù)制性研究的注意事項。鼓勵復(fù)制性研究需要多方主體的共同參與。首先,編輯和審稿人應(yīng)對復(fù)制性研究持開放態(tài)度,認(rèn)識到這類研究的重要性;期刊可以通過專欄或?qū)iT的議題來提升復(fù)制性研究的曝光率,鼓勵學(xué)術(shù)界對復(fù)制性研究進(jìn)行討論。其次,期刊需要對發(fā)表高質(zhì)量的復(fù)制性研究負(fù)責(zé),做好把關(guān)和篩選,通過提供專門的資金、簡化投稿過程或提高復(fù)制性研究的優(yōu)先級等措施鼓勵作者進(jìn)行高質(zhì)量的復(fù)制性研究。再次,作者可以尋求與其他領(lǐng)域的研究者開展合作,利用不同領(lǐng)域的技術(shù)和方法來提升復(fù)制性研究的質(zhì)量;難以在傳統(tǒng)期刊上發(fā)表復(fù)制性研究的作者還可以通過預(yù)印本的方式來發(fā)表他們的研究,這樣既可以提高研究的可獲得性,也可以促進(jìn)同行之間的即時反饋和討論。最后,復(fù)制性研究離不開來自高校和科研機(jī)構(gòu)的支持。相關(guān)資助機(jī)構(gòu)可以設(shè)立專門的資金來支持復(fù)制性研究項目,特別是那些在原始研究中未得到充分探討的領(lǐng)域,同時對如何進(jìn)行高質(zhì)量復(fù)制性研究提供技能培訓(xùn)和相關(guān)指導(dǎo)。
在進(jìn)行復(fù)制性研究時,需要注意以下幾個關(guān)鍵方面:首先,對復(fù)制性研究的目的需要有正確認(rèn)知,復(fù)制性研究不應(yīng)被用來貶低或攻擊原始研究的作者;相反,它們的目的是驗證和提升現(xiàn)有的知識層次。其次,作者可以在進(jìn)行復(fù)制性研究之前,聯(lián)系原始研究的作者以獲得反饋和建議,從而減少后期犯錯誤的概率。再次,需要認(rèn)真考慮樣本量和效應(yīng)大小等功效問題,直接復(fù)制不應(yīng)簡單地繼續(xù)模仿舊研究的樣本大小,需要進(jìn)行新的功效分析,實際效應(yīng)可能與報告中的效應(yīng)不同,尤其是在原始研究樣本量不足的情況下,復(fù)制性研究必須擴(kuò)大樣本,具有足夠的統(tǒng)計功效。最后,復(fù)制性研究要注重開放性,一方面,應(yīng)當(dāng)盡可能地公開其方法、數(shù)據(jù)和分析過程,以提升透明度和可驗證性;另一方面,應(yīng)對研究發(fā)現(xiàn)持有開放的心態(tài),綜合評估復(fù)制性研究的結(jié)果,批判地思考。不僅要關(guān)注是否能夠復(fù)制結(jié)果,還要分析為何能夠或不能夠復(fù)制,這可能涉及方法、理論及實施之間的差異。在跨文化或不同環(huán)境下進(jìn)行復(fù)制時,還需要考慮新環(huán)境的特點。
借鑒透明度和開放性促進(jìn)指南
2015年,Science雜志上發(fā)表了文章“Promoting an Open Research Culture”,其中提出了“透明度和開放性促進(jìn)指南(Transparency and Openness Promotion,以下簡稱TOP指南)”,旨在指導(dǎo)學(xué)術(shù)期刊和出版者如何更好地管理和發(fā)布研究數(shù)據(jù)、方法、材料和分析過程,進(jìn)而提升科學(xué)研究的透明度、開放性和可復(fù)制性。TOP指南包括八項主要標(biāo)準(zhǔn),分別涉及引用、數(shù)據(jù)透明度、分析方法透明度、研究材料透明度、設(shè)計與分析透明度、研究預(yù)注冊、分析計劃預(yù)注冊和復(fù)制性研究。如表2所示[13],每項標(biāo)準(zhǔn)又分為三個級別,從級別1到級別3,級別0僅供對比,不屬于TOP指南的范疇。
TOP指南三個級別的具體要求與應(yīng)用現(xiàn)狀。級別1主要涉及更新投稿指南,在此階段,作者需在提交論文時聲明是否分享了數(shù)據(jù)、代碼或材料。雖然鼓勵分享,但實際上并非強(qiáng)制要求。級別2要求作者必須在可靠的數(shù)據(jù)庫中分享他們的數(shù)據(jù)、代碼和材料,不僅要求作者聲明資源的可用性,而且還要求他們進(jìn)行分享并提供訪問這些資源的路徑。級別3代表著向完全透明的方向轉(zhuǎn)變,期刊需要進(jìn)行所有開放科學(xué)實踐包括研究的預(yù)注冊以及遵循TOP指南,這實際上要求期刊和作者采取更全面和細(xì)致的措施,以確保研究工作的透明性和可重復(fù)性。這三個級別構(gòu)成了一個逐步提升科研透明度和開放性的框架,同時兼顧了不同研究領(lǐng)域的具體需求,有助于期刊和研究者逐步提高科研交流的質(zhì)量,確保研究結(jié)果的真實性和可靠性。據(jù)OSF網(wǎng)站統(tǒng)計,目前已有超過5000個簽署者(包括期刊、科研機(jī)構(gòu)等)采納了TOP指南,體現(xiàn)了其在科研界的廣泛影響力。[14]
在我國傳播學(xué)領(lǐng)域?qū)嵤┲改暇哂兄匾饬x。首先,透明的研究方法和數(shù)據(jù)共享可以顯著提高傳播學(xué)研究發(fā)現(xiàn)的可信度。其次,開放分享數(shù)據(jù)和研究方法有助于其他研究者進(jìn)行復(fù)制性研究,促進(jìn)傳播學(xué)研究的知識發(fā)現(xiàn)。再次,鼓勵研究的開放性可以加強(qiáng)傳播學(xué)社群的合作,培育更包容、更有生機(jī)的學(xué)術(shù)環(huán)境。最后,透明的研究流程可以激勵傳播學(xué)方法論的創(chuàng)新和改進(jìn),使研究者能夠更有效地批判現(xiàn)有的研究。在信息迅速傳播的時代,為了建立與公眾的信任,傳播學(xué)研究的透明度和開放性尤為重要。因此,我們需要呼吁在傳播學(xué)領(lǐng)域?qū)嵤㏕OP指南,特別是鼓勵期刊采用TOP指南,同時這一政策的實施也需要出版商、編輯、審稿人和作者等利益相關(guān)者的共同努力。
試點開放式同行評審
開放式同行評審的概念。開放式同行評審(Open Peer Review)是學(xué)術(shù)出版的一種創(chuàng)新,審稿人的身份對作者公開,作者的身份也對審稿人公開,整個評審過程對公眾透明。在開放式同行評審中,作者首先把他們的稿件提交到期刊,在某些情況下,作者可以建議審稿人,編輯綜合考量各方利益來邀請審稿人進(jìn)行審稿。審稿人對文章進(jìn)行評審,并提供反饋。開放式同行評審的特點是這些評論和反饋對公眾可見,而傳統(tǒng)的匿名同行評審采用雙盲政策,作者和審稿人的身份互不知曉。然后,作者根據(jù)審稿人的建議修改稿件,稿件在經(jīng)過多輪修改和評審后如果滿足審稿人和期刊的要求,審稿報告和稿件一同發(fā)表。
開放式同行評審的概念在21世紀(jì)初開始流行,目的是彌補(bǔ)傳統(tǒng)同行評審缺乏透明度和發(fā)布時間遲緩的弊病。開放式同行評審的成功案例是F1000Research。[15]F1000Research是一家開放研究出版平臺,致力于為科學(xué)家、學(xué)者和臨床醫(yī)生提供快速發(fā)表文章的機(jī)會,減少來自編輯的偏見的影響。所有的文章都采用透明的同行評審。文章在提交后會經(jīng)過一系列的預(yù)發(fā)表檢查,確保文章符合所有政策和倫理指南。一般情況下,文章在定稿后可以在一周內(nèi)發(fā)表,其他人就可以立即查看和引用這篇論文。審稿人的審稿意見和姓名會與文章一同發(fā)表,連同作者對審稿人的回應(yīng)和來自注冊用戶對文章的評論。F1000Research也鼓勵作者發(fā)表文章的修訂版本,所有的版本都是相互關(guān)聯(lián)的,并可以單獨引用。通過同行評審的文章一般會被收錄在外部數(shù)據(jù)庫中,如PubMed和Scopus等,所有發(fā)表的文章無論同行評審狀態(tài)如何,都會被收錄在谷歌學(xué)術(shù)中。
開放式同行評審的意義。開放式同行評審給我國傳播學(xué)的學(xué)術(shù)發(fā)展帶來了很多機(jī)遇。首先,開放式同行評審很大程度上提高了出版的透明度,審稿人和作者的身份公開使得評審過程更加透明,增強(qiáng)評審過程的問責(zé)性和可信度,有助于提升研究的質(zhì)量。其次,開放式同行評審加快了論文的審稿和發(fā)表過程,使新的研究成果能夠更快地被其他研究者查閱。再次,透明的評審過程可能有助于減少審稿人的偏見,提高評審的公正性,同時對抗學(xué)術(shù)界中的濫竽充數(shù)的出版行為(即“掠奪性期刊”),增強(qiáng)學(xué)術(shù)研究團(tuán)體的信任和協(xié)作。最后,開放式同行評審的反饋是公開的,審稿人的工作和貢獻(xiàn)得到了明確的認(rèn)可,這可以作為他們學(xué)術(shù)貢獻(xiàn)的一部分,同時,其還允許公眾對研究成果進(jìn)行評論,這種開放性有助于鼓勵研究者之間的建設(shè)性對話,將研究結(jié)果更廣泛地傳播給社會大眾,促進(jìn)良好的學(xué)術(shù)生態(tài)的建立。
總體而言,開放式同行評審提高了評審過程的透明度、加速了科研成果的發(fā)布,增加了學(xué)術(shù)對話,但它也帶來了新的挑戰(zhàn),如評審質(zhì)量的保證、潛在的偏見以及對審稿人身份的保護(hù)問題,這也需要研究者具備更大的責(zé)任感,維護(hù)學(xué)術(shù)出版的質(zhì)量和信譽(yù)。隨著學(xué)術(shù)界對這種模式的探索和發(fā)展,未來為了解決開放性同行評審所面臨的挑戰(zhàn),傳播學(xué)可以強(qiáng)化開放性同行評審的控制機(jī)制和質(zhì)量評估,制定嚴(yán)格的指導(dǎo)方針,如關(guān)于語氣、表達(dá)和尊重的指導(dǎo),在提出論點、矛盾思想或批評的同時,不侵犯個人權(quán)利。此外,加強(qiáng)對開放性同行評審的教育培訓(xùn),教授撰寫評審報告的必要技能,以及如何在保持批判性立場的同時,對研究數(shù)據(jù)和結(jié)果提出建設(shè)性意見。
(本文系全域認(rèn)知與國際傳播安徽省哲學(xué)社會科學(xué)重點實驗室項目和安徽高校協(xié)同創(chuàng)新項目的研究成果;項目編號分別為:QYRZ202304、GXXT-2022-091。深圳大學(xué)傳播學(xué)院助理教授張如坤對本文亦有貢獻(xiàn))
注釋
[1]徐敬宏、張如坤:《邁向開放科學(xué)的傳播學(xué):機(jī)遇、挑戰(zhàn)與未來》,《編輯之友》,2020年第12期。
[2]B. A. Nosek; C. R. Ebersole; A. C. Dehaven et al., "The Preregistration Revolution," Proceedings of the National Academy of Sciences, 2018, 115(11).
[3]AsPredicted的網(wǎng)址為:https://aspredicted.org/。
[4]OSF的網(wǎng)址為:https://www.cos.io/products/osf-registries。
[5]T. Schäfer; M. A. Schwarz, "The Meaningfulness of Effect Sizes in Psychological Research: Differences between Sub-disciplines and the Impact of Potential Biases," Frontiers in Psychology, 2019, 10.
[6]O. Klein; T. E. Hardwicke; F. Aust et al., "A Practical Guide for Transparency in Psychological Science," Collabra: Psychology, 2018, 4(1).
[7]M. D. Wilkinson; M. Dumontier; I. J. Aalbersberg et al., "The FAIR Guiding Principles for Scientific Data Management and Stewardship," Scientific Data, 2016, 3(1).
[8]Wiley-Blackwell, "Wiley Open Science Badges," Photogrammetric Record, 2022, 37(177).
[9]有關(guān)開放科學(xué)徽章的說明可參見:https://us.sagepub.com/en-us/nam/journal/communication-research#submission-guidelines。
[10]Communication Research Reports關(guān)于開放科學(xué)的詳細(xì)說明可參見:https://osf.io/jsva7/wiki/Badge%20location%20by%20journal/。
[11]J. Schneider; T. Rosman; A. Kelava et al., "Do Open Science Badges Increase Trust in Scientists among Undergraduates, Scientists, and the Public?" Psychological Science, 2021, 33(9).
[12]T. Dienlin; N. Johannes; N. D. Bowman et al., "An Agenda for Open Science in Communication," Journal of Communication, 2021, 71(1).
[13]B. A. Nosek; G. Alter; G. C. Banks et al., "Promoting an open research culture," Science, 2015, 348(6242).
[14]OSF網(wǎng)站統(tǒng)計數(shù)據(jù)可參見:https://www.cos.io/initiatives/top-guidelines。
[15]F1000Research的網(wǎng)址為:https://f1000research.com/about。
責(zé) 編∕韓 拓 美 編∕周群英
The Application Status of Open Science and Its Referential Significance
to Communication Studies in China
Xu Jinghong
Abstract: Open science has become an important means to improve the quality of communication studies. Since 2015, the West has begun to explore multiple practice paths of open science in the field of communication studies, and has made remarkable progress after nearly a decade of development. Meanwhile, China is still in its infancy in the application of open science and lacks mature experience and systems. By analyzing how Western communication studies use pre-registration research, share research materials and methods, implement open science badges, encourage replication research and promote transparency and openness guidelines, etc., it is expected to enhance the transparency and replication research, improve the public's trust in scientific research, provide important references for the innovative practice of open science in communication studies, and promote high-quality research and application of communication in China.
Keywords: open science, open communication, transparency of research, replication research