मैंनए अंतिम रूप दिए गए अनुसंधान मूल्यांकन सुधारों के एफए सेट को स्वीकार कर लिया गया है, यूरोपीय वैज्ञानिक खुद को “प्रकाशित या नाश” मॉडल से मुक्त पा सकते हैं जो लंबे समय से देश का कानून रहा है। दस्तावेज़, जिसे कहा जाता है अनुसंधान मूल्यांकन में सुधार पर समझौताको यूरोपीय आयोग द्वारा सुगम बनाया गया था और इसमें अनुसंधान संस्थानों, शोधकर्ताओं के संघों और फंडर्स के इनपुट शामिल हैं, जिन्होंने मिलकर फंडिंग, पुरस्कार, अनुसंधान प्राथमिकताओं और भर्ती के लिए वैज्ञानिकों और उनके काम का मूल्यांकन कैसे किया जाना चाहिए, इसे सुधारने के लिए मार्गदर्शक सिद्धांतों का एक रोडमैप तैयार किया है। यूरोप भर में।

एक व्यापक सहमति है कि वर्तमान प्रणाली काम नहीं कर रही है, के अनुसार स्टीफ़न बर्गमैन्स, यूरोपीय विश्वविद्यालय संघ (ईयूए) में अनुसंधान और नवाचार के निदेशक, एक समूह जो समझौते का मसौदा तैयार करने में शामिल था। वह कहते हैं कि यह मामला “केवल विश्वविद्यालयों में ही नहीं, बल्कि” में भी है [scientific] समग्र रूप से समुदाय”, और इन सुधारों के साथ, “शोधकर्ता और विश्वविद्यालय, एक अर्थ में, इसे वापस दावा करने के लिए देख रहे हैं।”

वर्तमान में, अनुसंधान को वित्त पोषित करने के लिए, वैज्ञानिकों-जिनमें कार्यकाल और कार्यकाल-ट्रैक संकाय, शोध वैज्ञानिक, और प्रारंभिक कैरियर शिक्षाविद शामिल हैं- का मूल्यांकन अक्सर उनके द्वारा प्रकाशित किए जाने वाले पत्रों की संख्या और किन पत्रिकाओं में किया जाता है।

अनुसंधान के मूल्यांकन के लिए नए प्रस्तावित मानदंड इसके बजाय विज्ञान में व्यापक योगदान और विज्ञान में करियर की विविधता को मान्यता देंगे; साथियों द्वारा मूल्यांकन को शामिल करने के लिए मूल्यांकन को फिर से परिभाषित करें; सफलता के लिए एक उपाय के रूप में जर्नल और प्रकाशन मेट्रिक्स के “अनुचित” उपयोग के रूप में संदर्भित दस्तावेज़ को छोड़ दें; और व्यक्तिगत शोधकर्ताओं का आकलन करते समय अनुसंधान संगठनों की अंतरराष्ट्रीय रैंकिंग का उपयोग करने से बचें।

यह ढांचा लंबी अवधि की बातचीत का नतीजा है। यूरोपीय आयोग (जिसमें पूरे यूरोप से कई हितधारक शामिल थे) द्वारा 2021 की स्कोपिंग रिपोर्ट के बाद, EUA और साइंस यूरोप के प्रतिनिधि, यूरोपीय फंडिंग एजेंसियों और अनुसंधान संगठनों का एक संघ, स्वतंत्र नीति सलाहकार के साथ शामिल हुए करेन स्ट्रोबेंट्स अनुसंधान मूल्यांकन में सुधार कैसे किया जाए, इस पर एक समझौते का मसौदा तैयार करना। जबकि यूरोपीय आयोग ने प्रारूपण की सुविधा प्रदान की, कुल मिलाकर, लगभग 20 हितधारकों ने “कोर ग्रुप” के हिस्से के रूप में पाठ पर प्रतिक्रिया दी, जबकि 40 से अधिक देशों के अतिरिक्त 350 हितधारकों ने विधानसभा बैठकों में अपनी राय व्यक्त की। बर्गमैन कहते हैं, “समझौता अपने आप में एक सामूहिक प्रयास है, केवल यह कहने से परे कि हम इसे और नहीं चाहते हैं, बल्कि यह परिभाषित करना है कि हम कहाँ जाना चाहते हैं।”

अनुसंधान मूल्यांकन सुधार की दस प्रतिबद्धताएं

अंतिम समझौता, जिसे 22 जुलाई को प्रकाशित किया गया था और 28 सितंबर से सुधारों को अपनाने के इच्छुक लोगों द्वारा हस्ताक्षरित किया जा सकता है, चार मुख्य प्रतिबद्धताओं को आगे बढ़ाता है। पहले में अनुसंधान में योगदान और करियर की विविधता की मान्यता, केवल जर्नल प्रकाशनों पर ध्यान केंद्रित करने के बजाय शिक्षण, पर्यवेक्षण और सलाह जैसी पुरस्कृत गतिविधियां शामिल हैं। दूसरी प्रतिबद्धता अनुसंधान मूल्यांकन को आधार बनाना है “मुख्य रूप से गुणात्मक मूल्यांकन पर जिसके लिए सहकर्मी समीक्षा केंद्रीय है,” दस्तावेज़ में कहा गया है, मात्रा के बजाय अनुसंधान की गुणवत्ता पर ध्यान केंद्रित करना। तीसरा, संगठन शोध मूल्यांकन के लिए जर्नल- और प्रकाशन-आधारित मेट्रिक्स के “अनुचित उपयोग” को छोड़ने के लिए प्रतिबद्ध हैं, जैसे प्रभाव कारक और एच-इंडेक्स। और अंत में, चौथी मुख्य प्रतिबद्धता व्यक्तिगत शोधकर्ताओं को उनके शोध संगठनों की रैंकिंग या प्रतिष्ठा के आधार पर मूल्यांकन करने से बचना है।

चार प्रमुख प्रतिबद्धताओं के अलावा, अन्य छह सहायक प्रतिबद्धताओं का उद्देश्य संसाधनों को गिरवी रखकर, ऐसे सुधारों की आवश्यकता के बारे में जागरूकता बढ़ाना और प्रस्तावित परिवर्तनों का मूल्यांकन और संचार करके हस्ताक्षरकर्ताओं को उनके काम में सहायता करना है। एक प्रतिबद्धता हस्ताक्षर करने वाले संगठनों के गठबंधन के गठन का भी विवरण देती है, जिसका उद्देश्य आपसी सीखने और सहयोग के लिए एक स्थान के रूप में काम करना है जो संगठनों को मूल प्रतिबद्धताओं को लागू करने में मदद करेगा।

इसी तरह की पहलें पहले से मौजूद हैं, जैसे कि 2012 अनुसंधान आकलन पर सैन फ्रांसिस्को घोषणा (DORA) अमेरिका या अंतरराष्ट्रीय में रिसर्च मेट्रिक्स के लिए लीडेन मेनिफेस्टो 2015 से। लेकिन नया समझौता और भी आगे जाता है, के अनुसार तोमा सूसी, वियना विश्वविद्यालय के एक भौतिक विज्ञानी जो यूरोप में विज्ञान के लिए पहल (ISE) के प्रतिनिधि के रूप में नए समझौते का मसौदा तैयार करने में शामिल थे। “डोरा। . . सबसे महत्वपूर्ण बयान है, लेकिन यह अभी भी सिर्फ एक बयान है,” सूसी बताती है वैज्ञानिकयह देखते हुए कि नया समझौता “सिद्धांतों को निर्धारित करता है … बहुत लंबे समय से चर्चा का अनुसरण करता है, लेकिन फिर उन सिद्धांतों को ठोस प्रतिबद्धताओं के साथ बढ़ाता है।”

स्ट्रोबेंट्स के लिए, सबसे महत्वपूर्ण प्रतिबद्धता पहली है, जो डेटा वैज्ञानिकों और सॉफ्टवेयर इंजीनियरों सहित अन्य प्रकार के शोधकर्ताओं के योगदान की विविधता को पहचानती है। “फिलहाल, शोधकर्ता बहुत प्रतिस्पर्धी माहौल में हैं और साथ ही, सफलता की परिभाषाएं बहुत संकीर्ण हैं। . . . मेरे लिए व्यक्तिगत रूप से, महत्वपूर्ण बात यह है कि शोधकर्ताओं द्वारा किए गए योगदान की व्यापक विविधता को और अधिक पहचानना शुरू करना है, ताकि सफलता का अर्थ बदल सके।”

विन्सियन गेलार्ड, EUA में अनुसंधान और नवाचार के उप निदेशक, समझौते को विज्ञान के भीतर बड़े बदलावों की शुरुआत के रूप में देखते हैं। “दीर्घकालिक दृष्टि संस्कृति परिवर्तन के बारे में है,” वह बताती हैं वैज्ञानिक. “आइए यह न भूलें कि अंत में, योगदान [of research and researchers] समाज के लिए प्रकाशनों की संख्या और जहां वे प्रकाशित हुए हैं, से कहीं अधिक है।”

हस्ताक्षरकर्ताओं के लिए जोखिम और अवसर

आगे बढ़ते हुए, समझौते पर हस्ताक्षर करने वाले संगठनों को गठबंधन को विकसित करने में मदद करने के लिए कहा जाएगा, पहले संगठनात्मक ढांचे की स्थापना करके और फिर गठबंधन के संगठनात्मक रूप पर सहमत होने के लिए वर्ष के अंत में एक संवैधानिक सभा में एक साथ आकर। “प्रतिबद्धताएं फ्रेम हैं, और इस फ्रेम के भीतर, संस्थान, फंडर्स, [and] सभी शोध समुदाय परिभाषित कर सकते हैं कि कैसे [they want] अनुसंधान मूल्यांकन किया जाना है, ”बर्गमैन कहते हैं। “यह केवल एक प्रणाली नहीं होगी, . . . के प्रकार के आधार पर भिन्नता हो सकती है [organizations]विषयों के बीच मतभेद, यहां तक ​​कि देशों के बीच भी।”

समझौते द्वारा प्रगतिशील विचारों को सामने रखे जाने के बावजूद, अभी भी बहस के क्षेत्र हैं – विशेष रूप से उस प्रभाव के बारे में जो प्रस्तावित परिवर्तनों का प्रारंभिक कैरियर शोधकर्ताओं पर पड़ सकता है, के अनुसार सेबस्टियन डाहलेयूरोपीय काउंसिल ऑफ डॉक्टरेट कैंडिडेट्स एंड जूनियर रिसर्चर्स (यूरोडॉक) के उपाध्यक्ष, एक संगठन जिसने स्कोपिंग रिपोर्ट का मसौदा तैयार करने में मदद की और समझौते पर हस्ताक्षर करने में अपनी रुचि बताई।

डाहले बताते हैं, “पूरे सिस्टम में पूरी तरह से बदलाव होने से काफी बड़ा जोखिम होता है, खासकर शुरुआती करियर के शोधकर्ताओं के लिए जो सिस्टम में साइन इन हैं।” वैज्ञानिक. विशेष रूप से, वर्तमान में मूल्यांकन में पुरस्कृत गतिविधियों में अब सुधार प्रणाली में समान भार नहीं हो सकता है, और उनके करियर पथ पर इन परिवर्तनों का पूर्ण प्रभाव “एक खुला प्रश्न” बना हुआ है। इसलिए, डाहले का कहना है कि यह महत्वपूर्ण है कि शुरुआती करियर के शोधकर्ताओं के पास गठबंधन में टेबल पर एक सीट हो। “वास्तव में उस पर एक नज़र डालने के लिए लचीलापन होना, जो हो रहा है उसे देखने के लिए तंत्र होना। . . और फिर अनुकूलित करें- यह इस तक पहुंचने का एक बहुत अच्छा तरीका है।”

गेलार्ड यह भी स्वीकार करते हैं कि प्रारंभिक कैरियर शोधकर्ता इस संक्रमण में सबसे कठिन स्थिति में हैं, क्योंकि इस तरह के आकलन उनके करियर के पाठ्यक्रम को निर्धारित करने में अधिक वजन लेते हैं। “विचार यह है कि गठबंधन में उन्हें अग्रिम पंक्ति में रखा जाए, यह ध्यान आकर्षित करने के लिए कि क्या किया जाना चाहिए और कैसे करना है, किसी भी अनपेक्षित परिणाम से बचने के लिए,” वह एक ईमेल में लिखती है वैज्ञानिक। और क्योंकि शोधकर्ताओं का मूल्यांकन किया जा रहा है, सूसी कहते हैं कि यह समझ में आता है कि “उन्हें यह तय करने में केंद्रीय होना चाहिए कि सुधार व्यवहार में कैसा दिखता है।”

एलिजाबेथ गड्डोलॉफबोरो विश्वविद्यालय में एक शोध नीति प्रबंधक और इंटरनेशनल नेटवर्क ऑफ़ रिसर्च मैनेजर्स (INORMS) रिसर्च इवैल्यूएशन ग्रुप के अध्यक्ष- जो विधानसभाओं में शामिल थे- बताते हैं वैज्ञानिक एक ईमेल में कि नए समझौते की प्रभावशीलता अब इस बात पर निर्भर करेगी कि संस्थान वास्तव में इसे अपनाते हैं या नहीं। “एक बार अपनाए जाने के बाद, मुझे लगता है कि इसका लाभ यह है कि यह ‘सहायक प्रतिबद्धताओं’ की एक श्रृंखला और अभ्यास और पारस्परिक सीखने की घटनाओं के समुदायों के विकास के माध्यम से सफल कार्यान्वयन के माध्यम से हस्ताक्षरकर्ताओं का मार्गदर्शन करता है।” “यह मानते हुए कि वे महत्वपूर्ण द्रव्यमान प्राप्त करते हैं, और अंतरराष्ट्रीय स्तर पर जुड़ना जारी रखते हैं, इसका एक महत्वपूर्ण प्रभाव होने की संभावना है।”

कई शोधकर्ता बताते हैं वैज्ञानिक कि वह क्षण इस तरह की पहल के लिए उपयुक्त महसूस करता है।

“मैं आशान्वित हूं क्योंकि बहुत गति है। . . . मुझे नहीं लगता कि मेरे करियर में ऐसा कोई पल आया है, जब मैंने इतनी दृढ़ता से महसूस किया कि लोग वास्तव में इस पर आगे बढ़ने के लिए तैयार थे, ”स्ट्रोबेंट्स कहते हैं। सुसी के लिए, यह अभी या कभी नहीं है। “मेरे दृष्टिकोण से, यह एकमात्र मौका है। मैंने ऐसा मौका कभी नहीं देखा, और मुझे नहीं लगता कि कार्ड में कोई वास्तविक विकल्प है।”