The European University Association has published a very important briefing on the use of rankings. With these ‘key considerations’, EUA aims to raise further awareness and encourage reflection of some of the potential pitfalls of rankings and provide its members with guidance towards their responsible use.

With this text, the European University Association (EUA) presents a set of guiding considerations to support universities in using global rankings responsibly.

University rankings have become a fact of (university) life. Since their emergence several decades ago, they have come to feature prominently, and often controversially, in discussions about demonstrating university performance and measuring quality and excellence in higher education.

While rankings may have had some positive impact (for some institutions), they continue to face sustained criticism for their choice and use of indicators, data collection methods, promotion of a single model of excellence, and lack of transparency on what they can – and cannot – tell their users about institutional quality and excellence. With this publication, EUA aims to raise further awareness and encourage reflection of some of the potential pitfalls of rankings and provide its members with guidance towards their responsible use.

DOWNLOAD BRIEFING

Source: https://www.eua.eu/resources/publications/1080:key-considerations-for-the-use-of-rankings-by-higher-education-institutions.html?utm_source=linkedin&utm_medium=social&utm_campaign=social-linkedin-17-10-2023 

Research funders from around the world have signed the Statement of Principles on Recognising and Rewarding Researchers. The statement sets out principles of how funders will work together to achieve new ways of assessing research and researchers, appropriate to the current times and in line with today’s researcher. ‘This is an important next milestone in an internationally supported process toward more balanced and fairer assessment of research,’ said Arfan Ikram, president of ZonMw and member of NWO Executive Board responsible for the Recognition & Rewards portfolio.

The statement states that there is growing momentum for reform toward broader and more inclusive assessment of research, but also that there are still challenges, which organizations face to make such changes. To help alleviate these challenges and achieve new ways and means of assessing research worldwide, research funders have agreed on nine principles.

Qualitative approach

For example, it was agreed that during the assessment process of research(ers) there should be sufficient space the for relevant context, such as the field of study or career stage. Aspects such as team science or citizen science should also be considered in the assessment process. The funders also agree that the assessment of research primarily requires a qualitative approach, supported by an open and responsible use of quantitative indicators.

The full statement can be found here

Ikram on the agreements made: ‘The Dutch research funders NWO and ZonMw wholeheartedly endorse this statement and have long been working according to the principles agreed today. The way academics are recognized and rewarded today must do justice to the different academic qualities that exist. That way there is more room for the quality and appreciation of the plurality of their tasks. Today’s statement signed by funders from America to Japan helps enormously in this regard.”

Peace Palace

The Statement of Principles was signed in The Hague during the annual meeting of the Global Research Council (GRC), the collaboration of national research councils and research funders around the world. Minister Dijkgraaf of OCW opened the event, which takes place at the Peace Palace . This is the first time that the annual gathering is taking place in the Netherlands. NWO is sharing hosting with Brazilian sister organization São Paulo Research Foundation (FAPESP) from May 29 to June 2. More than 160 participants are attending this year, including some 65 “heads of research councils”.

Founded in 2012, the GRC consists of the (presidents of) national research councils and research funders around the world. Through this collaboration, members share knowledge and best practices within international science policy and jointly set strategic agendas. Each year, research funders from around the world come together during the GRC Annual Meeting.

Source: https://www.nwo.nl/nieuws/nieuwe-internationale-afspraken-wetenschapsfinanciers-over-erkennen-waarderen

Nederlandse academici zijn volgens ScienceGuide gematigd positief over het programma Erkennen & Waarderen. Dat is de uitkomst van de enquête onder 314 respondenten die het online platform ScienceGuide begin april lanceerde. De verwachte uitwerking van het Erkennen & Waarderen programma op het eigen vakgebied wordt door bijna de helft van de respondenten positief beoordeeld (46% positief, 21% neutraal). De invloed van het programma op de beoordeling van hun persoonlijke prestaties wordt door 39 procent van de respondenten positief beoordeeld (33% neutraal). We zijn verheugd te lezen dat in de fase waarin het programma zich bevindt Nederlandse academici positief zijn over de veranderingen voor het eigen vakgebied en de eigen prestaties.

(English translation >>)

Veranderproces

Vanuit het programma beseffen we dat met een dergelijke grote cultuurverandering ook vragen en onzekerheden naar voren komen. Midden in dit veranderproces is het daarom prettig dat de meerderheid van de respondenten aangeeft de veranderingen die voortvloeien uit het programma Erkennen & Waarderen positief te ervaren. Daarbij zien we dat respondenten de evaluatie van verschillende wetenschappelijke activiteiten zoals onderwijs en open science onder Erkennen & Waarderen positiever beoordelen. Zeker ten opzichte van de huidige situatie waarin de evaluatie van open science, nevenactiviteiten en administratieve zaken een onvoldoende krijgen. De resultaten van het onderzoek van ScienceGuide passen bij de insteek van het programma Erkennen & Waarderen waarin wordt beoogd om alle kerntaken van een academicus te erkennen en waarderen.

Verschil tussen disciplines

ScienceGuide heeft in haar onderzoek ook gekeken naar de resultaten van respondenten uit verschillende vakgebieden. Opvallend daarbij is dat bèta’s bovengemiddeld tevreden zijn met de huidige situatie. Zij verwachten dat het programma Erkennen & Waarderen negatieve gevolgen heeft voor de waardering van onderzoek. Bij de lokale commissies op de universiteiten is er veel aandacht voor het betrekken van wetenschappers met verschillende wetenschappelijke achtergronden. De resultaten van dit onderzoek tonen des te meer aan dat dit van groot belang is, om te waarborgen dat de concretisering van het programma blijft aansluiten bij de praktijk. Als programmateam blijven we daarom de dialoog zoeken en streven we naar landelijke afstemming wat betreft de beoordelingscriteria. Zo is onder andere opgenomen in de routekaart Ruimte voor ieders talent in de praktijk, die eerder dit jaar is gepubliceerd, dat we in 2024 duidelijk maken welke kwaliteitskenmerken we hanteren op de verschillende kerndomeinen. We houden daarbij rekening met verschillen tussen disciplines.

Zorgen bij postdocs

Als er ingezoomd wordt op het stadium van de carrière waarin de respondent zich bevindt zijn er verschillen te zien tussen hoogleraren en promovendi en ook tussen promovendi en postdocs. ScienceGuide geeft in haar artikel aan dat promovendi blij zijn met het programma Erkennen & Waarderen, maar dat postdocs er zorgen over hebben. Wij herkennen deze zorgen die ook werden besproken tijdens het recente Recognition & Rewards Festival in Utrecht. Daarom kijken wij welke rol postdocs en promovendi kunnen innemen binnen het programma, zodat zij nog meer betrokken zijn bij de implementatie van het programma.

Erkennen & Waarderen Cultuurbarometer

Het onderzoek van ScienceGuide levert interessante inzichten op. We zijn altijd geïnteresseerd naar data en informatie die het programma inzichten biedt en daardoor vooruit kan helpen. We kijken daarom met interesse uit naar de volgende updates met resultaten vanuit ScienceGuide. Vanuit het programma Erkennen & Waarderen staat ook een vragenlijst gepland voor later dit jaar. De Erkennen & Waarderen cultuurbarometer is een initiatief vanuit het gezamenlijke programma Erkennen & Waarderen en zal worden uitgezet onder medewerkers van de deelnemende instellingen.