Onderstaand bericht is zojuist geplaatst op de website van SURFfoundation.
Individuele onderzoeker profiteert van online effectmeting
Digitale impactmeting nog niet geschikt voor brede onderzoeksevaluatie
Individuele onderzoekers zijn erg geïnteresseerd in informatie over de wetenschappelijke impact van hun eigen publicaties. Onderzoeksinstellingen en onafhankelijke wetenschapsinstituten zijn vooral gebaat bij inzicht in het effect van publicaties voor onderzoeksevaluaties. Inmiddels is het mogelijk een indruk te krijgen van de impact van wetenschappelijke publicaties dankzij webgebaseerd wetenschappelijk publiceren. Nieuwe informatiefilters en tools helpen de onderzoekers om zelf-evaluaties uit te voeren op de reacties op hun eigen publicaties.
Het rapport Users, Narcissism and Control <http://www.surffoundation.nl/nl/publicaties/Pages/Users_narcissism_control.aspx> , geschreven in opdracht van SURF, biedt een overzicht van de bestaande tracking tools van online publicaties. Het rapport toont in hoeverre het mogelijk is om real-time te volgen hoe onderzoeksuitkomsten worden gelezen, geciteerd, gebruikt en ingezet worden.
Stricter protocol
Dat onderzoekers deze tools kunnen gebruiken betekent niet automatisch dat deze technologieën legitiem gereedschap vormen voor wetenschapsevaluatie. Om voor dit doel ingezet te worden moeten de tools voldoen aan een veel strikter protocol voor de kwaliteit van de data en voor de betrouwbaarheid en geldigheid van de gekozen variabele (bijvoorbeeld: wat zegt een download over het gebruik van onderzoeksuitkomsten?). De meeste nieuwe gereedschappen voldoen (nog) niet aan de kwaliteitscriteria die nodig zijn om deze in te zetten in onderzoeksevaluaties.
Tracking tools
De opstellers van het rapport 'Users, Narcissism and Control' <http://www.surffoundation.nl/en/publicaties/Pages/Users_narcissism_control.aspx> , Paul Wouters en Rodrigo Costas (CWTS), verkennen de ware explosie aan tracking tools die is ontstaan op de golf van tools die webgebaseerde informatie analyseren. Hiertoe zijn 16 heel verschillende tools beoordeeld. Ook belichten de auteurs van het rapport de potentiële risico's en nadelen van deze nieuwe webgebaseerde meetinstrumenten. Voorbeelden van deze tools zijn: Google Scholar <http://scholar.google.nl/> , Microsoft Academic Research <http://academic.research.microsoft.com/> , Total-Impact <http://total-impact.org/> , PlosONE altmetrics <http://www.plosone.org/home.action> , en F1000 <http://f1000.com/> .
Frank van Harmelen <http://www.cs.vu.nl/~frankh/> , hoogleraar Kennisrepresentatie en Redeneren aan de Vrije Universiteit schrijft over dit rapport: "Nieuwe webgebaseerde meetinstrumenten voor wetenschappelijke impact zullen het mogelijk maken om wetenschappelijke ontwikkelingen op de voet te volgen en te meten. Het is goed om te zien dat zulke webgebaseerde meetinstrumenten nu serieus bestudeerd worden door vooraanstaande wetenschappers die zich specialiseren in het meten en evalueren van de wetenschap, de zogenaamde scientometrics".
Onderzoeksevaluaties
Het rapport beveelt verder aan om een samenhangend onderzoeksprogramma op te zetten naar de ontwikkeling van de webgebaseerde meetinstrumenten. Dit programma zou gericht moeten zijn op onderzoek naar de dynamiek, eigenschappen en potentiële toepassing van nieuwe online meetinstrumenten. Het onderzoeksprogramma kan deze tools relateren aan de reeds bestaande indicatoren voor wetenschappelijke impact en onderzoeken hoe deze een rol zouden kunnen spelen in onderzoeksevaluaties.
Het rapport is te vinden op:
http://www.surffoundation.nl/nl/publicaties/Pages/Users_narcissism_control.aspx
Met vriendelijke groet,
Keith Russell
| Community Manager SURFshare / Knowledge Exchange | SURFfoundation | Graadt van Roggenweg 340 | Postbus 2290 | 3500 GG Utrecht | T +31 (0)30 234 66 99 | F +31 (0)30 233 29 60 | W www.surf.nl <http://www.surf.nl/> |E Russell@surf.nl <mailto:Russell@surf.nl> |
SURFfoundation, SURFnet en SURFdiensten maken deel uit van SURF, de samenwerkingsorganisatie voor ICT in het hoger onderwijs en onderzoek.
+-----------------------------------------------------
| Verzonden via NEDBIB-L
http://nedbib.reuser.biz voor informatie
+-----------------------------------------------------
Freek Zegers
