Individual bibliometric assessment at University of Vienna: From numbers to multidimensional profiles

Abstract

Se muestra como se puede implementar la evaluacion bibliometrica a nivel individual, lo que se ha hecho con exito en la Universidad de Viena , a cargo del Departamento Bibliometria y Estrategias de Publicacion de la Biblioteca . De acuerdo con la filosofia del Departamento , la bibliometria no es mas que un instrumento de evaluacion util con el fin de complementar el sistema de revision por pares. Tambien se entiende como una brujula para los investigadores en el dilema “publicar o perecer” con el fin de aumentar su visibilidad y para optimizar las estrategias de publicacion. La evaluacion individual se compone de una entrevista con el investigador evaluado, de la elaboracion de un informe bibliometrico de las publicaciones del investigador, de una reunion y de una validacion de los resultados obtenidos con el investigador, asi como analisis adicionales opcionales. El informe bibliometrico se entrega al investigador, pues asi este conoce los aspectos cuantitativos de los resultados de su investigacion. Adicionalmente, tambien se utiliza como base para discutir con el sus estrategias de publicacion. Eventualmente, tal informe sirve para realizar la revision por pares del investigador con mas conocimiento de causa, y por lo tanto se reenvia a Aseguramiento de la calidad, a la oficina del Rector y finalmente a los pares. La caracteristica mas importante del informe bibliometrico es su caracter multidimensional e individual. Se fundamenta en varios indicadores basicos y otros parametros de control con el fin de mejorar la interpretacion. Tanto los investigadores, como el personal administrativo y los evaluadores han confirmado la utilidad de este enfoque bibliometrico, por lo que se ha producido una creciente demanda de los mismos. Hasta el momento se han entregado 33. Por otra parte, tambien se han realizado con gran exito informes similares para la evaluacion bibliometrica de dos facultades. Abstract This paper shows how bibliometric assessment can be implemented at individual level. This has been successfully done at the University of Vienna carried out by the Department for Bibliometrics and Publication Strategies of the Vienna University Library . According to the department’s philosophy, bibliometrics is not only a helpful evaluation instrument in order to complement the peer review system. It is also meant as a compass for researchers in the ‘publish or perish’ dilemma in order to increase general visibility and to optimize publication strategies. The individual assessment comprises of an interview with the researcher under evaluation, the elaboration of a bibliometric report of the researcher’s publication output, the discussion and validation of the obtained results with the researcher under evaluation as well as further optional analyses. The produced bibliometric reports are provided to the researchers themselves and inform them about the quantitative aspects of their research output. They also serve as a basis for further discussion concerning their publication strategies. These reports are eventually intended for informed peer review practices, and are therefore forwarded to the quality assurance and the Rector’s office and finally sent to the peers. The most important feature of the generated bibliometric report is its multidimensional and individual character. It relies on a variety of basic indicators and further control parameters in order to foster comprehensibility. Researchers, administrative staff and peers alike have confirmed the usefulness of this bibliometric approach. An increasing demand is noticeable. In total, 33 bibliometric reports have been delivered so far. Moreover, similar reports have also been produced for the bibliometric assessment of two faculties with great success.