martes, mayo 29, 2012

Manipular Google Scholar Citations y Google Scholar Metrics: simple, sencillo y tentador


La aparición de Google Scholar Citations y Google Scholar Metrics puede suponer una auténtica revolución en la mundo de la evaluación científica porque pone al alcance de todos los científicos herramientas para la medición bibliométrica.

Si en trabajos anteriores hemos apostado abiertamente por la utilización de Google Scholar para la evaluación minimizando los efectos de sus sesgos y problemas técnicos y metodológicos, con este trabajo queremos alertar a la comunidad científica de la facilidad que existe para manipular los datos e indicadores bibliométricos.

Con el fin de alertar a la comunidad científica de la facilidad que existe para manipular los datos e indicadores bibliométricos que proporcionan estos productos de Google, os presentamos una pequeña nota en la que realizamos un simple y sencillo experimento consistente en la manipulación del impacto de los miembros de un grupo de investigación y de sus trabajos tal como son reflejados en los perfiles de autores que ofrece Google Citations así como del número de citas e índice h de una muestra de revistas.

Independientemente de los problemas técnicos y metodológicos de que adolece la familia Google Scholar, su irrupción supone una auténtica voladura de todos los controles o filtros científicos a los que estaban sometidos los investigadores, sus trabajos y las publicaciones en las que comunicaban sus resultados de investigación, constituyendo un nuevo desafío para el mundo de la evaluación. Desde el momento en que Google Scholar automáticamente rastrea, indiza y vacía cualquier documento de apariencia científica que cuelga de un dominio académico por voluntad de un autor sin sufrir ningún control externo previo (el de los repositorios es solo un filtro técnico que no opera sobre los contenidos) abre la posibilidad a que cualquier persona sin escrúpulos pueda manipular a su entero gusto y beneficio documentos que repercuten directamente sobre la evaluación de su producción e impacto bibliométrico.

Delgado López-Cózar, Emilio; Robinson-García, Nicolás; Torres-Salinas, Daniel (2012). Manipular Google Scholar Citations y Google Scholar Metrics: simple, sencillo y tentador. EC3 Working Papers 6, 29 de mayo.

SI QUIERES CONOCER TODOS LOS DETALLES DEL EXPERIMENTO, PINCHA AQUÍ