El grupo EC3 (Evaluación de la Ciencia y de la Comunicación Científica) de la Universidad de Granada presenta el prototipo de lo que será JOURNAL SCHOLAR, un índice bibliométrico que pretende medir el rendimiento de las revistas científicas de Arte, Humanidades y Ciencias Sociales a partir del recuento de sus publicaciones y de las citas bibliográficas que estas han recibido a través de Google Scholar. Pretende visualizar cuál es nuestra alternativa a Google Scholar Metrics, el reciente producto lanzado por Google para evaluar el impacto de las revistas científicas, y a los tradicionales índices promovidos por Thomson Reuters (Web of Science) y Elsevier (SCOPUS), que tan exigua y sesgadamente cubren los campos científicos del Arte, las Humanidades y las Ciencias Sociales.
Tras varios años explorando las posibilidades de Google Scholar como herramienta de evaluación científica (Delgado López-Cózar 2008, 2009a-b; Torres Salinas, Ruiz Pérez y Delgado López-Cózar 2009, Delgado
López-Cózar et al. 2012a-b) en los últimos meses el grupo EC3 ha empezado a experimentar con la creación de distintos productos destinados a medir el rendimiento científico en el campo de las Humanidades y Ciencias Sociales, en general, y muy particularmente para medir el impacto de las revistas científicas en estos campos (Cabezas y Delgado López-Cózar 2012a-b-c).
Figura 1. Pantalla de inicio de JOURNAL SCHOLAR
JOURNAL SCHOLAR acogerá publicaciones de todos los países del mundo y en todos los idiomas. Como indicadores bibliométricos se emplearán los índices H y G. Las revistas se ordenarán en cuartiles y se presentarán por períodos de 5 o 10 años bien en rankings internacionales o por regiones.
Para identificar la producción científica y las citas asociadas a la misma en Google Scholar se ha ejecutado con el software Harzing’s Publish and Perish una búsqueda bibliográfica de cada revista a fin de identificar todas sus posibles publicaciones y las citas enlazadas a las mismas. Dado que este producto tiene una vocación experimental, se ha querido probar la precisión y exhaustividad de la búsqueda a partir del ISSN de la revista y no del título, como es lo habitual. Se han tenido en cuenta los distintos ISSN que pueden estar asociados a una misma revista (normalmente ISSN de la versión impresa y de la versión online).Tras un proceso manual de depuración de resultados (eliminación de duplicados y unión de citaciones), se calcula el índice H y G de cada revista.
Figura 2. Pantalla de consulta de los listados de revistas
JOURNAL SCHOLAR
Para ilustrar las prestaciones del producto se presentan los resultados de la disciplina Information and Library Science, que ofrece un ranking en el que se calcula el impacto de 462 revistas editadas en 59 países. Las búsquedas bibliográficas en Google Scholar se efectuaron entre el 10 y el 15 de julio de 2011.
Aprovechando los datos se realiza una comparación de la cobertura y los resultados de JOURNAL SCHOLAR con los ofrecidos por SCOPUS y WOS en esta disciplina. JOURNAL SCHOLAR cuadruplica la cobertura, reduce el sesgo anglosajón. Al identificar muchas más citas, JOURNAL SCHOLAR proporciona índices h muy elevados (en promedio es un 44% superior a SCOPUS y un 77% aWeb of Science) con lo que permite discriminar mejor las posiciones de las revistas en el ranking.
En conclusión, se demuestra que es factible y viable generar productos bibliométricos con Google Scholar. A pesar de su carácter incontrolado (ni selección de fuentes ni normalización de datos) obtiene resultados tan solventes, fiables y válidos como los índices de SCOPUS y WOS. Y todo a ello a menores costes que las herramientas de evaluación tradicionales –aspecto trascendental dadas las millonarias sumas que cuestan los productos elaborados por Thomson Reuters y Elsevier-.
Figura 3.Pantalla de resultados de los listados de revistas
JOURNAL SCHOLAR
SI QUIERES CONOCER LOS DETALLES DEL PRODUCTO Y EL RANKING DE REVISTAS EN
Information and Library Science pincha aquí
-----
- Cabezas
Clavijo, Á.; Delgado López-Cózar, E. (2012a). Scholar Metrics: the impact of journals according to Google, just an amusement or a valid scientific tool? EC3 Working Papers 1, Accesible en http://eprints.rclis.org/handle/10760/16836 - Cabezas-Clavijo, Á.; Delgado López-Cózar, E. (2012b). Las revistas españolas de Ciencias Sociales y Jurídicas en Google Scholar Metrics, ¿están todas las que son? EC3 Working Papers, 2, Accesible en http://eprints.rclis.org/handle/10760/16892
- Cabezas-Clavijo, Á.; Delgado López-Cózar, E. (2012c). ¿Es posible usar Google Scholar para evaluar las revistas científicas nacionales en los ámbitos de Ciencias Sociales y Jurídicas? El caso de las revistas españolas. EC3 Working Papers 3, 23 de abril 2012. Accesible en http://hdl.handle.net/10760/16888
- Delgado López-Cózar, E. (2008). Qué es y cómo utilizar Google Scholar. V Foro sobre evaluación de la calidad de la
educación superior y de la investigación. Fundación Española de Ciencia y Tecnología (FECYT) / Universidad del País Vasco. San Sebastián, 2-5 septiembre 2008. ISBN 978-84-691-3972-1. Accesible en http://ec3.ugr.es/publicaciones/Delgado_Lopez-Cozar,_E-Que_es_y_como_utilizar_Google_Scholar.pdf - Delgado López-Cózar, E. (2009a). Google Scholar: ¿Herramienta de evaluación científica? En: II Seminario sobre
evaluación y comunicación de la ciencia. Granada, 2 de abril, 2009.Universidad de Granada. Accesible en: http://hdl.handle.net/10760/14088 - Delgado López-Cózar, E. (2009b). Qué es y cómo utilizar Google Scholar. VI Foro sobre evaluación de la calidad de la educación superior y de la investigación. Fundación Española de Ciencia y Tecnología (FECYT) / Universidad de Vigo. Vigo, 8-11 septiembre 2009.
- Delgado López-Cózar, E.; Marcos Cartagena, D.; Cabezas Clavijo, A.; Jiménez Contreras, E.; Ruiz Pérez,
R. (2012). Índice H de las revistas españolas de Ciencias Jurídicas según Google Scholar (2001-2010). Accesible en http://hdl.handle.net/10481/20234 - Delgado López-Cózar, E.;Marcos Cartagena, D.; Cabezas Clavijo, A.; Jiménez Contreras, E.; Ruiz Pérez,
R. (2012). Índice H de las revistas españolas de Ciencias Sociales según Google Scholar (2001-2010). Accesible en http://hdl.handle.net/10481/20235 - Torres-Salinas, D., Ruiz-Pérez, R. & Delgado-López-Cózar, E. (2009). Google Scholar como herramienta para la evaluación científica. El profesional de la Información, 18(5): 501-510. http://ec3.ugr.es/publicaciones/d700h04j123154rr.pdf
