Mostrando entradas con la etiqueta politica cientifica. Mostrar todas las entradas
Mostrando entradas con la etiqueta politica cientifica. Mostrar todas las entradas

lunes, febrero 27, 2012

¿Pueden los rankings acabar distorsionando la realidad?

Autores: Enrique de la Fuente y Nicolás Robinson-García
El Ranking de Shangai, el Ranking Web Universidades del Mundo, el Times Higher Education, QS University Rankings… la lista va creciendo exponencialmente cada año. Estos son solo algunos de los nombres que aparecen detrás de las organizaciones que elaboran las controvertidas listas de universidades top a nivel mundial, capaces de desviar decisiones de inversión, de localización de recursos, de captación de estudiantes y todo a base de listados de ranking. Su presencia en la política universitaria es cada vez mayor a pesar de su juventud (el ranking de Shangai no llega a la década de vida), convirtiéndose en un elemento a tener en cuenta a la hora de establecer estrategias de política universitario. Esto se hace evidente por ejemplo, en el caso de la Universidad Politécnica de Cataluña, que indica en su estrategia de internacionalización como un objetivo a seguir:
Un mejor posicionamiento en los rankings internacionales de prestigio, mediante el impulso de estrategias de estudio de indicadores de impacto de estos rankings y la adopción de medidas internas de mejora en esta línea.
(Plan de política internacional 2008-2015)

Y es que el efecto que pueden tener estos rankings en la imagen de las universidades puede ser demoledor o vital, dependiendo del caso. Pero hay ciertas preguntas que debemos de hacernos ante este nuevo escenario, ¿responden estos listados a una intencionalidad comercial u objetiva? Los rankings están de rabiosa actualidad, todos ofrecen sin miramientos los listados de las mejores universidades del mundo; no aparece ningún ánimo decisorio inicial, pero influyen en el destino del capital inversor y humano, decisiones que afectan tanto a la esfera pública como a la privada. La empresa que determina su decisión de inversión en investigación en función de la calidad observada de forma histórica en un ranking o la decisión de una familia de invertir y enviar a un hijo a una determinada universidad.
En momentos de crisis esta información aparece con mayor vigor al objeto de poder tener más argumentos para la toma de decisiones,…podemos hacer la comparación, si se nos permite el símil,  con las agencias de rating, salvando las distancias, que favorecen o llevan al hundimiento del sistema financiero de un país determinado.

Es por ello que resulta imprescindible educar al lector y guiarlo en su lectura, instando a los productores de rankings a que reconozcan limitaciones y enfaticen el objeto de su medición. Puesto que sólo así se podrá hacer un uso coherente de la información que muestran sin distorsionar las funciones de la universidad y reaprovechándola de manera positiva.


jueves, enero 05, 2012

Cómo detener el plagio científico. Hablan diez expertos.

Autor: Rafael Repiso

En el último número de la revista Nature se incluye un artículo donde diez expertos aportan diferentes ideas (8 en total) para frenar las prácticas antiplagio. En la misma línea que el artículo previo a este: Dos mil once, el año de las retractaciones, el primer post que inaugura este año afecta también a la ética científica. 



Según la Oficina de Integridad en la Investigación (The Office of Research Integrity) del departamento de Salud y Asuntos Sociales norteamericano, el plagio se define como la apropiación a terceros de sus ideas,  procesos/métodos, resultados o incluso palabras, sin otorgar al autor original el crédito apropiado.

Harold Garner: Denuncia pública de los trabajos plagiados.
Cuando se denuncia la existencia de prácticas fraudulentas en una comunidad como la científica, esto lleva aparejado efectos positivos y negativos. Dejando a un lado los efectos perjudiciales que salpican al área de estudio, la revista y especialmente los autores; la capacidad del sistema de reconocer sus errores con el objeto de enmendarlos es altamente positiva. De esta forma se señala a autores sospechosos, llegando incluso a hacerse revisiones retrospectivas de sus trabajos ya publicados. Por otra parte, la revista demuestra transparencia y normalmente mejora sus sistemas de revisiones y en último lugar, la comunidad en general toma medidas para que este tipo de prácticas se reduzcan al máximo.

Bernd Pulverer. La excelencia se consigue con un buen sistema de Peer Review.
Bern Pulverer no es ajeno a los procesos de automatizados anti-plagio, y los incorpora al proceso de revisión, pero en su opinión los sistemas automatizados tienen sus limitaciones. Según Pulverer la mejor garantía siempre será un buen sistema de revisores, donde los especialistas más adecuados a la teoría y los métodos utilizados en el paper, tengan la posibilidad de analizar su calidad, así como ver ideas o procesos tomadas de otros (nivel al que los programas antiplagio no llegan).

Ana Marusic y Mladen Petrovecki. Analizar todos los artículos.
Estos autores croatas nos cuentan cómo después de un gran escándalo en la Croatian Medical Journal decidieron chequear todos los envios, de tal forma que ahora revisan el 100% de los papers recibidos, cuando lo habitual en revistas con un gran número de recepciones consiste en revisar sólo los artículos que no son investigaciones.

John Loadsman. Uso de Traductores Profesionales.
Loadsman, editor de la revista Anaesthesia and Intensive Care, explica cómo los artículos más conflictivos suelen ser de extranjeros no angloparlantes, y su "delito" se debe no a la mala fé o la intención de atribuirse ideas ajenas, sino al uso de expresiones repetidas en trabajos similares. Es un plagio formal debido a las limitaciones idiomáticas de los autores o de traductores poco profesionales. Un plagio que se evita contratando a buenos traductores, pues un artículo debe estar hecho por un experto en el idioma científico en el que se redacta, uno de las consecuencias de no hacerlo es que las propias expresiones hagan saltar las alarmas de los programas antiplagio.

Yuehong Zhang y Ian Mcintosh. Creación de una "lista negra" con los infractores reincidentes.
Los profesores Zhang y Mcintosh, editores de la revista Journal of Zhejiang University Science hacen una propuesta interesante; crear una lista de investigadores que hayan sido sorprendidos con artículos plagiados. Zhang y Mcintosh no aportan más información del proyecto salvo la idea,no plantean unas políticas claras de entrada en la lista ni quien debería sostenerla. Desde mi punto de vista esto tiene sentido por dos cuestiones: 1) un gran número de artículos retractados provienen de un número reducido de autores (existencia de élites del plagio) 2). La gran mayoría de los casos detectados no salen a la luz, pues son rechazados en los procesos de Peer Review. No obstante una lista negra de científicos puede también hacer mucho daño a la comunidad, por ejemplo, en artículos colaborativos donde sólo sea uno el que plagie finalmente todos podrían acabar como culplables del delito.

Sandra Titus. Invertir en Prevención.
Sandra Titus nos habla de la importancia de la formación en gestión de la información. Diversos estudios indican que un alto procentaje de los alumnos de grados presentan trabajos plagiados. No se suele enseñar a citar, así como no se hace mucho hincapié en la ética del trabajo intelectual. Las preguntas son ¿Quién lo debe hacer y cuando? Desde mi punto de vista, y yo soy un afortunado al respecto, todos los másters de investigación o asignaturas cuyo objetivo final sea la consecución de un proyecto deben incluir módelos de metodología sobre el uso de la información, por qué y cómo se cita la información. Este es un conocimiento que se da por sabido, pero lo cierto es que en ningún punto de la formación académica tiene un espacio concreto, y lo que suele pasar es que cuando el joven investigador se encuentre con su trabajo, con suerte su director de proyecto sea el que se lo explique.

Miguel Roig. Enseñar a los científicos a parafrasear.
El profesor Roig, autor de una guía antiplagio (Guide to avoiding plagiarism ) se enfrenta a la que desde su punto de vista es una de las formas más comunes de plagio, el plagio de palabras (que no de ideas), es decir, plagio de formas de expresión. aunque sin duda este es un plagio sin mucha importancia es también de los más fáciles en subsanar y se hace parafraseando correctamente. Ojo, se puede parafrasear una expresión, pero si esta expresión incluye una idea original de un tercero se debe citar la idea. Parafrasear sólo sirve para expresiones formales, como por ejemplo expresar una cantidad o una información del conocimiento general.

Melissa Anderson: "Capturar a los tramposos del sistema".
Lo que Melissa Anderson nos dice es que hay una serie de investigadores que conocen las limitaciones de los sistemas antiplagios y se aprovechan de ellas. Por ejemplo, son capaces de introducir dos sinónimos en una frase plagiada con el objeto de que pase una prueba de originalidad. Son investigadores que saben como burlar los procesos de control y sacan el máximo partido de ellos. Son lo suficientemente astutos para no enviar trabajos hasta que sus propios sistemas antiplagio les indican que el paper es aparentemente "legal".  La única forma de localizar estos trabajos es como indicaba al principio del artículo Bern Pulverer un sistema Peer Review de gran calidad.
----
Software antiplagio: Las revistas cada vez utilizan más esta tipología de programas, que de momentos se limitan a buscar frases en común (conjuntos de palabras) con páginas de internet o bases de datos internas del programa. Bernd Pulverer, afirma que en su campo, y con la experiencia obtenida en su revista (European Molecular Biology Organization http://www.embo.org/publications/the-embo-journal.html). En este campo, Bernd Pulverer afirma que es muy extraño encontrar duplicaciones, y cuando se producen suelen estar en la sección "Material y Métodos" y no representan un gran porcentaje del trabajo, nada que no se pueda resolver incluyendo las citas adecuadas. Lo que si es cierto es que los autores no se dan cuenta que autoplagiarse es tan bien una forma de plagio. Como ejemplo podéis ver una entrada antigua que hizo sobre Turnitín, un sistema antiplagio bastante eficiente. Turnitín, el programa antiplagio de moda. 

Science publishing: How to stop plagiarism. (2012).Nature, 481 (7379), 21-23. doi:10.1038/481021a

viernes, diciembre 23, 2011

Dos mil once. El año de las retractaciones.


Autores: Rafael Repiso y Álvaro Cabezas.


Uno de los problemas de la ciencia, quizás de los menores en importancia pero sí de los más mediáticos últimamente, es el incremento de retractaciones de artículos. Algo que plantea muchas dudas, ¿a qué se debe el aumento de retractaciones? ¿Es un síntoma de que la ciencia se está corrompiendo, o por el contrario es síntoma de que las herramientas de evaluación son cada vez mejores? En definitiva la pregunta es ¿El aumento de retractaciones es algo bueno o malo? Desde la creación del blog Retraction Watch en 2010, han publicado información de alrededor de 250 artículos retractados (Van Noorden, 2011).

El porcentaje de artículos retractados se ha multiplicado en un 300% en la última década, mientras que la producción científica sólo ha aumentado un 50%(Marcus y Oransky, 2011). Las cifras actuales sitúan el problema en 1 artículo retractado por cada 5000, aunque es una cifra relativamente pequeña (0.0002%), - esto es lo que se detecta, probablemente muchos de los casos nunca serán detectados - sucede que la mayor parte de estos artículos están publicados en las mejores revistas, lo cual magnifica la repercusión del hecho. No obstante también es cierto que muchos de los artículos que se retractan provienen de un número reducido de autores, como fue el caso del alemán Joachim Boldt con 90 retractaciones en anestesiología (Blake 2011).
¿Por qué el mayor número de retracciones se concentran en las mejores revistas? El motivo obvio es la ambición de los tramposos, que puestos a incumplir con la ética científica prefieren hacerlo para aspirar a las mejores revistas de sus disciplinas. El segundo motivo del aumento de retractaciones ha sido el aumento de la visibilidad de las revistas gracias a la publicación electrónica y al libre acceso a muchos de los trabajos. Esto, sumado al espectacular aumento de la población científica en los últimos años ha hecho que la difusión científica aumente. Otro factor que en teoría ha aumentado el número de retracciones con efecto retrospectivo ha sido el desarrollo de software antiplagio para texto, como Turnitin o para imágenes. Estas nuevas tecnologías han hecho que la comunidad científica revise los antiguos trabajos de investigadores dudosos, dando lugar a escándalos famosos. 

La revisión por pares no acaba una vez el artículo es publicado, sino que la verdadera prueba de fuego viene cuando el artículo se hace público y es sometido al juicio y arbitraje de la comunidad científica. Por ello, y gracias a las nuevas tecnologías de están apareciendo sistemas y formas públicas de evaluación de los artículos (post-publication peer review u open peer review), desde el simple análisis de los artículos por blogueros especializados en el área, a las plataformas que permiten incluir comentarios online de los artículos, hasta sistemas más complejos como el producto (o metaproducto) que proximamente sacará CrossMark, donde se podrán registrar toda la información relativa a un artículo, noticias en medios, cartas a los editores, post de blogs, pre-prints, datos del estudio, etc. Es decir, toda la información relacionada directamente con el artículo antes y después de publicarse. Esta es una práctica similar a la que ya tienen algunas revistas como la Journal of Cardiothoracic Surgery.
Las revistas deben explicar los motivos de las retractaciones, agregándole transparencia a sus procesos evaluativos y a esta última fase adicional incorporada en el proceso clásico de evaluación científica, la retractación. Los revisores deben ser cuestionados cuando una vez publicado un artículo éste debe ser retractado, lo que en muchos casos es fruto de una revisión defectuosa. Por consiguiente también debe cuestionarse a la revista y sus criterios de selección de revisores, lo que nos lleva a una espiral cuyo objetivo es detectar cuales son los procesos del sistema de evaluación que han fallado y retroalimentarse para que esta situación no vuelva a ocurrir. Las Universidades o los centros de investigación deben, en nuestra opinión, como mínimo eliminar los privilegios que los investigadores consiguieron con esos trabajos fraudulentos, llegando incluso al despido si se detecta una práctica claramente antiética. 

El problema del fraude científico, y el motivo por el que muchos investigadores se rasgan las vestiduras es que afecta directamente a todos los “jugadores” del sistema. El progreso científico es limitado debido a que los sistemas ya establecidos suelen tener una estructura piramidal, con una base de muchos becarios y una cúspide donde sólo se llega a través de la acumulación y acreditación de méritos. Argumentar méritos falsos hace que personas verdaderamente merecedoras de progresar se queden fuera, pervirtiendo un sistema enormemente competitivo. Por eso la comunidad debe alegrarse con las nuevas medidas cuyo objetivo es lograr que el sistema científico sea más transparente y permita reconocer y localizar las perversiones del mismo. Aunque efectivamente lo que se saquen sean escándalos y noticias, debemos felicitarnos por que el sistema de detección cada vez es mejor y estemos visualizando prácticas que hace unos años hubiesen quedado ocultas.
  • Blake, H. (2011). Joachim Boldt profile: a glittering career built on charisma and charm. The Telegraph. Recuperado a partir de http://www.telegraph.co.uk/health/healthnews/8360678/Joachim-Boldt-profile-a-glittering-career-built-on-charisma-and-charm.html
  • Marcus, A., y Oransky, I. (2011). The Paper is not sacred. Nature, 480(7378), 449-450.
  • Van Noorden, R. (2011). The trouble with retractions. Nature, 478(7367), 26-28.

miércoles, noviembre 23, 2011

Nuevo artículo: Productividad e impacto de los investigadores españoles


Se acaba de publicar en la Revista Española de Documentación Científica, tanto en español como en inglés, el último trabajo del grupo, en el que analizamos la productividad y el impacto de los investigadores españoles, tomando como referencia los solicitantes de proyectos del Plan Nacional de I+D en 2007. Así reza el resumen:
Se presentan umbrales de referencia de producción e impacto científico de la investigación española con visibilidad internacional para las áreas definidas por la Agencia Nacional de Evaluación y Prospectiva (ANEP) en sus convocatorias. Tomando como población los solicitantes de proyectos del Plan Nacional de I+D 2007 (n= 3.356) se construyen tablas de referencia por percentiles que funcionan a modo de benchmarks, permitiendo efectuar comparaciones entre el comportamiento bibliométrico de un investigador y los registros de referencia en su área científica. Igualmente se ofrecen los datos de producción, impacto y visibilidad promedios para las áreas ANEP, y se discute el proceso de internacionalización de dichas áreas en el período 2000-2006, con una especial atención a las Ciencias Sociales. Finalmente, se sugiere el uso de umbrales de referencia como método de evaluación tanto para agencias financiadoras como para instituciones de investigación en sus procesos selectivos.
DESCARGAR VERSIÓN ESPAÑOLA -  Jiménez-Contreras, E., Robinson-García, N., Cabezas-Clavijo, Á. (2011). Productividad e impacto de los investigadores españoles: umbrales de referencia por áreas científicas. Revista española de documentación científica, 2011, 34(4), 505-525. doi:10.3989/redc.2011.4.828
 ----------------------------------------
DOWNLOAD ENGLISH VERSION - Jiménez-Contreras, E., Robinson-García, N., Cabezas-Clavijo, Á. (2011). Productivity and impact of Spanish researchers: reference thresholds within scientific areas. Revista española de documentación científica, 2011, 34(4), 505-525. doi:10.3989/redc.2011.4.828

lunes, noviembre 23, 2009

V Jornada Medes sostenibilidad de la ciencia y las publicaciones científicas en español

El jueves pasado 19 de noviembre, se celebraron en San Lorenzo del Escorial, las V Jornadas MEDES, organizadas por la Fundación Lilly. Aunque el programa y tema de las jornadas fue SOSTENIBILIDAD DE LA CIENCIA Y LAS PUBLICACIONES CIENTÍFICAS EN ESPAÑOL, se habló de todo: modelo de I+D+I, financiación de la investigación, sistemas de evaluación, gestión y, por supuesto, sobre la salud de las revistas científicas españolas y del español como lengua científica.

EC3 estuvo presente con la participación de Emilio, que trazó los perfiles característicos del sistema de evaluación científica imperante en España y desgranó sus efectos en el sistema español de ciencia y tecnología, unos benéficos y otros no tanto. La presentación podéis encontrarla aquí o bien en la página del grupo

lunes, mayo 26, 2008

Evaluación de las ciencias sociales y humanas: guía y ejemplo

Emilio la semana pasada andaba por aquí, por Pamplona, dando un par de conferencias en las dos universidades navarras (la pública y la privada). El tema elegido fue la evaluación de las ciencias sociales y humanas [un viejo clásico]. En esta ocasión las conferencias iban dirigidas sobre todo a profesores universitarios y se convirtió más bien en una especie de taller para enfrentarse y sobrevivir al tortuoso mundo de las acreditaciones, tramos, etc. Por eso gran parte del contenido versa sobre los diferentes criterios empleados por las agencias para evaluar estos campos. La presentación era ésta:



Por la parte que me toca también estamos con el tema de las sociales y humanidades en la Unav y al menos en lo que respecta a las publicaciones en revistas científicas parece que vamos alcanzando algunos consensos. Concretamente la solución que hemos adoptado es utilizar los índices nacionales (Inrecs, Inrecj y Resh) más el JCR para evaluar y caracterizar cuantitativamente la producción de la universidad. Primero hay que automatizarlo todo y después ya sacaremos algunos resultados a ver ocurre, bueno aunque éste es un breve ejemplo de lo que pasa en el departamento derecho. Como veis la idea es extrapolar las técnicas que se han venido empleando con el JCR a los rankings españoles. Al menos con ésto tenemos un retrato.



miércoles, febrero 27, 2008

Los índices de impacto nacionales ¿son necesarios?

Si te interesa la pregunta aquí tienes la respuesta:



Ésto lo presentaron Emilio & Evaristo en:
Jornada de Evaluación en Ciencias Sociales, Agencia Nacional de Evaluación y prospectiva. Palma de Mallorca, 22 de febrero de 2008.

sábado, diciembre 08, 2007

Temas de siempre: la fuga de cerebros

Leo en hoy en El País un artículo sobre un tema clásico en la ciencia española: la fuga de cerebros:

Que vuelvan los cerebros. "España trata de recuperar a científicos de valía que trabajan en otros países. Pero la inexistente carrera investigadora que ofrece su país les disuade de volver".

Un tema que he tenido la oportunidad de vivir y comentar recientemente. Ahora estoy por tres meses en el CWTS en Leiden Universiteit. Aunque no estoy de fuga sino de visita. Aquí he conocido a Rodrigo Costas, un tipo que está a punto de leer la tesis y que ya suma un puñado de buenas publicaciones como primer autor. Por lo que cuenta las cosas en su centro están difíciles después de los cambios estructurales que se están produciendo en el CSIC, por lo que los más probable es que tenga que continuar fugándose periódicamente para sobrevivir. También anda por aquí desde hace cinco años Clara Calero que prefirió la oferta del CWTS a la limosna de la Carlos III. Ella me cuenta que las posibilidades de volver son pocas, sin carrera científica en la que integrarse, con retribuciones de risa y con el Sistema Corleone que predomina en muchos departamentos hace que prácticamente ni se lo piense.

Esto es lo que hay. En el artículo de El País se referencia además un trabajo de un compañero de la Unav, Javier Sáez Castresana, en el que nos da Diez razones para que investigadores españoles en el extranjero no vuelvan que resumen perfectamente la situación actual. [recomendaría su lectura a muchos antes de meterse a investigar]

martes, octubre 09, 2007

Se quejan con razón

"The Mismeasurement of Science" by Peter A. Lawrence. Current Biology 17(15):R583-R585.

Amarga queja y tal vez no le falte razón, los indicadores a nivel micro suelen hacer aguas. De todas formas los especialistas en bibliometría siempre andan advirtiendo sobre las limitaciones de los indicadores [ejemplo1, ejemplo2]. Estas advertencias suelen caer en saco roto para los gestores de la ciencia que siempre piden un indicador perfecto y barato, además no suelen tener demasiado tiempo para escuchar historias de limitaciones.

El problema es que la bibliometría cuesta bastante dinero y si se quiere hacer bien debemos poner sobre la mesa un número respetable de indicadores, que no necesariamente tienen que ver con la publicación. La actividad científica es multidimensional y nos han acostumbrado [casi siempre por la pasta] a reducirla al Impact Factor, a los Indices Haches [que es lo más fácil de calcular, lo que tenemos a mano y una forma de amortizar la licencia FECYT-WOS] y claro después se quejan, con razón.

Vía: Living the Scientific Live

viernes, junio 01, 2007

miércoles, mayo 23, 2007

La política científica en la SER

Carlos Martínez Alonso, presidente del CSIC, habla de la política científica española con Angels Barceló en su programa de la Ser A vivir que son dos días.

viernes, mayo 04, 2007

Revistas científicas españolas

La FECYT se está poniendo las pilas intentando revitalizar las revistas científicas españolas. Para ello se ha creado el proyecto ARCE que tiene unas líneas de actuación muy determinadas y en las que el grupo EC3 participa activamente. La puesta de largo del proyecto tendrá lugar en la Jornada de difusión de las medidas de apoyo a las revistas científicas españolas. Allí presentaremos la monografía La edición de revistas científicas. Directrices, criterios y modelos de evaluación que resume más de diez años de investigación en este campo. El libro estará disponible on-line en unos días, así que ya le pediremos a Emilio que nos cuente de que va. Por ahora os dejo con el programa de las jornadas.


Fundación Española para la Ciencia y la Tecnología. Jornada de difusión de las medidas de apoyo a las revistas científicas españolas entre la comunidad editorial que tendrá lugar el miércoles, 9 de mayo

09:45 José Manuel Báez (FECYT)- Presentación del marco del proyecto ARCE y líneas de actuación

10:15 Emilio Delgado, Rafael Ruiz-Pérez y Evaristo Jiménez-Contreras (UGR) - Presentación del manual “La edición de revistas científicas. Directrices, criterios y modelos de evaluación”

11:30 Miguel Huguet (CESCA) - Presentación de la herramienta para la revisión por pares y la edición integral de revistas científicas alojada en el Repositorio Español de Ciencia y Tecnología (RECYT)

12:15 Presentación de los cursos online sobre el manual de edición de revistas científicas y sobre la herramienta de revisión por pares y edición integral de revistas científicas

15:30 James Testa (Thomson)- Selección de revistas para la Web of Science

PDF del programa

miércoles, abril 04, 2007

La política científica española, en Nature

La semana pasada, Nature dedicó un breve editorial a la política científica española bajo el título de Independence Day?. En él se alaba el esfuerzo por incrementar los presupuestos de investigación a la vez que se critica la excesiva burocratización de las políticas públicas de investigación.

Aboga Nature por una flexibilización de la estructura burocrática, que, de hecho, se está produciendo en estos últimos meses, con las reformas que se plantean en el CSIC y con la próxima creación de la Agencia Estatal de Evaluación, Financiación y Prospectiva de la Investigación Científica y Técnica, recogida en la Ley de Agencias Estatales.

¿Ayudarán estas medidas a la consolidación de una estructura científica sólida en nuestro país?

Nature dice que sí. Veamos qué ocurre en los próximos meses.