Acceso y evaluación a la actividad científica
Master Universitario de investigación en tecnologías
industriales y de telecomunicación
Master Universitario de investigación en tecnologías
industriales y de telecomunicación
Enrique PerdigueroProfesor Titular de Hª de la Ciencia
Guión de las sesiones• El proceso de búsqueda de información• La evaluación de la actividad científica• Fuentes de información: bases de datos e
Internet• Bases de datos de interés
– ICYT (Índice Español de Ciencia y Tecnología)– Web of Knowledge (productos del antiguo Instititute
for Scientific Information) – Google Académico– Scopus (Elsevier)– SCImago– IEEE Xplore
Definir la cuestión
Seleccionar la fuente de información
Formular los perfiles de búsqueda
Llevar a cabo la búsqueda
Evaluar los resultados
Obtener los documentos primarios Evaluación de la calidad de la
actividad científica
El proceso de búsqueda de información
Elegir la fuente de información
¿Qué nos interesa saber de una base de datos?
• Cobertura: ¿Qué tipos de documentos forman parte de su
universo documental?• Si tiene un vocabulario
controlado• ¿Cómo es el entorno de
usuario?
¿Qué es un vocabulario controlado?
• Es una potente herramienta documental que evita que aparezcan en una base de datos los problemas del lenguaje natural
• A cada concepto se le asigna un solo término (de un glosario de términos permitidos, evitando sinonimias, polisemias, etc.
• Ninguna de las bases de datos que vamos a utilizar tiene vocabulario controlado. Resulta muy caro. Hay que analizar documento primario a documento primario y adjuntarle varios de los términos permitidos, de tal modo que el documentos quede bien descrito
• Hay elementos de política científica que precisan la evaluación de la actividad científica (los vamos a dejar de lado?
• Puesto que hay muchísima información nos interesa saber cual es la que tiene más
calidad• Para ello debemos acercarnos a los métodos
que se han utilizado para estudiar y medir el funcionamiento de la propia ciencia:
CIENCIOMETRÍA
Evaluación de la Actividad Científica
Cienciometría
Su finalidad es identificar las leyes y las regularidades
que rigen la actividad científica considerada en su
globalidad, aplicando a la ciencia los métodos de la
ciencia
Cienciometría
• Análisis cuantitativo de la actividad de investigación científica y técnica.
• Debería estudiar tanto los recursos y los resultados como las formas de organización en la producción de los conocimientos y técnicas
• Se ha ocupado sobre todo del análisis de los documentos redactados por los investigadores y los tecnólogos
BibliometríaEs la aplicación de métodos
estadísticos y matemáticos al estudio de la ciencia con el fin de definir los
procesos de la comunicación escrita y la naturaleza y desarrollo de las
disciplinas científicas, mediante el recuento y análisis de las distintas
facetas de dicha comunicación
Análisis bibliométrico• Estudio de las dimensiones, el crecimiento y de la distribución de
los documentos científicos• Indagación de la estructura y de
la dinámica de los grupos que producen y consumen estos
documentos y de la información que contienen
Análisis del crecimiento y del envejecimiento de la literatura científica
• La forma normal del crecimiento de la información científica es la exponencial
• La contemporaneidad es la característica fundamental de la ciencia (La ciencia actual supone el 96% del conjunto de la ciencia en todas las épocas)
• Obsolescencia
Concepto de semiperiodo• Permite medir el envejecimiento, la
obsolescencia de la información científica• Semiperiodo: tiempo durante el que se
publicó le mitad de la literatura activa circulante
• Tipo de literatura según el grado de envejecimiento:– con un fuerte componente de literatura clásica
(matemáticas, geología, botánica)– literatura efímera (física o ingeniería)– de carácter intermedio (fisiología y química)
Ley de Lotkasobre la distribución de los autores
según el número de sus trabajos publicados
Con independencia de la disciplina científica el número de autores que publican n trabajos es inversamente proporcional
a n2
A(n)= A(1)/n2
• Donde:• An es el número de autores con n trabajos• A1 es el número de autores con 1 trabajo• n2 Es el número de trabajos al cuadrado
Según la publicación de trabajos sobre un tema dado
• Autores transeuntes: con uno o muy pocos trabajos sobre un tema
• Productores medios : Autores con algunos trabajos sobre un tema
• Grandes productores: Autores con muchos trabajos sobre un tema, en el que son verdaderamente especialistas
Indicadores directos de la calidad de la actividad científica
• El único es la revisión por pares– Así se deciden que artículos se publican
en las revistas– También mediante este método se decide
la concesión de proyectos de investigación
– Es el criterio utilizado en algunas áreas de la Comisión de Evaluación de la Actividad Investigadora
– También lo es, en cierta medida, en las acreditaciones que lleva a cabo la ANECA
Indicadores indirectos de la actividad científica
• Se dispone de indicadores indirectos de la calidad científica que no pueden suplir las opiniones de los expertos que es el único medio de contrastar realmente la calidad
• La productividad, por ejemplo,-que se calcula dividiendo el número de trabajos por unidad de tiempo-, no supone necesariamente un indicador de calidad. No siempre el autor más productivo tiene que ser el mejor
Son indicadores indirectos de la actividad científica:
• número y distribución de las publicaciones (temas, grupos, países, instituciones)
• productividad de los autores• colaboración en las
publicaciones (índice de firmas por trabajo)
Son indicadores indirectos de la actividad científica:
• Impacto de las fuentes
–Factor de impacto de las revistas
– Índice de inmediatez de las revistas– Influencia de la revistas
• Asociaciones temáticas
Factor de impacto
• Medida de la repercusión o impacto de una revista científica en el resto de la comunidad científica
• Para un año se calcula mediante el cociente entre el numero de citas que han recibido en ese año los artículos de una revista dada publicados en los dos años anteriores y el número de artículos publicados por la revista en ese mismo periodo de tiempo
Factor de impacto de una revista para el año 2009
nº de citas recibidas por la revista en 2008 y 2009
FI2009 = ------------------------------------------------nº de artículos publicados por las revista en 2008 y 2009
El factor de impacto es un númerosin sentido si no se tienen en
cuenta:
• Es un indicador relativo, que no debe aplicarse para comparar revistas, grupos o autores de disciplinas distintas
• Ignora el debate en torno a las funciones de las citas en la comunicación científico-técnica
• Desconoce las limitaciones de los Citation Index: extremado sesgo, lagunas y errores
Uso y abuso del factor de impacto
• http://www.ceers.org/ijest/issues/full/v1/n1/101001.pdf
• Los mismos creadores del factor de impacto recomendaron desde el principio que no se utilizara para decidir las contratación de científicos y tecnólogos
• Sin embargo, en los últimos años, y especialmente en nuestro país se ha caido en la IMPACTOLATRÍA
El “factor de impacto acumulado”
El “factor de impacto acumulado”
• No existe como el sumatorio de todos los artículos publicados por un autor o una institución
• Existe el factor de impacto acumulado como la suma del factor de impacto de una misma revista a lo largo de un determinado número de años partido por el número de años considerados
El índice de Hirsch• Un científico tiene índice h si el h de sus Np trabajos
recibe al menos h citas cada uno, y los otros (Np -h) trabajos tienen como máximo h citas cada uno.
• En otras palabras, un científico tiene índice h si ha publicado h trabajos con al menos h citas cada uno. Así, el índice h es el balance entre el número de publicaciones y las citas a éstas. El índice fue diseñado para medir eficazmente la calidad del investigador, a diferencia de sistemas de medición más sencillos que cuentan citas o publicaciones, diferenciando a aquéllos investigadores con gran influencia en el mundo científico de aquéllos que simplemente publican muchos trabajos. El índice funciona eficazmente sólo entre científicos del mismo campo, pues las convenciones de citación difieren entre cada uno de éstos.
El índice de Hirsch• En otras palabras, un científico tiene índice h
si ha publicado h trabajos con al menos h citas cada uno. Así, el índice h es el balance entre el número de publicaciones y las citas a éstas. El índice fue diseñado para medir eficazmente la calidad del investigador, a diferencia de sistemas de medición más sencillos que cuentan citas o publicaciones, diferenciando a aquéllos investigadores con gran influencia en el mundo científico de aquéllos que simplemente publican muchos trabajos. El índice funciona eficazmente sólo entre científicos del mismo campo, pues las convenciones de citación difieren entre cada uno de éstos.