indicadores de calidad

41
Índices de Citas, Factor de Impacto e Indicios de Calidad en Derecho y Ciencias Políticas http://campus.usal.es/~vito/t3.php?encabezado1=Cursos%20de%20formaci %F3n&orden=12

Upload: biblioteca-francisco-de-vitoria

Post on 13-Jun-2015

1.321 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Indicadores de calidad

Índices de Citas, Factor de Impacto e Indicios de Calidad en

Derecho y Ciencias Políticas

http://campus.usal.es/~vito/t3.php?encabezado1=Cursos%20de%20formaci%F3n&orden=12

Page 2: Indicadores de calidad

ANEP

CNEAI

Page 3: Indicadores de calidad

ANECA:

•Programa de Evaluación de Profesorado para la Contratación: Principios y orientaciones para la aplicacion de los criterios de evaluación

•Programa Academia: Principios y orientaciones para la aplicación de los criterios de evaluación

CNEAI:

•Resolución de 23 de noviembre de 2011, de la Presidencia de la Comisión Nacional Evaluadora de la Actividad Investigadora, por la que se establecen los criterios específicos en cada uno de los campos de evaluación.

ANEP:

•Criterios de evaluación de la I+D en Ciencias Sociales

ACUCYL:•Orientaciones sobre la evaluación previa del profesorado contratado y del profesorado de las universidades privadas en posesion del título de doctor.

Page 4: Indicadores de calidad

CRITERIOS ANECA: PROFESOR CONTRATADO DOCTOR (Ciencias Sociales y Juridicas)

5%2%4%

5%

2%

17%

3%

3%

7%

6%

2% 2%

Artículos científicos 30%

Libros y capítulos de libro 12%

Publicaciones científicas y patentes internacionales

Libros y capítulos de libros

Proyectos + contratos de investigación

Transferencia de tecnología

Dirección de tesis doctorales

Congresos, conferencias, seminarios

Otros méritos

Amplitud, diversidad, intensidad, responsabilidad, ciclos, tipo dedocencia universitaria

Evaluaciones sobre su calidad

Ponente en seminarios y cursos, y participación en congresosorientados a la formación docente universitaria

Material docente original, publicaciones docentes, proyectos deinnovación docente, contribuciones al EEES

Tesis doctoral, mención de doctorado europeo, mención decalidad del programa de doctorado, becas pre y postdoctorales,estancias en otros centros de investigación, posesión de más deun títuloTrabajo en empresas-instituciones-hospitales

Otros méritos

Page 5: Indicadores de calidad

CRITERIOS ANECA: PROFESOR AYUDANTE DOCTOR (Ciencias Sociales y jurídicas)

5%

9%

4%

12%

9%

9%

5%

5%

Libros y capítulos de libro 12%

Artículos científicos

30%

Publicaciones científicas y patentes internacionales

Libros y capítulos de libros

Proyectos + contratos de investigación

Congresos, conferencias, seminarios

Otros méritos

Formación académica: Tesis doctoral, mención de doctorado europeo, mención de calidaddel programa de doctorado, becas pre y postdoctorales, cursos y seminarios deespecialización, adecuación de la titulación y la posesión de otros títulos

Estancias de carácter investigador y/o formativo en otros centros

Experiencia docente: amplitud, intensidad, tipo, evaluaciones, proyectos de innovacióndocente, contribuciones al EEES, título de especialista en áreas clínicas, cursos-seminarios-congresos para la formación docente, elaboración de material y publicacione

Experiencia profesional: duración y responsabilidad en empresas-instituciones-hospitales

Otros méritos

Page 6: Indicadores de calidad

CRITERIOS ANECA: TITULAR DE UNIVERSIDAD (Ciencias Sociales y Jurídicas)

4%2%

4%

26%

8%

3%

3%

5%

5%

40% Publicaciones científicas

1.A.- Calidad y difusión de resultados de laactividad investigadora

1.B.- Calidad y número de proyectos ycontratos de investigación

1.C.- Calidad de la transferencia de lo sresultados

1.D.- Movilidad del profesorado

2.A.- Dedicación docente

2.B.- Calidad de la actividad docente

2.C.- Calidad de la formación docente

2.D.- Actividades profesionales

3.- FORMACIÓN ACADÉMICA

3.- EXPERIENCIA EN GESTION YADMINISTRACIÓN

Page 7: Indicadores de calidad

CRITERIOS ANECA: CATEDRÁTICO DE UNIVERSIDAD (Ciencias sociales y jurídicas)

6%3%3%

22%

7%

3%

3%

10%

43% Publicaciones científicas

1.A.- Calidad y difusión de resultados de laactividad investigadora

1.B.- Calidad y número de proyectos ycontratos de investigación

1.C.- Calidad de la transferencia de losresultados

1.D.- Movilidad del profesorado

1.E.- Otros méritos

2.A.- Dedicación docente

2.B.- Calidad de la actividad docente

2.C.- Calidad de la formación docente

2.D.- Actividades profesionales

2.E.- Otros méritos

3.- EXPERIENCIA EN GESTION YADMINISTRACIÓN

Page 8: Indicadores de calidad

JCR

SCOPUS

DICE

LATINDEX

RESH

IN-RECS

CARHUS...

Page 9: Indicadores de calidad

Criterios (objetivos) para la evaluación de revistas:

• BIBLIOMÉTRICOS (basados en análisis de citas)

• FORMALES (basados en características externas de las revistas)

• OPINIÓN DE EXPERTOS

• MIXTOS (combina criterios anteriores)

Page 10: Indicadores de calidad

ÍNDICES BIBLIOMÉTRICOS• FACTOR DE IMPACTO• FACTOR DE IMPACTO A CINCO AÑOS• ÍNDICE DE INMEDIATEZ• VIDA MEDIA CITADA• VIDA MEDIA CITANTE• EIGEN FACTOR• INFLUENCIA DEL ARTÍCULO• ÍNDICE H • SCIMAGO JOURNAL RANK (SJR)• SNIP (Source Normalized Impact per Paper)

Page 11: Indicadores de calidad

Mapa de redes de co-citación : España, 2009-2010

Page 12: Indicadores de calidad

FACTOR DE IMPACTO

• Es la media de veces que los artículos de una revista publicados en los dos años anteriores, han sido citados en el año seleccionado.

• Se calcula dividiendo el número de citas recibidas en el año seleccionado a artículos de los dos años precedentes, por el total de artículos citables publicados en los dos años precedentes

Page 13: Indicadores de calidad

FACTOR DE IMPACTO

Nº de citas recibidas (año) por artículos publicados (dos años anteriores)

FI (año) =Nº de artículos citables publicados (dos años anteriores)

Page 14: Indicadores de calidad

JOURNAL CITATION REPORTS

• Factor de impacto

• Factor de impacto a cinco años

• Factor de inmediatez

• Vida media citada

• Vida media citante

• Eigenfactor

• Influencia del artículo

Page 15: Indicadores de calidad

Web of Science

• Nº de citas por autor

• Índice H

Page 16: Indicadores de calidad

ÍNDICE H (de Hirsch)

• Un autor alcanza un índice H = X cuando ha publicado al menos X artículos que han obtenido al menos X citas cada uno

• Se obtiene ordenando los artículos por orden descendente de nº de citas recibidas. El índice H será el último número de orden que sea igual o menor que el número de citas

Page 17: Indicadores de calidad

H = 7

Page 18: Indicadores de calidad

SCIMAGO JOURNAL RANK

Page 19: Indicadores de calidad

SCIMAGO JOURNAL RANK

• SJR es una medida del impacto, influencia o prestigio de una revista. Expresa la media de citas ponderadas recibidas en el año seleccionado por los artículos publicados en la revista durante los tres años anteriores.

Page 20: Indicadores de calidad

SCOPUS

• Nº de citas por autor

• Índice H

Page 21: Indicadores de calidad

Sesgos:

• Sesgo a favor de la ciencia básica, en general y hacia disciplinas como la Física, Química, Matemáticas, Biología, Farmacología y Ciencias Médicas, en particular

• Sesgo a favor de la ciencia producida en países anglosajones. España solo tiene en torno a un 1% de las revistas de WOK

• Sesgo a favor de las publicaciones en lengua inglesa (el 95% de los artículos)

Page 22: Indicadores de calidad

• La categoría “LAW” de JCR contiene 2 revistas españolas (de 133). Ambas solamente desde 2009, y ambas en el 4º cuartil.

• La categoría “LAW” de SJR contiene 0 (cero) revistas españolas (de 260)

• Las primeras revistas por orden de SJR de la categoría “LAW” son:

1. Current treatment options in oncology2. Expert opinion on therapeutic patents3. Journal of empirical research on human research ethics4. International journal of legal medicine

Sesgos

Page 23: Indicadores de calidad

… además

• Prácticamente la totalidad de los investigadores españoles de ciencias jurídicas publican en revistas españolas

• Entre el 70% y el 90% de las citas que reciben revistas españolas en WOK proceden de revistas españolas

• Los trabajos originados en el seno de las Ciencias Jurídicas atraen fundamentalmente la atención de los entornos donde los descubrimientos se producen. Su destino es el consumo de las comunidades científicas nacionales ya que es una investigación muy influenciada por las peculiaridades culturales, donde prima lo contextual, predominan los problemas de corte local y se adopta una orientación aplicada.

Page 24: Indicadores de calidad

Conclusión

• Ni WOK ni SCOPUS sirven para evaluar la producción científica española en Derecho o Ciencia Política

Page 25: Indicadores de calidad

LATINDEX• Latindex es un sistema de información que proporciona datos sobre

las revistas académicas que se publican en Iberoamérica y el Caribe. Además, ofrece datos útiles para el análisis y evaluación de las revistas de la región.

• Actualmente Latindex ofrece tres bases de datos:

1) Directorio, con datos bibliográficos y de contacto de todas las revistas registradas

2) Catálogo, que incluye únicamente las revistas que cumplen los criterios de calidad editorial diseñados por Latindex

3)  Enlace a Revistas Electrónicas, que permite el acceso a los textos completos en los sitios en que se encuentran disponibles.

• Latindex establece unos criterios de calidad que evalúa en las revistas que incluye en el catálogo.

Page 26: Indicadores de calidad

CRITERIOS LATINDEX

• REVISTAS IMPRESAS

• Características básicas

• Características de presentación de la revista

• Características de gestión y política editorial

• Características de contenido

• REVISTAS ELECTRÓNICAS (36 criterios)

• Adapta a las revistas electrónicas los criterios de las revistas impresas

Page 27: Indicadores de calidad

Surge para poner en valor la investigación científica en Humanidades, frente a las bases de datos americanas centradas en ciencias aplicadas.

CATEGORÍAS ERIH:NATional (NAT): revistas europeas con importancia académica reconocida entre los investigadores de la disciplina dentro de un grupo determinado (generalmente lingüísticamente); citadas ocasionalmente fuera del país de edición, aunque su público es la comunidad académica local.INTernational (INT): revistas europeas y no europeas con importancia académica internacional reconocida por los investigadores en los respectivas disciplinas, y que son regularmente citadas en todo el mundo Tiene dos subcategorías según los criterios de influencia y visibilidad:INT1: revistas internacionales con alta visibilidad e influencia entre investigadores en las diversas disciplinas en distintos países; regularmente citados en todo el mundo.INT2: publicaciones internacionales con visibilidad e influencia significativas en las diversas disciplinas en distintos países W: Revistas que incian su publicación hace menos de tres años.

EUROPEAN REFERENCIE INDEX FOR THE HUMANITIES

Page 28: Indicadores de calidad

Son índices bibliométricos elaborados a partir del recuento de citas con el fin de determinar la relevancia, influencia e impacto científico de las revistas españolas en Derecho (IN-RECJ), Ciencias Sociales (IN-RECS) y Humanidades (IN-RECH), así como de sus autores, e instituciones.

Los elabora el Grupo de investigación EC3 Evaluación de la Ciencia y de la Comunidad Científica (Universidad de Granada)

Page 29: Indicadores de calidad

• Se elabora con las referencias bibliográficas de 64 revistas de 11 especialidades del derecho

• Calcula el impacto de 340 revistas

• Desde 2001

• De cada revista se ofrece : •Índice de impacto anual • Índice de inmediatez por año • Semiperíodo de las referencias citadas • Porcentaje de trabajos citados

• De cada trabajo se ofrece un listado por especialidades de los trabajos más citados en la base de datos, con indicación de los trabajos citadores y citados.

• De los autores se ofrece un listado por especialidades de los autores más citados en la base de datos, con indicación de los trabajos citadores y citados.

• De las instituciones se ofrece un listado por especialidades de las instituciones más citadas en la base de datos, con indicación de los trabajos citadores y citados.

Page 30: Indicadores de calidad

DICE: Difusión y calidad editorial de las

revistas españolas de humanidades, ciencias sociales y jurídicas

DICE tiene el objetivo de facilitar el conocimiento y la consulta de algunas de las características editoriales de las revistas españolas de Humanidades y Ciencias Sociales más estrechamente ligadas a la calidad, ofreciendo una serie de indicadores para cada revista.

ANECA utiliza esta base de datos como referencia de calidad de las publicaciones españolas, en sus procesos de evaluación de profesorado.

La elabora el grupo de investigación “Evaluación de publicaciones científicas en Ciencias Sociales y Humanas” (EPUC) del CSIC.

Page 31: Indicadores de calidad

DICE: Difusión y calidad editorial de las

revistas españolas de humanidades, ciencias sociales y jurídicas

• INDICADORES DICE:

• Criterios LATINDEX cumplidos

• Existencia de evaluadores externos

• Apertura exterior de los autores

• Valoración de la difusión internacional

• Internacionalidad de las contribuciones

• Categoría ANEP

• Categoría ERIH

• Categoría CARHUS

Page 32: Indicadores de calidad

•RESH (Revistas Españolas de Ciencias Sociales y Humanidades) es un sistema de información que integra indicadores cualitativos y cuantitativos de calidad para las revistas científicas españolas de Ciencias Sociales y Humanidades:

• Indicadores de calidad editorial (CNEAI, ANECA, LATINDEX)

• Difusión (Presencia en bases de datos) (1er trimestre 2010)

• Opinión de expertos (encuesta 2009). ICE: Indicador de calidad según expertos

• Impacto: tasa de citación (CC. SS: 3 años; Humanidades: 5 años). 417 revistas fuente.

• Elaborado por EPUC + EC3

Page 33: Indicadores de calidad

CLASIFICACIÓN INTEGRADA DE REVISTAS CIENTÍFICAS

•Clasificación de las revistas científicas españolas de CC.SS. y Humanidades en función de la calidad, integrando los productos de evaluación existentes y considerados positivamente por las diferentes agencias de evaluación nacionales como CNEAI, ANECA).

•La clasificación consta de cuatro grupos jerárquicos (gA, gB, gC, gD) en función de la visibilidad de las revistas y un quinto grupo de excelencia (gEx).

•EPUC+EC3+ACUTE+LEMI

•Desde junio de 2011 la clasificación CIRC se integra en Dialnet

Page 34: Indicadores de calidad

CLASIFICACIÓN INTEGRADA DE REVISTAS CIENTÍFICAS

El criterio para la asignación a los grupos jerárquicos depende de las puntuaciones que obtiene la revista en bases de datos como:

•SCI, SSCI, AHCI

•JCR

•SCOPUS

•SJR

•ERIH

•IN-RECJ, IN-RECS, IN-RECH

•DICE

•LATINDEX

Page 35: Indicadores de calidad

Es un sistema de clasificación de revistas científicas de los ámbitos de CCSS y Humanidades que se publican a nivel local, nacional e internacional. Su finalidad es contribuir a la evaluación de la investigación que se lleva a cabo en el sistema científico y universitario catalán con la máxima objetividad.

Clasifica las revistas en cuatro niveles: A, B, C, D.

REVISTAS A: • Presentes en la WOS• ICDS > 9,5• Revistas de catalanística con buena puntuación

REVISTAS B, C y D:• ICDS (50%)• FORMATO (25%): (Cumplimiento de la periodicidad, Instrucciones a los autores, afiliación de los autores, Palabras clave, Resumen en inglés.• SISTEMA DE REVISIÓN (12,5%)

• COMITÉ EDITORIAL (12,5%)

Lo desarrolla AGAUR (Agència de Gestió d’Ajuts Universitaris i de Recerca)

CARHUS Plus+

Page 36: Indicadores de calidad

Es un indicador que mide la difusión de las revistas en las bases de datos científicas:

a) 3 puntos: títulos presentes en 7 bases de datos internacionales de índice y resumen de carácter multidisciplinar sobre CC.SS. y humanidades

b) 3 puntos: títulos presentes en bases de datos de carácter especializado.c) Máximo de a + b = 5 puntos.d) 3,5 puntos: títulos presentes en una de las bases de datos de WOSe) 2,5 puntos: títulos presentes en Latíndex y que no están presentes en

ninguna de las bases de datos internacionales.f) pervivencia de la revista para los títulos presentes en el repertorio Ulrich's

periodicals directory, con la condición de que sea una publicación viva y con la fecha de inicio bien definida.

Nota:en el caso del derecho se ha estipulado una excepción porque se considera que todo el ámbito en general tiene un déficit de visibilidad.

El ICDS es elaborado por MIAR.

ICDS (Índice Compuesto de Difusión Secundaria )

Page 37: Indicadores de calidad

Contiene un listado exhaustivo de bases de datos que incluyen la revista

Matriu d’Informació per a l’Avaluació de Revistes

Page 38: Indicadores de calidad

“Lo que yo me pregunto es: ¿Estaremos teniendo impacto?”

Page 39: Indicadores de calidad
Page 40: Indicadores de calidad
Page 41: Indicadores de calidad