Modelo de Medición de Grupos de

Investigación, Tecnológica o de Innovación

Resultado del proceso de análisis y evaluación del

“Comité de Expertos”

Presentado al Consejo Nacional de Educaciòn Superior

CESU

Agosto 14 de 2008
 Contenido

1. Comité de expertos
2. Diagnóstico
3. Validación de la información
4. Simulaciones de variables
5. Conclusiones de las simulaciones
6. Análisis y evaluación de la producción dentro del Modelo vigente
7. Modelo de Medición de Grupos de investigación - propuesta
8. Vigencia de las categorías
9. Nueva tecnología CvLAC y GrupLAC
10. Propuestas para el año 2009
 Comité de Expertos
Integrantes:

Margarita Garrido Otoya

Ex-directora de Colciencias

Jorge Martínez Collantes

Ex-vicerrector Académico Universidad Nacional de Colombia

Gustavo Valencia Restrepo

Ex-vicerrector de Investigación Universidad de Antioquia

Rafael Bautista Mena

Profesor titular dedicación Exclusiva Universidad de los Andes
 Resultados Convocatoria año 2004 - 2006
Crecimiento de grupos por categoría

Consolidado por proceso de medición 465

465
Año 2004
A B C
236 276 262
Año 2006 (1) 465 331 191
891
891 Año 2006 (2) 190 206 167
331
331
813
813 Total 891 813 620
276
276
701
701 262
262
236
236
607 620
620
607 206
206
190
190 191
191
167
167
453
453

276
276 261
236 261
236

AA BB CC

Año
Año2004
2004 Año
Año2006
2006(1)
(1) Año
Año2006
2006(2)
(2)
A
A B
B C
C

Año
Año 2004
2004 Año
Año 2006
2006 (1)
(1) Año
Año 2006
2006 (2)
(2) Consolidado por Categoría
AA BB CC RR
Año
Año2004
2004 236
236 276
276 261
261 1445 A
1445 A
37%
Año 37%
Año2006
2006(1)
(1) 701
701 607
607 453
453 2074
2074 R
R
5%
Año
Año2006
2006(2)
(2) 891
891 813
813 620
620 2456
2456
5%

B
B
C 33%
C 33%
25%
25%
Fuente:
Fuente: Colciencias
Colciencias -- ScienTI
ScienTI -- Colombia
Colombia
2006-09-29
2006-09-29
 Validación de la Información

“Se debe suprimir el aval de la

institución para la producción “sólo se debe mantener el “aval
que reporta cada Grupo”” institucional” para el Grupo.”
(Comité
(Comité de
de Expertos)
Expertos) (Comité
(Comité de
de Expertos)
Expertos)

Veracidad de la Información

• Cada uno de los investigadores se hará responsable de la

información registrada en su CvLAC.
• A partir del GrupLAC (el director del grupo) validará los CvLAC de
las personas que pertenecen al grupo.
• El director del grupo avalará la producción del grupo en GrupLAC.
• Las instituciones avalarán la existencia de los grupos, la
pertenencia de los investigadores a los grupos y la producción
registrada.
 Simulaciones
Se recomendó realizar simulaciones variando los valores
relacionados con las siguientes variables:

• Ventana de observación.
• Pesos de los Índices de Nuevo Conocimiento, Nuevo
Conocimiento Tipo A, Formación, Divulgación.
Valores
Valores con
con los
los que
que se
se hizo
hizo lala simulación:
simulación:
•• 4,5
4,5 NC
NC ++ 3,5
3,5 NCA
NCA ++ 1,5
1,5 FF ++ 0,5
0,5 D
D
•• 3,5
3,5 NC
NC ++ 55 NCANCA ++ 11 FF ++ 0,5
0,5 D
D
•• 3,5
3,5 NC
NC ++ 4,5
4,5 NCA
NCA ++ 1,5
1,5 FF ++ 0,5
0,5 D
D
•• 55 NCNC ++ 3.5
3.5 NCA
NCA ++ 11 FF ++ 0,5
0,5 D
D

• Pesos para los productos de formación.

• Umbrales.
 Conclusiones Simulaciones
 Se puede cambiar la ventana de observación para el grupo de
investigación de 8 años y 9 meses a 5 años los resultados no
introducen ningún cambio significativo en el modelo y es lo
suficientemente amplio para ver la dinámica del grupo a través
del tiempo.

 Se concluye que los pesos de los indicadores de: nuevo

conocimiento (NC), nuevo conocimiento tipo A (NCA), formación
(F) y divulgación (D) no introducen cambios significativos .

Fórmula
Fórmulaactual
actual
Índice
ÍndiceScienticol
Scienticol==55NC
NC++3,5
3,5NCA
NCA++11FF++0,5
0,5Divulgación
Divulgación
 Formación de Investigadores
 Se adoptan los pesos de los productos de formación propuestos por el comité
Propuesta
Vigente Tesis de doctorado
•Aprobada: 1.0,
Tesis de doctorado •Cum Laude: 1.2,
Aprobada: 1.0, •Magna Cum Laude: 1.4,
•Summa Cum Laude: 1.6

Tesis de maestría Tesis de maestría

Aprobada: 0.5 •Aprobada: 0.5,
•Distinguida: 0.7

Trabajo de Grado: Trabajo de Grado:

Aprobado: 0.1 Aprobado: 0.1
Distinguido: 0.2

Para la participación de los Grupos de Investigación en los programas de maestría y

doctorado:

•Programa o línea de doctorado basada en investigación del Grupo: 1

•Programa o línea de maestría basada en investigación del Grupo: 0.5
•Curso diseñado para programas de doctorado basado en investigación del Grupo: 0.3
•Curso diseñado para programas de maestría basado en investigación del Grupo: 0.1
 Recomendaciones Simulaciones

Para
Para elel proceso
proceso de de convocatoria
convocatoria del
del año
año 2002
2002 se se definieron
definieron umbrales
umbrales (Nuevo
(Nuevo
conocimiento
conocimiento 2,2, Nuevo
Nuevo conocimiento
conocimiento AA 0.5,
0.5, Formación
Formación 1, 1, Divulgación
Divulgación 1)
1) que
que se
se dejaron
dejaron
fijos
fijos para
para las
las siguientes
siguientes convocatorias
convocatorias yy no no se se actualizaron
actualizaron periódicamente.
periódicamente.
Eventualmente,
Eventualmente, todos
todos los
los grupos
grupos de
de investigación
investigación podrían
podrían superar
superar estos
estos umbrales
umbrales dede
producción
producción perdiéndose
perdiéndose elel carácter
carácter comparativo
comparativo de
de lala medición.
medición.

Con la modificación del umbral cambian las proporciones de la clasificación de

los grupos de investigación.

Se
Se recomienda
recomienda que que elel umbral
umbral sese calcule
calcule aa partir
partir de
de lala información
información de de lala población
población con
con lala
que
que sese esta
esta trabajando
trabajando (los(los grupos
grupos de de investigación
investigación inscritos
inscritos para
para elel proceso
proceso de de lala
convocatoria),
convocatoria), usando
usando lala formula:
formula: Q3
Q3 ++ 1,5
1,5 ** (Q3-Q1)
(Q3-Q1) donde
donde Q3 Q3 yy Q1
Q1 son
son elel tercer
tercer cuartil
cuartil yy
primer
primer cuartil
cuartil respectivamente
respectivamente de de los
los datos
datos dede los
los indicadores
indicadores (mayores
(mayores que que cero)
cero) de
de
todos
todos los
los grupos.
grupos.
 Resultados Simulaciones

El umbral se calculó para el Modelo de Medición del A

Umbral
Umbral vigente
vigente
B
año 2004 y quedó fijo hasta el año 2006 con los 1000
1000 C
siguientes valores: 800
800

• Producción de nuevo conocimiento = 2 600

600

400
• Producción de nuevo conocimiento tipo A = 0.5 400

200
200
• Producción de formación = 1 0
0
• Producción de divulgación = 1 1
1

Propuesta de umbral estadístico con los siguientes Um

Umbral
bral estadístico
estadístico propuesto
propuesto
valores: C
C
1500
1500
• Producción de nuevo conocimiento = 3 1000
1000
B
B
• Producción de nuevo conocimiento tipo A = 2.5 500
500 A
A

• Producción de formación = 1 00
11
• Producción de divulgación = 7

Fuente: Plataforma ScienTI – Colombia – Julio de 2007

Análisis y evaluación
de la producción
 Libros y Capítulos de Libro
Resultado de Investigación
 El Comité observó que la forma actual de validar los libros de investigación no
garantiza la calidad de los mismos.
Se trabajó en definir criterios para clasificar los libros y capítulos de libro.
Actualmente no existe un sistema equivalente a Publindex para clasificar a las
editoriales y en consecuencia a los libros.
Los libros han causado deformaciones en el escalafón.
La gráfica muestra como cambiaría el escalafón actual si no se tuvieran en
cuenta los libros en la medición.
1000
1000 944
944
888
888
900
900
800
800
690
690 700
700
700
700
600
600 A
A
500
500 B
B
400
400 C
C
300
300
200
200 147
147
89
89
100
100
00
Sin
Sin Libros
Libros Vigente
Vigente

Fuente: Plataforma ScienTI – Colombia – Julio de 2007

 Libros y Capítulos de Libro
Resultado de Investigación
El Comité recomienda los siguientes criterios para clasificar los libros y capítulos
de libro de investigación en tres categorías para el año 2008:

• Los relacionados con la visibilidad e impacto del libro para el año 2008 .
• Los relacionados con la tipificación de editoriales, esta última de aplicación a partir
de 2009.

AÑO 2008
REQUISITOS PARA LOS LIBROS CATEGORÍA A
Libro con citación o reseña en Revista A1, A2 o B o en Libro Tipo A.
 REQUISITOS PARA LOS LIBROS CATEGORÍA B:
Libro con citación o reseña en Revista C o en Libro Tipo B.
 REQUISITOS PARA LOS LIBROS CATEGORÍA C
Libro con citación o reseña en Revista no indexada o no homologada o
en Libro Tipo C.
 Libros y Capítulos de Libro
Resultado de Investigación

El Comité recomienda un período de gracia para los libros y capítulos de libro de

investigación para el año 2008:

Para los libros de investigación registrados que la fecha de obtención sea

dentro de los últimos tres años de la ventana de observación; se establece
un período de gracia de tres años, durante el cual tendrá un puntaje de 2. Si
dentro de este período el libro completa los requisitos para alcanzar alguna
de las categorías (subtipos) establecidos en las tablas A.1 y B.1; se
modificará la categoría y obtendrá el puntaje correspondiente.
 Libros y Capítulos de Libro
Resultado de Investigación

Para el año 2009 – 2010

REQUISITOS PARA LOS LIBROS CATEGORÍA A

Libro con citación o reseña en Revista A1, A2 o B o en Libro Tipo A.
O:
Publicado por una editorial que cumpla con los siguientes criterios:
•Tener más de cinco años de existencia.
•Tener un comité editorial (50% de los miembros del Comité Científico, como mínimo, debe pertenecer a
instituciones extranjeras).
•Que haya tenido evaluación por pares
REQUISITOS PARA LOS LIBROS CATEGORÍA B
Libro con citación o reseña en Revista C o en Libro Tipo B.
O:
• Publicado por una editorial que cumpla con los siguientes criterios :
• Tener al menos cinco años de existencia de la editorial.
• Tener un comité editorial (50% de los miembros del Comité Editorial debe ser externo a la institución
editorial)
• Que haya tenido evaluación por pares
 Libros y Capítulos de Libro
Resultado de Investigación
REQUISITOS PARA LOS LIBROS CATEGORÍA C
Libro con citación o reseña en Revista no indexada o no homologada o
en Libro Tipo C.
O:
Publicado por una editorial que cumpla con los siguientes criterios :
•Tener al menos tres años de existencia de la editorial
•Tener un comité editorial (con un mínimo de integrantes)
•Que haya tenido evaluación por pares
 Propuesta
Modelo de medición de los Grupos Colombianos de
Investigación, en ciencia, tecnología e innovación
Año 2008
 Definición de grupo de investigación científica
o tecnológica

Para el SNCyT los grupos de investigación deben cumplir mínimo con los siguientes requisitos:

• Estar registrado en el sistema GrupLAC de la Plataforma ScienTI - Colombia en Colciencias.

• Tener uno o más años de existencia.
• Estar avalado al menos por una (1) Institución registrada en el sistema InstituLAC de la
Plataforma ScienTI - Colombia, a la cual el grupo haya registrado que pertenece.
• Tener al menos un proyecto de investigación en marcha.
• Que por lo menos una (1) de las personas vinculadas al grupo como investigador, posea una
formación de pregrado, maestría, o doctorado concluida.
• Tener registrado al menos un (1) producto de nuevo conocimiento desarrollado por el grupo
de investigación obtenido dentro de la ventana de observación.
• Reportar al menos dos productos resultantes de actividades de investigación relacionadas
con la formación y la apropiación social del conocimiento, divulgación, extensión, o una
combinación de éstas.
 Definición de grupo de investigación científica
o tecnológica

CUMPLEN DEFINICION
Para el año 2006 de un total de
(Julio de 2007)
5299 grupos, solamente
SI 3274
2456 (46.3%) cumplieron la
definición de grupo
NO 3428
Fuente: Plataforma ScienTI – Colombia – Julio de 2007

Propuesta
Solamente los grupos de investigación que
cumplan esta definición serán visibles en la
plataforma ScienTI
Productos que se tendrán en cuenta para el
Modelo de Medición
 Productos de Nuevo Conocimiento
Artículos de investigación

Vigente
TIPO DE PRODUCTO INDICADOR DE CALIDAD 1
Artículo completo publicado en revista Publicado en revista A (1)
especializada que presente resultados
Publicado en revista B (0.72)
originales de investigación del grupo
Publicado en revista C (0.52)
Artículo corto

Artículo de Revisión (nueva interpretación de

la literatura científica)

Presentación de caso clínico o reporte de

caso

Propuesta
Tipo del Producto Calidad Indicador Peso Descripción
Artículos de A ART-A 1 Publicado en revista A1 o A2
investigación
B ART-B 0,7 Publicado en revista B
C ART-C 0,4 Publicado en revista C
O ART-O 0,2 Demás que verifican existencia
 Productos de Nuevo Conocimiento
Libro y capitulo de libro
Vigente Libro
TIPO
TIPO DE

Libro de
DE PRODUCTO
PRODUCTO

de autor
autor que
que presente
presente Libro
Libro tipo
INDICADOR
INDICADOR DE

tipo A:
A: Aval
DE CALIDAD
CALIDAD

Aval institucional
institucional certificando
certificando que
que
resultados
resultados de
de investigación
investigación del
del es
es un
un libro
libro que
que presenta
presenta resultados
resultados de de
grupo
grupo investigación.
investigación. (3.0)
(3.0)

Capítulos
Capítulos dede libro
libro tipo
tipo A:
A: Aval
Aval institucional
institucional
Capítulo
Capítulo en
en libro
libro que
que presente
presente certificando
certificando que
que eses un
un capítulo
capítulo dede libro
libro que
que
resultados
resultados de
de investigación
investigación del
del presenta
presenta resultados
resultados de de investigación.
investigación. (0.6)
(0.6)

Propuesta grupo
grupo

Libros de investigación A1 LIB-A-1 3 Libro con citación o reseña en Revista A1, A2 o B

o en Libro Tipo A-1
A2 LIB-A-2 2 Libro registrado que la fecha de obtención sea
dentro de los últimos tres años de la ventana.
Tendrá un período de gracia de tres años.
B LIB-B 2,5 Libro con citación o reseña en Revista C o en
Libro Tipo B
C LIB-C 2 Libro con citación o reseña en Revista no
indexada o no homologada o en Libro Tipo C
O1 LIB-O-1 1 Libro sin citación o reseña, obtenido hace más de
tres años y menos de 4
O2 LIB-O-2 0,5 Libro sin citación o reseña, obtenido hace más de
cuatro años y menos de 5.
Capítulos de libros de A1 CAP-A-1 0,6 De Libro con citación o reseña en Revista A1, A2
investigación o B o en Libro Tipo A-1
A2 CAP-A-2 0,4 De Libro obtenido hace menos de tres años
B CAP-B 0,5 De Libro con citación o reseña en Revista C o en
Libro Tipo B
C CAP-C 0,4 De Libro con citación o reseña en Revista no
indexada o no homologada o en Libro Tipo C
O1 CAP-O-1 0,2 De Libro sin citación o reseña, obtenido hace mas
de tres años y menos de 4
O2 CAP-O-2 0,1 De Libro sin citación o reseña, obtenido hace mas
de cuatro años y menos de 5.
 Productos de Nuevo Conocimiento
Productos patentables
Vigente
TIPO DE PRODUCTO INDICADOR DE CALIDAD

Producto o proceso tecnológico resultado Patente de invención o su equivalente en otro

de investigación que dio origen a patente o país (3.0)
registro: producto tecnológico, diseño
industrial, esquema de trazado de circuito Patente de modelo de utilidad o su
integrado, variedad vegetal o animal o equivalente en otro país (2.0)
nueva raza, software, proceso analítico,
proceso instrumental, proceso industrial, Registro (1.5)
proceso pedagógico, proceso terapéutico

Propuesta
Tipo del Producto Calidad
Calidad Indicador Peso
Peso Descripción
Patentes A1-I PAT-INV-A1 4 Patente de invención obtenida con producto
A2-I PAT-INV-A2 3 Patente de invención obtenida con menos de
dos años sin producto
A3-I PAT-INV-A3 2,5 Patente de invención obtenida con más de
dos y menos de cuatro años sin producto
A4-I PAT-INV-A4 2 Patente de invención obtenida con más de
cuatro años sin producto
O-I PAT-INV-O 1,5 Patente de invención solicitada
A-M PAT-MOD- 2 Modelo de utilidad obtenido
UTIL-A
O-M PAT-MOD- 1 Modelo de utilidad solicitado
UTIL-O
 Productos de Nuevo Conocimiento
Productos no patentables

Propuesta

Tipo del Producto Calidad Indicador Peso Descripción

Registros (Sofware, variedad A-R REG-A 1 Registrado
animal, vegetal o nueva raza y
todo diseño o modelo
registrado)
Empresas de origen O SPINOFF-O 1 Verificado como Spin offs
universitario o empresarial
generadas en un grupo de I+D
(Spin off).
Normas basadas en resultados A NORM-A 1 Verificado como norma social o técnica
de investigación (Social, o
Socio técnica)
Productos o procesos A NO-PAT-A 2 Verificado como protegido por secreto
tecnológicos usualmente no industrial
patentables o registrables
 Productos relacionados con la
formación de investigadores
Vigente Tipo del Producto
Tesis de doctorado aprobadas
Peso
1
dirigidas o realizadas al interior del
grupo
Tesis de maestría aprobadas 0,5
dirigidas o realizadas al interior del
grupo
Trabajos de grado dirigidos o 0,1
realizadas al interior del grupo
Programa doctoral 1
Programa de maestría 0.5
Curso en programa doctoral 0.3

Propuesta Curso en programa de maestría 0.5

Tipo del Producto Calidad Indicador Peso Descripción

Tesis de doctorado dirigidas o A1 TES-D -A1 1,6 Tipo A1 Summa Cum Laude
realizadas al interior del grupo A2 TES-D -A2 1,4 Tipo A2 Magna Cum Laude
A3 TES-D -A3 1,2 Tipo A3 Cum Laude
O TES-D -O 1 Tipo O Aprobada
Tesis de maestría dirigidas o A TES-M-A 0,7 Tipo A Distinguida
realizadas al interior del grupo O TES-M -O 0,5 Tipo O Aprobada
Trabajos de grado dirigidos o A TRAB-GR -A 0,2 Tipo A Distinguida
realizadas al interior del grupo O TRAB-GR -O 0,1 Tipo O Aprobada
Programa doctoral O PROG_ACA_D 1 Tipo O Los que verifican existencia
Programa de maestría O PROG_ACA_M 0,5 Tipo O Los que verifican existencia
Curso en programa doctoral O CUR-D 0,3 Tipo O Los que verifican existencia
Curso en programa de maestría O CUR-M 0,1 Tipo O Los que verifican existencia
 Cálculo del peso del producto

La fórmula para el peso de un producto se reduce en este modelo a un “porcentaje” del valor
total, dado por:

Donde:
NA = Número de autores del producto que son miembros del grupo.
NTA = Número total de autores del producto que pertenecen a algún grupo de investigación
colombiano.
PT = el peso asignado al producto

El peso de un producto en este modelo es una proporción para cada grupo de investigación,
del valor total de acuerdo con su participación del mismo. Es decir que cuando el producto
tiene un único autor, solo podrá ser relacionado en un grupo de investigación, cuando se de
un producto en colaboración, se distribuye el peso total del producto de manera proporcional
al número de autores del producto.
 Cálculo de los indicadores
Luego de obtener el peso de cada producto se agrupan por
tipología para obtener los indicadores de:
NC (nuevo conocimiento) + NCA (nuevo conocimiento A) + F (formación) + D
(divulgación)

Por ejemplo:
El indicador de NC se obtiene sumando todos los indicadores de
los subtipos de los productos de NC del grupo. Así, el indicador de nuevo
conocimiento se calcula mediante la fórmula:

INC = ART - A + ART B + ART C + ART O + LIB - A 1 + LIB - A 2 + LIB - B + LIB – C + LIB - O1 + LIBO2 + CAP -
A1 + CAP - A 2 + CAP- B + CAP – C + CAP - O1 + CAP - O2 + PAT - INV - A 1 + PAT - INV - A 2 + PAT - INV - A 3 +
PAT - INV - A 4 + PAT - INV + PAT -MOD - UTIL - A + PAT -MOD - UTIL – O + REG – A + SPINOFF – A + NO -
PAT – A + NORM – A

Seguido son anualizados cada uno de los indicadores de

producción (NC, NCA, F, D), para luego aplicar el umbral definido para cada
uno de ellos y así obtener el valor de los índices de NC, NCA, F, D, que
finalmente componen el Índice Scienticol.
 Índices Scienticol

Índice NC = Índice de producción de nuevo conocimiento

Índice NCA = Índice de producción de nuevo conocimiento Tipo A
Índice F = Índice de producción de formación
Índice D = Índice de producción de divulgación
 Categorías

“También se propone que entre los Grupos clasificados en la categoría A (puntaje de scienticol entre 8 y 10), se
haga una subcategoría que seleccione a los mejores (puntaje de 10), denominándolos A plus por ejemplo.” (Comité
(Comité de
de
expertos)
expertos)

Las condiciones de categorización, para los grupos que cumplen las 5 condiciones de la definición de
grupo, son:

Grupos Categoría A1: Índice ScientiCol mayor o igual a 9 y tener al menos 5 años de existencia.
Grupos Categoría A: Índice ScientiCol mayor o igual a 7 y tener al menos 5 años de existencia.
Grupos Categoría B: Índice ScientiCol mayor o igual a 4 y tener al menos 3 años de existencia.
Grupos Categoría C: Índice ScientiCol mayor o igual a 2 y tener al menos 2 años de existencia.
Grupos Categoría D: Índice ScientiCol mayor que 0 y tener al menos 1 año de existencia.

Los grupos que registren su información en la plataforma Scienti y no cumplan con los criterios de la
definición de “grupo de investigación” no podrán ser visibles en la plataforma, ni serán considerados en
las estadísticas hasta que los cumplan.
 Vigencia de la Categoría

Vigencia de la categoría: ANUAL

Se propone que se haga un proceso anual para la medición de

grupos de investigación, a lo que se deben someter de manera
voluntaria; el grupo que no se somete en ese año a la medición
no será clasificado y quedará simplemente como “grupo de
investigación sin clasificación para ese año”.
Recomendaciones a mediano plazo
 Se propone:

 Utilización de la productividad en el modelo de medición,

cálculo del “N” para el año 2009 o el año 2010” .

Clasificación de las editoriales con el propósito de mejorar

la forma de evaluación de los libros y capítulos de libro.
GRACIAS