Está en la página 1de 15

EVALUACIN DE LA BATERA

PROLEC-R

RESUMEN DE LA VALORACIN DEL TEST


Descripcin general
Caractersticas Nombre del test Autor Autor de la adaptacin espaola Editor de la adaptacin espaola Fecha de la ltima revisin del test en su adaptacin espaola Constructo evaluado rea de aplicacin Soporte Descripcin
PROLEC-R. Batera de Evaluacin de los Procesos Lectores, Revisada Fernando Cuetos, Blanca Rodrguez, Elvira Ruano y David Arribas No procede No procede 2007 Procesos de lectura Psicologa Educativa Lpiz y papel

Valoracin general
Caractersticas Calidad de los Materiales y documentacin Fundamentacin terica Adaptacin Espaola Anlisis de los tems Validez de contenido Validez de constructo Anlisis del sesgo Validez predictiva Fiabilidad: equivalencia Fiabilidad: consistencia interna Fiabilidad: estabilidad Baremos Valoracin Excelente Excelente No procede No se aporta Excelente Buena No se aporta Adecuado No se aporta Adecuado No se aporta Adecuado 3 3 3 5 4 Puntuacin 5 5

Comentarios generales
PROLEC-R es una prueba particularmente importante en la deteccin de dificultades de la lectura en castellano por el modelo terico en que se inspira y por el ajuste de los tems de evaluacin a dicho modelo. Los tests habituales y clsicos en la evaluacin de aptitudes y procesos cognitivos han operado tradicionalmente siguiendo un modelo en el que la medida del proceso o aptitud vena determinada por el nmero de aciertos. Cuando evalan aspectos distintos, como conocimiento lxico, sintaxis o semntica se fundamentan ms en la Lingstica que en una Teora de la Mente. La ciencia cognitiva considera que el procesamiento de informacin est formado por una serie de etapas o subprocesos en las operaciones mentales que pueden actuar de manera ms o menos autnoma y especfica en funcin de la concepcin modular que se adopte. Por consiguiente, las respuestas explcitas no son sino el resultado de estas operaciones, de tal manera que el inters de la Psicologa Cognitiva queda desplazado desde la respuesta manifiesta a la operacin mental que la determina. En este sentido el objetivo de la Psicologa cognitiva consiste en descubrir la secuencia de procesos que sigue la informacin desde que es recibida por el sujeto hasta que se manifiesta en una respuesta explcita. Evaluar un determinado proceso, en este caso la lectura, implica conocer las transformaciones que sufre el texto escrito desde que es recibido por el sistema sensorial hasta que activa una representacin mental como esquema abstracto de comprensin. Otra de las caractersticas de la ciencia cognitiva es precisamente el valor que se da al anlisis cualitativo de los errores en la medida, que permite hacer inferencias acerca del subproceso afectado y de las variables que pueden modificarlo.

Sin embargo en castellano apenas existen tests que apliquen con rigor la teora cognitiva an cuando sta sea invocada como marco de referencia. PROLEC-R, partiendo de la base de que la comprensin lectora supone la actividad de mdulos de procesamiento diferentes que actan sobre niveles diferentes de la seal escrita y que tienen un nivel de activacin diferentes en funcin del momento evolutivo del sujeto , propone tareas adecuadas para la evaluacin de cada mdulo de procesamiento, de manera que a partir de los resultados obtenidos sea posible programar de la forma ms precisa tareas y estrategias de rehabilitacin.

Aparte de su fundamentacin terica, la prueba presenta otras ventajas, como la incorporacin de una prueba de Comprensin Oral, ausente en la versin anterior del test, la incorporacin de ndices de velocidad lectora y la posibilidad de que en la hoja de respuestas se registre no slo el nmero de errores sino el tipo de error cometido para su posterior anlisis. La prueba de Comprensin Oral permite hacer una comparacin entre los procesos de comprensin en las dos modalidades del lenguaje, oral y escrita, y precisar si

los defectos de comprensin dependen de la forma escrita o suponen un proceso de deterioro ms generalizado. La incorporacin de ndices sobre velocidad lectora en una lengua transparente como el castellano puede ayudar a detectar o a eliminar el nmero de falsos negativos que podra asociarse a nicamente ndices de precisin.

En lo que respecta a los mbitos de aplicacin de la batera, PROLEC-R se puede aplicar claramente para evaluar el rendimiento lector en centros escolares, pero tambin puede utilizarse como herramienta clnica por parte de los logopedas para detectar problemas en los procesos lectores que inciden en la dislexia.

Entre los aspectos mejorables de la prueba cabe citar los siguientes:

En el Manual que presentan los autores se comenta la influencia de la frecuencia de uso de las palabras, especialmente sobre el conocimiento del vocabulario. Ciertamente la frecuencia de uso es una variable explicativa en ciencia cognitiva que tiene un fuerte efecto sobre el procesamiento verbal. Dado que se da informacin sobre esta variable podra ampliarse la misma a otras como la longitud de la palabra, imaginabilidad y carcter concreto o abstracto.

Tendra inters que el test aportara datos diferenciales en funcin de las patologas de lectura asumidas por el modelo cognitivo en que se basa, dando la posibilidad de ir ms all de mostrar o analizar las dificultades en un determinado proceso y poder llegar a un diagnstico ms preciso.

Sera conveniente aumentar el nmero de tems en Comprensin Oral igualndolos a los de Comprensin Escrita.

En ediciones futuras de esta batera sera aconsejable explorar la metodologa de trabajo (coeficientes de fiabilidad, validacin, mtodos para establecer las puntuaciones de corte) en el mbito de los tests referidos al criterio, en el que existen procedimientos muy potentes para establecer puntuaciones de corte de acuerdo a minimizar los falsos positivos y los falsos negativos.

Sobre el anlisis de tems. En el manual no aporta informacin sobre el anlisis de los tems, aunque es evidente que se han hecho. En revisiones futuras sera conveniente que se incluyesen los anlisis realizados, tales como la distribucin emprica de las respuestas en cada tem, la media y desviacin tpica de los tems, los ndices de discriminacin de los tems, o los ndices de validez de cada tem.

Sobre la fiabilidad. En revisiones futuras, adems de la consistencia interna, los autores deberan considerar la posibilidad de calcular los coeficientes de fiabilidad por el mtodo test-retest, para evaluar la estabilidad temporal de las puntuaciones. Tambin podra resultar muy til utilizar la Teora de la Generalizabilidad, lo que permitira tener en cuenta facetas (evaluadores, ocasiones, etc.) que permiten controlar y cuantificar el tipo de error introducido en las puntuaciones de los/as nios/as.

Sobre la validez. En revisiones futuras se debera aportar informacin sobre el proceso seguido para la seleccin de tems y cmo se demostr que estos tems y no otros deben estar en el test. Se realiz algn estudio de acuerdo interjueces? Qu estrategias se emplearon para decidir qu tems deberan estar en cada suprueba de la batera? En este caso, tambin la teora de la generalizabilidad puede jugar un papel crucial para detectar el acuerdo interjueces a la hora de valorar el contenido de los tems.

Sobre los baremos. La batera ganara ms valor interpretativo si se realizara un estudio cuidadoso de las puntuaciones de corte que se deben utilizar para la toma de decisiones en el contexto de los tests orientados al criterio, donde existen mltiples mtodos para seleccionar puntuaciones de corte que maximicen el coste-beneficio de la decisin, o incluso utilizando tcnicas estadsticas como anlisis de clase latente o anlisis de conglomerados.

ANLISIS DETALLADO DE LA PRUEBA


1. DESCRIPCIN GENERAL DEL TEST
1.1. Nombre del test PROLEC-R. Batera de Evaluacin de los Procesos Lectores, Revisada.

1.2. Nombre del test en su versin original No procede 1.3. Autor Fernando Cuetos, Blanca Rodrguez, Elvira Ruano y David Arribas

1.4. Autor de la adaptacin espaola No procede 1.5. Editor del test en su versin original TEA Ediciones S.A. 1.6. Editor de la adaptacin espaola No procede

1.7. Fecha de publicacin del test original 1996 1.8. Fecha de la publicacin del test en su adaptacin espaola No procede 1.9. Fecha de la ltima revisin del test en su adaptacin espaola 2007 1.10. rea general de la variable que pretende medir el test Procesos de lectura

1.11. Breve descripcin de la variable que pretende medir el test La batera PROLEC-R evala dificultades de la lectura y por ende el nivel de desarrollo lector en nios entre 6 y 12 aos, es decir, durante el periodo de la Enseanza Primaria. Se trata de una prueba construida a partir de los principios de la ciencia cognitiva, centrada en los subprocesos que intervienen en la lectura ms que en el resultado final del acto lector. A diferencia de las pruebas convencionales no evala el grado de comprensin final simplemente de acuerdo con la rapidez y los errores de comprensin. Este test, por el contrario, est formado por una serie de pruebas que evalan mdulos diferentes de conocimiento de las letras, lxico, sintaxis, semntica. En la elaboracin del test subyace una concepcin modular de la mente y en este sentido evala los distintos mdulos, considerados como unidades de procesamiento especficas, que intervienen en el proceso lector:

conocimiento de letras, lxico, sintaxis y semntica mediante 9 subescalas. El conocimiento de las letras se evala con las subescalas nombre o sonido de las letras y una tarea de comparacin igual-diferente; los procesos lxicos se evalan en las subescalas lectura de palabras y lectura de pseudopalabras. La sintaxis con dos subescalas a travs del rendimiento en estructuras gramaticales y signos de puntuacin; los procesos semnticos a travs de comprensin de oraciones, comprensin de textos y comprensin oral. El

rendimiento lector se mide en trminos de precisin en base a los aciertos en las pruebas y adems incorpora ndices sobre la velocidad de lectura como una novedad sobre la versin anterior. Asimismo se incluye una tarea de comprensin oral que no estaba presente en dicha versin. El modelo cognitivo que lo fundamenta permite, adems de determinar los subprocesos que aparecen alterados en la lectura, programar tareas especficas de intervencin para cada uno de ellos.

1.12. reas de aplicacin Psicologa educativa

1.13. Formato de los tems Respuesta libre Respuesta dicotmica Eleccin mltiple

1.14. Nmero de tems 187 tems Subprueba Nombre o sonido de letras Igual-Diferente Lectura de palabras Lectura de Pseudo-palabras Estructuras gramaticales Signos de Puntuacin Comprensin de oraciones Comprensin de textos Comprensin oral N tems 20 tems 20 tems 40 tems 40 tems 16 tems 11 tems 16 tems 16 tems 8 tems

1.15. Soporte Papel y lpiz (administracin oral)

1.16. Cualificacin requerida para el uso del test de acuerdo con la documentacin aportada Nivel A

1.17. Descripcin de las poblaciones a las que el test es aplicable El test est dirigido a evaluar la adquisicin y las dificultades de lectura en alumnos de Enseanza Primaria entre 6 y 12 aos de edad. Puede ser aplicable a alumnos que presenten algn tipo de retraso de desarrollo o dificultad de aprendizaje sin que sea, por otra parte, una prueba dirigida a poblaciones especficas. No es aplicable a minoras que no tengan un conocimiento adecuado del castellano, ni a nios con grave deterioro cognitivo.

1.18. Existencia o no de diferentes formas del test y sus caractersticas No existen diferentes formas del test

1.19. Procedimiento de correccin Manual mediante plantilla

1.20. Procedimiento de obtencin de las puntuaciones directas En las nueve subescalas de la batera, la puntuacin directa se obtiene por conteo de respuestas acertadas, ya sean los tems de dos opciones (Nombre o sonidos de letras, Igual-Diferente, Lectura de Palabras, Lectura de pseudopalabras, Signos de puntuacin, Comprensin de textos y Comprensin oral) o de eleccin mltiple (Estructuras gramaticales) o mezcla de ambos sistemas (Comprensin de oraciones). pruebas la puntuacin consiste en el tiempo de lectura medido en segundos. En algunas

1.21. Transformacin de las puntuaciones No normalizada

1.22. Escalas utilizadas

Cada una de las subescalas produce un ndice principal que formarn la base del baremo y la interpretacin correspondiente en funcin de si existen dificultades en alguno de los procesos que representan, y si estas dificultades son leves o severas. A partir de los ndices principales, el manual proporciona informacin sobre ndices secundarios que permiten profundizar en las caractersticas de los primeros, as como conocer los niveles de precisin y velocidad con la que los/as nios/as han respondido a algunas pruebas. Los ndices principales hacen referencia al rendimiento lector en cada una de las 9 subescalas. Los secundarios pueden ayudar a interpretar o matizar el resultado de los principales y

evalan, en trminos de precisin, velocidad y habilidad lectora las subescalas nombre de letras, igual-diferente, lectura de palabras, lectura de pseudopalabras y signos de puntuacin. El manual tambin proporciona un extenso estudio psicomtrico (fiabilidad y validez) de los ndices generados que muestran la capacidad de la batera para ser empleada como herramienta de deteccin del rendimiento lector en contextos escolares.

Los ndices principales referidos a identificacin de letras, lxico y sintaxis, excepto la prueba de estructuras gramaticales se obtienen dividiendo el nmero de aciertos por el tiempo de ejecucin en segundos y multiplicando el resultado por cien ( ndice = Aciertos/Tiempo * 100). No es exactamente una medida en centiles ya que el tiempo de lectura puede ser inferior al nmero de aciertos y la multiplicacin por cien da en este caso valores superiores a cien. En las tres pruebas de comprensin y estructuras gramaticales se registra directamente el nmero de aciertos. Los ndices secundarios de precisin y velocidad tienen en cuenta solamente la puntuacin directa de aciertos. Se da la media y desviacin tpica de aciertos de los ndices principales y de velocidad lectora, para cada curso de primaria.

1.23. Posibilidad de obtener informes automatizados No

1.24. Oferta por parte del editor de un servicio para la correccin y/o elaboracin informes No

1.25. Tiempo estimado para la aplicacin del test

La batera PROLEC-R se administra nica y exclusivamente de forma individual a travs de un examinador. El tiempo aproximado de aplicacin es de 40 minutos para nios de 1 a 4 de Primaria y 20 minutos para nios de 5 y 6 de Primaria. En algunas evaluaciones se ha observado que el tiempo de aplicacin ha llegado hasta los 60 minutos, siendo conveniente pasar el test en dos sesiones.

1.26. Documentacin aportada por el editor

Manual La batera PROLEC-R incorpora un mtodo informatizado de aprendizaje de la lectura denominado MIL basado en las investigaciones de los autores

1.27. Precio de un juego completo de la prueba

El precio del Juego Completo del PROLEC-R, compuesto por un Manual, 25 cuadernillos de anotacin y un Mtodo Informatizado de Lectura (MIL) es de 88,15 euros ms IVA.

1.28. Precio y nmero de ejemplares del paquete de cuadernillos

En el caso del PROLEC-R hablar de cuadernillo y de hoja de respuesta es lo mismo, puesto que los estmulos y los espacios para anotar las respuestas quedan recogidos en lo que se denomina cuadernillo de anotacin. Por tanto los puntos 1.28 y 1.29 pueden unirse. Los cuadernillos de anotacin se venden en paquetes de 25 ejemplares y su precio es de 20,75 euros ms IVA.

1.29. Precio y nmero de ejemplares del paquete de hojas de respuesta Vase 1.28

1.30. Precio de la correccin y/o elaboracin de informes por parte del editor No procede

1.31. Bibliografa bsica acerca del test aportada en la documentacin

El manual de la batera PROLEC-R recoge suficiente informacin bibliogrfica para que el usuario pueda ampliar sus conocimientos sobre el modelo terico en el que se basa. Est actualizado y recoge muchas referencias en castellano, lo que facilita la actualizacin de conocimientos de aquellos usuarios no especializados.

10

2. VALORACIN DE LAS CARACTERSTICAS DEL TEST


Aspectos generales

Contenido 2.1. 2.2. 2.3. 2.4. 2.5. 2.6. 2.7. 2.8. 2.9. Calidad de los materiales del test Calidad de la documentacin aportada Fundamentacin terica Adaptacin del test Calidad de las instrucciones Facilidad para comprender la tarea Facilidad para registrar las respuestas Calidad de los tems (aspectos formales) Datos sobre el anlisis de los tems

Valoracin Excelente Excelente Excelente No procede Excelente Excelente Excelente Excelente No se aporta

Puntuacin 5 4,5 5

5 4,5 5 4,5

Validez de contenido

Contenido 2.10. 2.11. Calidad de la representacin del contenido o dominio Consultas a expertos

Valoracin Excelente No se aporta

Puntuacin 5

Comentarios sobre la validez de contenido


El test, como ya se ha sealado, se fundamenta en un modelo cognitivo de la lectura, a diferencia de la inmensa mayora de pruebas disponibles en castellano que tienen en cuenta simplemente el rendimiento en la prueba contabilizado como aciertos o errores sin ms. De acuerdo con ello los autores hacen una buena fundamentacin terica del test en cuanto a la evaluacin de los subprocesos implicados en la lectura, ajustando el contenido de cada subescala a la evaluacin de dicho proceso.

11

Validez de constructo
Contenido Valoracin Puntuacin

2.12.

Diseos empleados

Anlisis factorial confirmatorio Correlaciones con otros tests Diferencias entre grupos Correlaciones entre ndices principales y secundarios de la propia prueba

2.13. 2.14. 2.15. 2.16. 2.17.

Tamao de las muestras Procedimiento de seleccin de las muestras Correlaciones del test con otros tests similares Calidad de los test empleados como criterio o marcador Datos sobre el sesgo de los tems

Adecuada No se aporta Buena Buena No se aporta

4 4

Comentarios sobre la validez de constructo


La batera PROLEC-R ha sido correlacionada con el Test de Vocabulario en Imgenes PEABODY (PPVT-III) en una muestra de 47 sujetos a los que se les aplican ambas pruebas. La correlacin entre ambos tests es buena. No obstante hay que sealar que los dos tests evalan aspectos diferentes del lenguaje. Mientras PEABODY evala nicamente el conocimiento y comprensin del vocabulario, PROLEC-III abarca otros procesos que intervienen en la lectura.

Validez predictiva

Contenido 2.18. 2.19. 2.20. 2.21. Diseo de seleccin del criterio Tamao de las muestras Procedimiento de seleccin de las muestras Correlaciones del test con los criterios

Contenido Concurrente Adecuado No se aporta Adecuado

Puntuacin

12

Comentarios sobre validez predictiva


Criterios empleados y las caractersticas de las poblaciones. Se han utilizado dos medidas para determinar la validez de criterio: uno con una muestra grande, de 408 alumnos (49,3% nios y 50,7% nias) y otra con muestra pequea con 47 sujetos (26 nios y 21 nias). En el primer caso se utiliza como criterio la clasificacin que hacen los profesores de 408 nios en 8 niveles de rendimiento, desde el ms bajo o nivel 1 en el que los sujetos no comprenden palabras y su lenguaje se limita a la produccin de silabas hasta el nivel 8 en el que los nios comprenden y leen todo tipo de textos. Las puntuaciones en estos niveles dadas por los profesores son correlacionadas con los ndices principales y secundarios del test obtenindose valores moderados de

correlacin (en torno a 0,30-.0,35).

Comentarios generales sobre validez

Es evidente que los autores conocen muy bien el constructo que quieren evaluar y que los contenidos del test son apropiados para ello, tal como puede deducirse tanto de la versin anterior del PROLEC como de diferentes pruebas, investigacin y publicaciones realizadas por ellos. Sin embargo y especialmente en lo referente a la validez del criterio sera conveniente en este caso adoptar pruebas de referencia de espectro ms amplio que el PEABODY y ampliar el nmero de sujetos a los que se aplican las pruebas de validacin.

No se aporta documentacin sobre los aspectos que tienen que ver con el contenido de los tems y cmo se ha establecido que los tems que componen cada una de las subpruebas deben ser los apropiados y no otros, aunque seguramente esto se estableci en la primera versin del test. En futuras versiones es aconsejable incluir en el Manual informacin sobre estos aspectos.

Fiabilidad
Contenido 2.22. Datos aportados sobre fiabilidad Valoracin

Puntuacin

Un nico coeficiente de fiabilidad

13

Equivalencia formas paralelas


Contenido 2.23. 2.24. Tamao de las muestras Coeficientes de equivalencia Valoracin No se aporta No se aporta Puntuacin

Consistencia interna
Contenido 2.25. 2.26. Tamao de las muestras Coeficientes de consistencia Valoracin Adecuada Adecuada Puntuacin 3 2,5

Estabilidad (test-retest)
Contenido 2.27. 2.28. Tamao de las muestras Coeficientes de estabilidad Valoracin No se aporta No se aporta Puntuacin

Comentarios generales sobre fiabilidad


La fiabilidad, medida como consistencia interna, se ha calculado con el coeficiente alfa de Cronbach para cada una de las 9 escalas y un valor total de la prueba. Los valores de alfa pueden ser considerados como moderados ya que slo 3 de las escalas alcanzan valores ligeramente superiores a 0,7 (Lectura de palabras = 0,74; Comprensin de textos = 0,72 y Signos de puntuacin = 0,70). Las escalas Lectura de pseudopalabras y Comprensin oral tienen valores de 0,68 y = 0,67 respectivamente. Las otras escalas presentan valores ms bajos y alfa total es de 0,79.

Sera aconsejable que en ediciones futuras se incluyese explcitamente el error tpico de medida, si bien es cierto que se puede calcular fcilmente con los datos aportados en el Manual. El error tpico de medida permite establecer intervalos de confianza para dar sentido interpretativo a las puntuaciones observadas, que es la interpretacin propia que se debe hacer con las puntuaciones que se obtienen en un test psicomtrico.

Dado que la aplicacin es individual, la participacin del evaluador es crucial, ya que presenta y punta los tems, por lo se podran realizar estudios experimentales para

14

examinar la consistencia de los evaluadores a la hora de calificar las respuestas de cada nio/a, de modo que la posible variabilidad no es una fuente importante de error en las puntuaciones asignadas. Se sugiere a los autores emplear la tecnologa, ampliamente documentada, sobre de la Teora de la Generalizabilidad, o emplear el modelo de facetas de la familia de modelos de Rasch.

Baremacin

Contenido 2.29. 2.30. 2.31. Calidad de las normas Tamao de las muestras Procedimiento de seleccin de las muestras

Valoracin Buena Suficiente

Puntuacin 3,5 2

No se aporta

Procedimiento de seleccin de las muestras. La descripcin del tipo de muestreo empleado es limitada, no especificando con precisin cmo se ha realizado el muestreo.

Comentarios generales sobre baremacin


El test presenta baremos en los seis cursos de primaria para los ndices primarios y secundarios. Al tratarse de una prueba de cribado para alumnos que asisten a centros ordinarios de Enseanza Primaria no ha sido baremado para poblaciones especficas. Dado que las diferencias encontradas entre nios y nias no son relevantes se ha considerado innecesaria la elaboracin de baremos separados por sexos.

Los baremos de esta batera se basan en un ndice definido ad-hoc para poner en relacin los dos aspectos principales, segn los autores, del rendimiento lector: los aciertos y el tiempo. El ndice es la tasa de aciertos por segundo, multiplicada por 100 para facilitar su interpretacin.

15

También podría gustarte