Está en la página 1de 23

Anales de Psicologa

ISSN: 0212-9728
servpubl@fcu.um.es
Universidad de Murcia
Espaa

Ato, Manuel; Lpez, Juan J.; Benavente, Ana


Un sistema de clasificacin de los diseos de investigacin en psicologa
Anales de Psicologa, vol. 29, nm. 3, octubre, 2013, pp. 1038-1059
Universidad de Murcia
Murcia, Espaa

Disponible en: http://www.redalyc.org/articulo.oa?id=16728244043

Cmo citar el artculo


Nmero completo
Sistema de Informacin Cientfica
Ms informacin del artculo Red de Revistas Cientficas de Amrica Latina, el Caribe, Espaa y Portugal
Pgina de la revista en redalyc.org Proyecto acadmico sin fines de lucro, desarrollado bajo la iniciativa de acceso abierto
anales de psicologa, 2013, vol. 29, n 3 (octubre), 1038-1059 Copyright 2013: Servicio de Publicaciones de la Universidad de Murcia. Murcia (Espaa)
http://dx.doi.org/10.6018/analesps.29.3.178511 ISSN edicin impresa: 0212-9728. ISSN edicin web (http://revistas.um.es/analesps): 1695-2294

Un sistema de clasificacin de los diseos de investigacin en psicologa


Manuel Ato*, Juan J. Lpez y Ana Benavente

Departamento de Psicologa Bsica y Metodologa, Universidad de Murcia

Resumen: En este trabajo se elabora un marco conceptual y se desarrollan Title: A classification system for research designs in psychology.
unos principios bsicos para fundamentar un sistema de clasificacin de los Abstract: In this work we devise a conceptual framework and develop
diseos de investigacin ms usuales en psicologa basado en tres estrate- some basic principles to promove a classification system for the most usual
gias (manipulativa, asociativa y descriptiva) de donde emanan varios tipos research designs in psychology based on three strategies (manipulative, as-
de estudios, tres para la estrategia manipulativa (experimentales, cuasiexpe- sociative and descriptive) from which emerge different types of studies,
rimentales y de caso nico), tres para la asociativa (comparativos, predicti- three for manipulative strategy (experimental, quasi-experimental and sin-
vos y explicativos) y dos para la descriptiva (observacionales y selectivos). gle-case), three for associative strategy (comparative, predictive and expla-
Palabras clave: Metodologa de la investigacin; diseo de la investiga- natory) and two for descriptive strategy (observational and selective).
cin; diseo experimental; diseo no experimental. Key words: Research methodology; research design; experimental design;
non experimental design.

Introduccin los diseos de la investigacin emprica ms empleados en la


psicologa bsica y aplicada.
Con el incremento en el nmero de manuscritos que reciben
las revistas de psicologa con factor de impacto, se ha con- Un marco conceptual para la investigacin
vertido en una necesidad la normalizacin, estandarizacin y emprica en psicologa
actualizacin de los criterios para la revisin metodolgica de
trabajos empricos (Ramos y Catena, 2004). En respuesta a Tiene inters examinar el proceso general de investigacin
esta necesidad, el Comit Editorial de la revista Anales de Psi- con el esquema propuesto por Kline (2009, p. 40, vase
cologa se ha planteado actualizar sus criterios de revisin me- tambin Pedhazur & Smelkin, 1991), quienes distinguen tres
todolgica elaborando una clasificacin de los diseos de in- pilares metodolgicos que sustentan este proceso: el diseo,
vestigacin utilizados en sus publicaciones con el objeto de la medida y el anlisis, ntimamente relacionados a su vez con
diagnosticar la presencia de errores comunes y proponer so- las cuatro formas de validez de la investigacin postuladas
luciones para mejorar la calidad metodolgica de la revista. por Campbell y colaboradores (vase Shadish, Cook &
El gran problema de las revisiones de artculos de inves- Campbell, 2002), validez interna, de la conclusin estadstica,
tigacin es que suele dejarse en manos del investigador ex- de constructo y externa (vase Figura 1).
perto en un tema sustantivo la decisin acerca de su publica-
cin, quien en general confina sus comentarios crticos al
rea de contenido asumiendo que los aspectos metodolgi-
cos del trabajo en revisin estn bien tratados y no contienen
errores. Excepto en casos excepcionales, no suele haber revi-
sores metodolgicos de artculos de investigacin sustantivos
y slo se proponen cuando un segundo proceso de revisin
as lo requiere. Como consecuencia, los aspectos metodol-
gicos se han convertido en la parte ms vulnerable de los
artculos de investigacin, de ah que con mucha frecuencia
se requiera la ayuda de expertos en metodologa, en la ma-
yora de los casos despus de haber sido planificada y con-
cluida la investigacin.
Es por tanto un tema crucial que los investigadores dis-
pongan de un marco conceptual donde situar sus proyectos
de investigacin, conozcan bien algunos de los principios
bsicos que sustentan una revisin metodolgica y dispon-
gan de un repertorio de diseos para planificar su investiga-
cin apropiadamente. El objeto fundamental de este trabajo Figura 1. Los tres pilares del proceso de investigacin.
es presentar tanto un marco conceptual para evaluar el pro-
ceso de investigacin como una propuesta de clasificacin de El primer pilar del proceso de investigacin es el diseo,
que puede definirse como un plan que proporciona una es-
tructura para integrar todos los elementos de un estudio
* Direccin para correspondencia [Correspondence address]: emprico de modo que los resultados sean crebles, libres de
Manuel Ato. Departamento de Psicologa Bsica y Metodologa. Univer-
sidad de Murcia. Campus de Espinardo, Facultad de Psicologa. 30100
sesgo y generalizables (Dannels, 2010). Partiendo de un pro-
Espinardo (Murcia, Espaa). E-mail: matogar@um.es blema como objetivo, el diseo de investigacin se encarga

- 1038 -
Un sistema de clasificacin de los diseos de investigacin en psicologa 1039

de aspectos cruciales del proceso de investigacin tales como Principios bsicos en el proceso de diseo y
la seleccin y asignacin de los participantes y el control de evaluacin de una investigacin
las variables extraas potenciales presentes en el contexto de
investigacin. Dos tipos de validez determinan la calidad de Hay algunos principios generales que muchos revisores de
la aplicacin del diseo: la validez interna (que se refiere a la artculos de investigacin suelen utilizar como gua para ga-
capacidad de controlar el efecto de terceras variables que rantizar un proceso coherente de investigacin y que pueden
pueden ser causas alternativas a la causa investigada) y la va- servir al investigador para valorar su trabajo (vase una expo-
lidez externa (que se refiere a la capacidad de generalizar los sicin ms completa de tales principios en Light, Singer &
resultados a otros participantes, a otros contextos y a otros Willet, 1990, Kline, 2009 y Hancock y Mueller, 2010).
momentos temporales). El equilibrio ptimo entre la validez
interna y la validez externa es uno de los objetivos ms de- 1) Toda investigacin se disea para responder a un objetivo
seables en un buen diseo de investigacin, pero los estudios especfico. Los revisores de un informe de investigacin es-
de la estrategia manipulativa priman la validez interna sobre peran encontrar una correspondencia entre el problema de
la externa mientras que los estudios de la estrategia descripti- investigacin y el diseo especfico utilizado en su potencial
va priman la validez externa sobre la interna. solucin. Un error bastante comn es plantear objetivos di-
El segundo pilar del proceso de investigacin es la medi- ferentes para un mismo diseo, como sucede cuando se
da, que concierne a la identificacin, definicin y medicin plantea un objetivo que se responde aplicando una prueba F
de las variables observables y no observables, y la generacin global (ANOVA) y otro objetivo diferente al que se respon-
de valores numricos o datos empricos que son la entrada de aplicando comparaciones mltiples despus de la prueba
de los procedimientos de anlisis estadstico (vase Martnez- F global.
Arias, 1995d y Martnez-Arias, Hernndez y Hernndez-
Lloreda, 2006). Es crtico que los datos tengan un alto grado 2) La ms importante razn que justifica la publicacin de un
de fiabilidad (o sea, que el error aleatorio se haya miminiza- artculo de investigacin es posibilitar su replicacin con la
do). El tipo de validez relacionada con la medida es la validez finalidad de desarrollar un conocimiento cientfico coheren-
de constructo (que se refiere a la capacidad de definir y ope- te. Los revisores esperan que el investigador se empee en
rativizar apropiadamente las variables de la investigacin). conseguir que su informe contenga todo el material relevante
El tercer pilar es el anlisis, que concierne a la estimacin para facilitar a otros investigadores la replicacin de su traba-
de parmetros y prueba de hiptesis acerca del objetivo de jo y la aplicacin de mtodos de integracin de estudios (me-
investigacin planteado con los procedimientos estadsticos ta-anlisis) para contribuir a la acumulacin del conocimien-
ms apropiados. Pero es importante recordar que la prueba to cientfico.
de hiptesis estadsticas no es lo primario y actualmente se
demanda mayor nfasis en la exactitud de la estimacin de 3) En lo que respecta a la medida de las variables de la inves-
parmetros que en la prueba de hiptesis (vase Maxwell, tigacin, un artculo de investigacin debe incluir informa-
Kelley & Raush, 2008), y se valoran aspectos tales como el cin detallada de los instrumentos de recogida de informa-
tamao del efecto y la significacin prctica y clnica de los cin y de la naturaleza de los datos empricos, incluyendo la
resultados (Thompson, 2002a). El tipo de validez relacionada definicin y operacionalizacin de las variables. Un aspecto
con el anlisis es la validez de la conclusin estadstica (que esencial para generar credibilidad en la medida es el informe
se refiere a si el mtodo de anlisis utilizado es correcto y si e interpretacin de la fiabilidad, la validez y las puntuaciones
el valor de las estimaciones se aproxima al de la poblacin). de corte de los instrumentos de recogida de la informacin
Es importante resaltar que, desde un punto de vista me- utilizados (Knapp & Mueller, 2010). Y una vez obtenidos los
todolgico, aunque una investigacin sea perfecta en su con- datos empricos, tambin deben tratarse otras cuestiones im-
cepcin sustantiva, puede resultar arruinada si no se utilizan portantes relativas a la reduccin o transformacin de datos
apropiadamente los pilares metodolgicos del diseo, la me- y a la potencial existencia de efectos de sesgo debidos al pro-
dida y el anlisis. Contrariamente a lo que muchos investiga- ceso de medicin.
dores piensan, el empleo de tcnicas estadsticas sofisticadas
no mejoran los resultados de una investigacin si se dise 4) En lo referente al anlisis estadstico, se deben describir
mal o no se utilizaron medidas apropiadas. Es crucial a este los mtodos estadsticos utilizados con el detalle suficiente
respecto que el investigador centre toda su atencin en la se- para ser comprendidos por otros investigadores, as como
leccin de un diseo apropiado, valorando sus potencialida- los procedimientos para el tratamiento de datos perdidos
des y sus inconvenientes para conseguir el mayor grado de (Graham, 2012), si se han utilizado. Adems, si son posibles
equilibrio entre validez interna y externa. varios modelos aternativos para explicar un resultado, el in-
vestigador debe justificar la seleccin del ms apropiado. Es
muy recomendable a este respecto la monografa editada por
Hancock & Mueller (2010), destinada principalmente a revi-
sores de artculos de investigacin en las Ciencias Sociales,
donde se desarrolla, para cada uno de los procedimientos es-

anales de psicologa, 2013, vol. 29, n 3 (octubre)


1040 Manuel Ato et al.

tadsticos ms comunes en psicologa, un conjunto de requi- cuando el diseo es no experimental y el rea de investiga-
sitos (desiderata) que debera cumplir su aplicacin. Infor- cin son las ciencias de la salud (vase Vandenbroucke et al.,
macin ms detallada acerca de los mtodos cuantitativos en 2007, Jarde, Losilla y Vives, 2012).
psicologa puede encontrarse en el Handbook editado por En un trabajo de Harris, Reeder & Hyun (2011) se soli-
Little (2013a). cit a editores y revisores de revistas de psicologa de alto
Un estudio de Bakker y Wicherts (2011) utiliz una impacto que describieran los errores de diseo y anlisis es-
muestra aleatoria de 281 artculos publicados en revistas de tadstico ms frecuentes, y se encontraron problemticos, en-
impacto y encontr que casi un 20% de los resultados es- tre otros, los siguientes aspectos: (a) insuficiente descripcin
tadsticos son incorrectamente reportados y que la prevalen- del diseo, (b) falta de congruencia entre objetivo de investi-
cia de error es sensiblemente mayor en revistas de bajo im- gacin y diseo, (c) problemas de potencia y tamao mues-
pacto. En un 15% de los artculos publicados se encontraron tral, (d) insuficiente descripcin del anlisis estadstico, inclu-
incluso pruebas significativas en favor de la hiptesis de su/s yendo violaciones de los supuestos de las pruebas y ausencia
autor/es que despus de recalcularlas no resultaron ser signi- de indicadores de tamao del efecto (e) confusin entre di-
ficativas. seo y modelo estadstico empleado para analizarlo, (f) utili-
Conviene adems notar que muchos investigadores, des- zacin de pruebas estadsticas mltiples sin ajuste de proba-
pus de aplicar las tcnicas estadsticas, solamente conceden bilidad, (g) inadecuado tratamiento de los valores perdidos y
inters a los valores p de significacin, dentro de la tradicin (h) interpretacin inadecuada de los resultados de la investi-
del contraste de hiptesis estadsticas (Null Hypothesis Signifi- gacin. Respuestas muy similares se encontraron en trabajos
cance Testing, NHST). Pero desde hace algn tiempo esta paralelos del mismo grupo para medicina (Fernandes-Taylor,
tradicin ha generado mucha controversia (vase Kline, Hyun, Reeder & Harris, 2011), psiquiatra y salud pblica
2004, Pascual, Fras y Garca, 2004, Balluerka, Gmez e (Harris, Reeder y Hyun, 2009a,b). En un trabajo anterior de
Hidalgo, 2005), llevando a algunos incluso a sospechar que Byrne (2000) utilizando el mismo procedimiento con revistas
puede retrasar la acumulacin del conocimiento (vase de ciencias de la salud se demostr que la causa ms relevan-
Schmidt, 1996, Gliner, Leech & Morgan, 2002). En 1996, la te para rechazar un artculo fue el diseo de investigacin
APA cre un Comit para tratar las cuestiones sobre aplica- (ms del 70%) y que la seccin que registr la mayor tasa de
ciones de los mtodos estadsticos en la investigacin psi- rechazos fue la de mtodo (ms de un 52%).
colgica. Un trabajo de Wilkinson y la Task Force on Statis- En nuestra opinin, las cuestiones de mayor inters de
tical Inference (1999) sugiri incluir en todo informe de in- un informe de investigacin que deben acaparar la atencin
vestigacin, adems de las pruebas de significacin clsicas, de investigador y evaluador son las siguientes:
medidas de tamao del efecto, indicadores de medida o in-
certidumbre mediante intervalos de confianza y una selec- La seleccin de una muestra de participantes, a ser posible
cin de grficos apropiados. As se viene recomendando representativa, de su poblacin es una cuestin central que
tambin en recientes ediciones del Publication Manual of the tiene importantes consecuencias tanto para la potencia (va-
American Psychological Association (APA Manual, 2010), pero lidez de la conclusin estadstica) como para la generaliza-
todava son mayora los trabajos que centralizan todos los re- cin de los resultados (validez externa), a lo que debe se-
sultados en torno a valores p, y muy escasos los que utilizan guir el procedimiento de asignacin de participantes a tra-
estimaciones puntuales con intervalos de confianza y grfi- tamientos, si procede. La justificacin del tamao muestral
cos apropiados (Cumming et al., 2007), lo que hoy se postula ptimo se ha tratado usualmente dentro del anlisis de po-
como reforma necesaria para una nueva disciplina estadstica tencia y de la tradicin del contraste de hiptesis (Bono y
en la que se complemente y ample la informacin de las Arnau, 1995, Kraemer & Thieman, 1987, Lenth, 2001). Lo
pruebas de significacin (Thompson, 2002b, Harlow, Mulaik ms recomendable es determinar el tamao muestral reali-
& Steiger, 1997, Kline, 2004, Cumming, 2012). zando un anlisis de potencia prospectivo o a priori (o sea,
antes de realizar el estudio), utilizando alguno de los pro-
5) En lo que concierne al diseo, el informe de investigacin gramas de software actualmente disponibles (el ms popu-
debe incluir una detallada descripcin de los participantes, de lar es G*Power3 -Faul, Erdfelder, Lang & Buchner, 2007-,
las condiciones experimentales (si se introduce un tratamien- vase algn ejemplo de uso en Balkin & Sheperis, 2011),
to o programa) o del contexto donde se realiza el estudio (si pero el investigador aplicado debe conocer que algunos
no hay tratamiento) y de los procedimientos de control de paquetes estadsticos como SPSS y SAS realizan anlisis de
las variables extraas (validez interna) as como una valora- potencia retrospectivo, observado o post-hoc (o sea, despus
cin de la generalidad de sus hallazgos (validez externa), en- de haber realizado el estudio), una prctica que algunos de-
tre otras cuestiones relevantes que se tratan con detalle en fienden (Lenth, 2007, Onwuegbuzie & Leech, 2004), mien-
varias de las entradas de la Encyclopedia of Research Design edi- tras otros la denuncian como inaceptable (Hoenig & Hei-
tada por Salkind (2010). Es necesario destacar una vez ms sey, 2001, Levine & Ensom, 2001). En nuestra opinin,
que muchas cuestiones relativas al diseo no se tratan ade- sera altamente recomendable que el investigador planifica-
cuadamente en los informes de investigacin, que en general ra su estudio con un anlisis de potencia a priori y com-
se considera de baja calidad metodolgica, en particular

anales de psicologa, 2013, vol. 29, n 3 (octubre)


Un sistema de clasificacin de los diseos de investigacin en psicologa 1041

probara despus sus resultados con un anlisis de potencia efecto. La tcnica de la aleatorizacin consigue controlar la
observado, en particular cuando no result significativo. influencia de terceras variables, identificadas y no identifi-
cadas, cuando se dan las condiciones idneas, pero es bien
La inclusin de indicadores de magnitud del efecto se ha conocido que cuando alguna variable extraa tiene un im-
recomendado reiteradamente para valorar la significacin pacto ms potente sobre la variable de respuesta que la va-
prctica de un resultado frente a la significacin estadstica riable causal, el efecto de la aleatorizacin se desvanece. Es
y, en ciencias de la salud, de la significacin clnica por tanto esencial identificar ste y otros tipos de terceras
(Thompson, 2002a, Pardo y Ferrer, 2013). Aunque se han variables que generan numerosas fuentes de confundido.
desarrollado muchos indicadores de magnitud del efecto De hecho el estatus metodolgico de un diseo de investi-
(vanse revisiones recientes en Ellis, 2010 y Grissom & gacin depende del grado de control efectivo de las varia-
Kim, 2012), se han destacado dos tipos bsicos (Rosnow & bles extraas (Shadish, Cook & Campbell, 2002). Aunque
Rosenthal, 2009): indicadores tipo d (que se basan en la di- hay un abundante repertorio de tcnicas de control de va-
ferencia de medias estandarizada) e indicadores tipo r (que riables extraas (algunas se tratan en Ato, 1991, pp. 155-
se basan en la correlacin y la proporcin de varianza ex- 175), en general, las tcnicas de control experimental (eli-
plicada). En ambos casos, la interpretacin ms usual em- minacin, constancia y varias formas de equilibracin, co-
plea las etiquetas de Cohen (1988), pequeo, modera- mo la aleatorizacin, el emparejamiento y el bloqueo), si se
do o grande, pero esta prctica debera ser abandonada pueden utilizar, son preferibles a las tcnicas de control es-
en favor de la utilizacin de intervalos de confianza y la tadstico (en particular, estandarizacin, ajuste y residuali-
evaluacin de la discrepancia entre valores de p e indicado- zacin). En algunas ocasiones, incluso la interpretacin
res de magnitud del efecto (vase Sun, Pan & Wang, 2010), causal de algunos diseos no experimentales como los di-
adems de intentar la comparacin de indicadores que tra- seos comparativos ex-post-facto y algunos diseos explicati-
tan un problema comn dentro de un mismo estudio y en- vos puede facilitarse cuando se emplean sofisticadas tcni-
tre diferentes estudios. En una reciente revisin, Peng, cas de control tales como las puntuaciones de propensin
Chen, Chiang & Chiang (2013) valoran el notable incre- (propensity scores, vase Shadish & Clark, 2004) o la tcnica
mento que se ha producido en la utilizacin de los indica- de las variables instrumentales (Gennetian, Magnuson &
dores de magnitud del efecto en aos recientes, pero de- Morris, 2008).
nuncian la subsistencia de algunas prcticas inadecuadas en
informes de investigacin tales como: (a) el uso de indica- Un sistema de clasificacin de los diseos de
dores tipo r (R2 y 2) no ajustados, adems de un casi nulo la investigacin emprica en psicologa
uso de otros indicadores menos sesgados como omega
cuadrado (2) y la correlacin intraclase (vase Ivarsson, Es conveniente resaltar la importancia de conocer bien el di-
Andersen, Johnson & Lindwall, 2013), (b) el empleo de las seo que un investigador utiliza en su investigacin para
etiquetas de Cohen (alto, moderado y bajo) sin ninguna comprender los principios de su aplicacin (dentro del mar-
contextualizacin ni interpretacin, (c) la persistente falta co conceptual descrito anteriormente) y los aspectos clave a
de claridad en el uso de los indicadores eta cuadrado y eta destacar en su informe (siguiendo los principios bsicos des-
cuadrado parcial, que coinciden en modelos ANOVA de arrollados ms arriba). Aunque se han propuesto varios sis-
un factor pero difieren en modelos ANOVA factoriales temas de clasificacin de los diseos de investigacin empri-
(vase Pierce, Block & Aguinis, 2004 y Richardson, 2011), ca en psicologa (Johnson, 2001 y Montero y Len, 2007), y
(d) el escaso uso de los intervalos de confianza tanto para partiendo del incontestable principio de que todo sistema de
los estimadores de las pruebas estadsticas como para los clasificacin ser necesariamente ambiguo, nuestra propuesta
tamaos del efecto (vase Kelley & Preacher, 2012, para clasificar la investigacin en psicologa se vertebra en las
Thompson, 2007), y (d) la falta de integracin entre las cuatro clases siguientes, y se desarrolla a continuacin:
pruebas de significacin estadstica y los indicadores de - Investigacin terica
magnitud del efecto. A este respecto, Levin y Robinson - Investigacin instrumental
(2000) sugieren emplear la denominada coherencia de la - Investigacin metodolgica
conclusin estadstica cuando apuntan en la misma lnea la - Investigacin emprica
significacin estadstica y la magnitud del efecto.
Investigacin terica
El control de las variables extraas es otra cuestin crucial
de la validez interna de un diseo de investigacin que re- En esta categora se incluyen todos aquellos trabajos que
cibe una atencin insuficiente en los estudios no experi- recopilan los avances producidos en la teora sustantiva o en
mentales, ya que en los estudios experimentales la manipu- la metodologa sobre una temtica de investigacin especfi-
lacin de alguna variable independiente y la aleatorizacin ca, y tambin las revisiones o actualizaciones de investigacin
permiten al investigador controlar aceptablemente las va- que no requieran emplear datos empricos originales, proce-
riables extraas y abordar analticamente relaciones causa- dentes de estudios primarios. Se excluyen aqu los trabajos

anales de psicologa, 2013, vol. 29, n 3 (octubre)


1042 Manuel Ato et al.

de reflexin terica subjetiva que no se basan en una revisin Gervilla y Palmer, 2012, Vallejo, Ato, Fernndez & Livacic-
detallada de los hallazgos de otros autores. Rojas, en prensa), as como estudios de simulacin (p.e., Bo-
Una investigacin terica puede adoptar una de tres for- no y Arnau, 1996) y de revisin de los procedimientos meto-
mas posibles: dolgicos en uso (p.e., Barrada, 2012).
1) La revisin narrativa es una revisin o actualizacin teri-
ca de estudios primarios sobre una temtica de investiga- Investigacin emprica
cin, rigurosa pero meramente subjetiva, sin ningn aporte Para dar respuesta a los problemas de investigacin que
emprico por parte del investigador (p.e., Snchez, Ortega y se plantean en psicologa suelen utilizarse tres estrategias de
Menesini, 2012). investigacin generalmente aceptadas (vase Light, Singer &
2) La revisin sistemtica es una revisin o actualizacin te- Willett, 1990, Arnau, 1995a): estrategia manipulativa, asocia-
rica de estudios primarios, con un desarrollo sistemtico tiva y descriptiva. La primera configura el conjunto de estu-
del proceso de acumulacin de datos (seleccin de estu- dios que son habituales en la investigacin experimental; las
dios, codificacin de las variables, etc.), pero donde no se otras dos componen un segundo conjunto de estudios que
utilizan procedimientos estadsticos al uso para integrar los conjuntamente representan la investigacin no experimental.
estudios (p.e., Orgils, Mndez, Rosa e Ingls, 2003, Rosa, Con la estrategia manipulativa se persigue analizar la rela-
Iniesta y Rosa, 2012). cin causal existente (hiptesis causales) entre dos o ms va-
3) La revisin sistemtica cuantitativa o meta-anlisis es una riables y puede adoptar tres tipos de estudios: experimental,
integracin de los estudios primarios con metodologa cuasiexperimental y caso nico. Los estudios experimentales
cuantitativa (vase Snchez-Meca y Marn-Martnez, 2010), representan el ideal de investigacin pero deben cumplir dos
que contiene tanto un desarrollo sistemtico del proceso de requisitos: 1) al menos una variable debe ser manipulada y 2)
acumulacin de datos como la utilizacin de mtodos es- los participantes se asignan al azar a los tratamientos. El pri-
tadsticos para integrar los estudios (p.e., Snchez-Meca, mer requisito es imprescindible; el segundo suele faltar en los
Rosa y Olivares, 2004). estudios cuasiexperimentales y la mayora de los estudios de
caso nico usados en contextos aplicados.
Investigacin instrumental Con la estrategia asociativa se persigue explorar la rela-
cin funcional existente entre variables (hiptesis de covaria-
En esta categora se incluyen todos aquellos trabajos que cin) y puede adoptar tres tipos de estudios en funcin de
analizan las propiedades psicomtricas de instrumentos de que el objeto de la exploracin sea la comparacin de grupos
medida psicolgicos, ya sea de nuevos tests, para los que se (estudio comparativo), la prediccin de comportamientos
recomienda seguir los estndares de validacin de tests des- y/o la clasificacin en grupos (estudio predictivo) o la prue-
arrollados conjuntamente por la American Educational Research ba de modelos tericos (estudio explicativo) para su integra-
Association (AERA), la American Psychological Association (APA) cin en una teora subyacente. El anlisis causal es tambin
y el National Council on Measurement in Education (NCME), que posible en algunos estudios comparativos y explicativos, pe-
se publicaron en su ltima edicin en 1999 (se espera una ro no suele ser posible en estudios predictivos.
nueva edicin para 2013 2014), o de la traduccin y adap- Con la estrategia descriptiva se pretende describir las co-
tacin de tests ya existentes para los que se recomienda se- sas tal y como ocurren, sin ningn tipo de manipulacin de
guir las directrices propuestas por la International Test Commi- variables, ni comparacin de grupos, ni prediccin de com-
sion (ITC) - vase Muiz, Elosua y Hambleton, 2013-. portamientos ni prueba de modelos, y puede adoptar dos ti-
Se recomienda encarecidamente que los autores de traba- pos de estudios: observacional y selectivo.
jos de investigacin instrumental lean tambin la Gua para En la clasificacin que se presenta en este trabajo se
la presentacin de trabajos psicomtricos de validacin de tests en Psico- asume que los diseos de investigacin se corresponden con
loga, Educacin y Ciencias Sociales, que puede encontrarse en la una estrategia concreta, en funcin del objetivo que persigue.
web de la revista Anales de Psicologa. En las formas bsicas del diseo de investigacin que se tra-
tan aqu, cada diseo tiene unas caractersticas propias que lo
Investigacin metodolgica distingue de los dems. Pero conviene no obstante advertir
que en la prctica los diseos no siempre se observan en sus
En esta categora se incluyen todos aquellos trabajos que formas bsicas, y que en muchas ocasiones es posible flexibi-
presentan nuevas metodologas para el correcto tratamiento lizar alguna/s de sus caractersticas para adaptarlas a una si-
de cualquier temtica relativa a los tres pilares bsicos de la tuacin de investigacin particular, aunque en este trabajo se
investigacin emprica que desarrollamos ms arriba: el dise- tratan slo las formas bsicas junto a algunas de sus ms
o (p.e., Jarde, Losilla y Vives, 2012), la medida (p.e., Cuesta, comunes generalizaciones. La Figura 2 resume nuestra pro-
Fonseca, Vallejo y Muiz, 2013) y el anlisis (p.e., Cajal, puesta de clasificacin de los diseos de investigacin.

anales de psicologa, 2013, vol. 29, n 3 (octubre)


Un sistema de clasificacin de los diseos de investigacin en psicologa 1043

objeto de anlisis. Tres criterios bsicos se consideran nece-


sarios para abordar conclusiones del tipo causa-efecto (Bo-
llen, 1989, Cook & Campbell, 1979), a saber: el criterio de
asociacin (existencia de covariacin entre causa y efecto), el
criterio de direccin (precedencia temporal de la causa) y el cri-
terio de aislamiento (ausencia de espuriedad). Los fundamen-
tos estadsticos de la inferencia causal en estudios experi-
mentales y no experimentales pueden consultarse en Sha-
dish, Cook & Campbell (2002) y en Pearl (2009).

Diseos experimentales

La clasificacin ms popular de los diseos experimenta-


les utilizados en psicologa se fundamenta sobre la estrategia
de comparacin que permiten y distingue entre diseos in-
Figura 2. Clasificacin de los diseos de investigacin en psicologa. tersujetos, que analizan las diferencias entre medias de trata-
mientos administrados al azar a grupos con diferentes parti-
Estrategia manipulativa cipantes, diseos intrasujetos, que analizan las diferencias en-
tre medias de tratamientos administrados a grupos con los
Estudios experimentales mismos participantes, y diseos mixtos, que combinan am-
bas formas de comparacin.
La investigacin experimental se ha desarrollado hasta Una clasificacin alternativa, menos popular pero ms
nuestros das desde la evolucin de dos grandes tradiciones arraigada en la tradicin estadstica (Ader & Mellenbergh,
de investigacin: la tradicin clsica de laboratorio, propia de 1999, Bailey, 2008, McConway, Jones & Taylor, 1999, Milli-
las ciencias naturales y basada en la variabilidad intraindivi- ken y Johnson, 2009), parte de la formulacin de un modelo
dual, y la ms moderna tradicin estadstica de campo, pro- estructural cada uno de cuyos elementos se asocia con uno
pia de las ciencias sociales y basada en la variabilidad interin- de tres tipos de estructura. La ventaja de esta clasificacin re-
dividual (Ato, 1995, Cook & Campbell, 1986). De la primera side en la fusin ptima de los pilares del diseo y anlisis es-
subsiste una forma caracterstica de investigacin experimen- tadstico, lo que permite comprender mejor la naturaleza del
tal que se practica en algunas reas de la psicologa aplicada diseo y distinguir con claridad dos aspectos que frecuente-
con la denominacin de diseos de caso nico. A la segunda mente se confunden: el diseo de investigacin y el modelo
pertenece la metodologa de investigacin experimental que estadstico utilizado para analizarlo (vase Ato y Vallejo,
se practica fundamentalmente en la psicologa bsica y algu- 2007).
nas reas aplicadas con la denominacin de diseos experi- 1) La primera estructura, denominada estructura de los trata-
mentales. En aquellas reas donde no es posible o no es ti- mientos, concierne al nmero y forma de agrupar los trata-
co aplicar la metodologa experimental se ha desarrollado mientos en una investigacin y permite distinguir entre es-
una forma alternativa de investigacin con el nombre de di- tructura sencilla (un solo factor de tratamiento) y factorial
seos cuasiexperimentales. (ms de un factor de tratamiento), y dentro de sta puede
Los diseos experimentales y algunos diseos de caso utilizarse o bien una relacin de cruce entre dos o ms fac-
nico (o su equivalente en ciencias de la salud, los ensayos tores (si los niveles de un factor pueden combinarse con
controlados aleatorizados) se caracterizan por el cumplimien- todos los niveles del otro factor) o una relacin de anida-
to de los dos requisitos que se consideran esenciales en una miento (si los niveles de un factor slo pueden combinarse
investigacin rigurosa: 1) manipulacin de al menos una VI con uno y slo uno de los niveles del otro).
de tratamiento y 2) control mediante aleatorizacin de las 2) La segunda, denominada estructura del control, se refiere al
potenciales variables extraas, lo que garantiza la equivalen- nmero y forma de agrupar las unidades experimentales
cia inicial de los grupos. Estos dos requisitos se justifican con el objeto de controlar las potenciales variables extra-
cuando el investigador persigue el anlisis de las relaciones as, y puede utilizar una de dos opciones posibles, el con-
causa-efecto entre variables. Los diseos cuasiexperimentales trol experimental (que emplea tcnicas de control tales
slo cumplen el primero de los requisitos (manipulacin), como la aleatorizacin, el emparejamiento y el bloqueo) o
pero suelen aplicarse en situaciones donde no es posible o bien el control estadstico (que emplea tcnicas de ajuste
no es tico cumplir con el segundo (control mediante aleato- estadstico tales como el uso de covariantes). Dos requisi-
rizacin), aunque tambin pueden proponerse para el anlisis tos esenciales determinan la combinacin de una estructura
de las relaciones causa-efecto siempre que se utilicen proce- de tratamientos con una estructura de control: a) se asume
dimientos eficientes de control de variables extraas alterna- como no significativa cualquier interaccin entre la estruc-
tivos. Del rigor y la efectividad de los procedimientos de tura de los tratamientos y la estructura del control, y b) los
control depende la credibilidad de la relacin causa-efecto

anales de psicologa, 2013, vol. 29, n 3 (octubre)


1044 Manuel Ato et al.

factores de la estructura de control asumen efectos aleato- incluir un trmino adicional para el factor a controlar, que
rios. suele ser una variable categrica con efectos aleatorios, y el
3) Una tercera estructura adicional, la estructura del error, se re- resultado es el diseo de bloques aleatorios (DBA). Es im-
fiere al nmero de diferentes tamaos (o entidades) de portante tener en cuenta que en el DBA el factor de bloqueo
unidad experimental y de sus componentes de error exis- carece de inters sustantivo (o sea, se propone slo para re-
tentes en el modelo estadstico asociado al diseo de inves- ducir varianza), pero en cualquier diseo bsico se pueden
tigacin, y distingue entre estructura de error nica (el mo- introducir, adems de la variable manipulada, otras variables
delo slo tiene un nico tamao de unidad experimental y categricas (p.e., sexo, nivel socioeconmico, categoras dia-
por tanto un trmino de error) y mltiple (el modelo tiene gnsticas, etc.) con un inters puramente sustantivo, que re-
dos o ms tamaos de unidad experimental y por tanto ducen tambin varianza y suelen ser de efectos fijos, pero no
ms de un trmino de error). Por ejemplo, en una investi- son en sentido estricto variables de bloqueo.
gacin diseada para evaluar la respuesta de participantes El control experimental mediante bloqueo puede genera-
pertenecientes a diferentes grupos es preciso distinguir la lizarse incluyendo dos (o ms) factores de bloqueo, en cuyo
variacin de los participantes de la variacin de los grupos. caso el modelo debe incorporar un trmino para cada factor
Ambos tipos de variacin constituyen diferentes tipos de y otro trmino para su interaccin. Si se desean controlar dos
error y tamaos diferentes de unidad experimental (partici- variables extraas con el mismo nmero de niveles, el DBA
pantes y grupos). con dos variables de bloqueo puede simplificarse utilizando
control experimental mediante doble bloqueo, que no re-
Dada una estructura de error determinada, los diseos quiere ningn trmino de interaccin, y el resultado es el di-
experimentales ms comunes en la investigacin psicolgica seo de cuadrado latino (DCL). Si por el contrario se desea
pueden definirse en este contexto como una combinacin controlar una variable extraa mediante ajuste estadstico
peculiar de las estructuras de tratamiento y de control y se con una covariante, el modelo debe incluir un trmino adi-
representan en la Figura 3. Asumiendo una estructura de cional para la covariante numrica, y el resultado es el diseo
con variables concomitantes (DVC). El control estadstico
permite incorporar dos (o ms) covariantes numricas, y el
correspondiente modelo estadstico debe incluir un trmino
adicional para cada covariante.
Una caracterstica comn a estos cuatro diseos bsicos
es que son diseos intersujetos. Kirk (2013) considera el
DCA, el DBA y el DCL como las estructuras bsicas de di-
seo experimental para cuyo anlisis, asumiendo variables
distribuidas normalmente, son apropiados los modelos
ANOVA/MANOVA y el DVC como la estructura bsica de
diseo para el que son apropiados los modelos ANCO-
VA/MANCOVA, una forma de anlisis que requiere su-
puestos adicionales al ANOVA, pero que a pesar de sus si-
milaridades sigue siendo una herramienta mal comprendida
(Miller & Chapman, 2001, Milliken & Johnson, 2009).
Una simple extensin del DBA considera cada unidad
experimental como un nivel independiente de un factor de
DCA: Diseo completamente aleatorio. DBA: Diseo de bloques aleatorios. bloqueo, en cuyo caso se produce una forma de control ex-
DCL: Diseo de cuadrado latino. DVC: Diseo con variables concomitan-
tes. DMR: Diseo de medidas repetidas. DPD: Diseo de parcela dividida.
perimental denominada bloqueo intrasujeto y el resultado es
DJE: Diseo jerrquico. DMN: Diseo multinivel. el diseo de medidas totalmente repetidas (DMTR), donde
los tratamientos son administrados en una secuencia aleato-
Figura 3. Diseos experimentales. rizada a todos los participantes. El DMTR con un factor de
tratamiento representa el diseo intrasujetos bsico y combi-
error nica, la combinacin de una estructura de tratamien- na una estructura de tratamiento sencilla con una estructura
tos sencilla (un factor de tratamiento, definido con efectos fi- de control experimental mediante bloqueo intrasujeto. En
jos o aleatorios) y una estructura de control experimental comparacin con el DCA bsico de similares condiciones, el
mediante aleatorizacin representa el diseo completamente diseo intrasujetos suele reducir la varianza de error e incre-
aleatorio (DCA), el diseo experimental ms bsico a partir mentar la potencia estadstica. Sin embargo, puesto que las
del cual se construyen todos los dems, y su modelo estads- diferentes medidas de una misma unidad experimental no se
tico tiene dos fuentes de variacin (un efecto de tratamiento consideran independientes, el anlisis estadstico no puede
y un componente de error residual). Si el investigador desea abordarse sin verificar nuevos supuestos (vase Ato y Valle-
adems controlar una variable extraa mediante control ex- jo, 2007).
perimental (p.e., emparejamiento o bloqueo), el modelo debe

anales de psicologa, 2013, vol. 29, n 3 (octubre)


Un sistema de clasificacin de los diseos de investigacin en psicologa 1045

Toda una variedad de diseos experimentales ms com- son Hox (2010) y Snijders & Bosker (2011), pero para el tra-
plejos pueden definirse asumiendo una estructura de error tamiento de datos multinivel con diseos experimentales la
nica y generalizando los cuatro diseos bsicos intersujetos referencia ms recomendable es Milliken & Johnson (2002,
(DCA, DBA, DCL y DVC) y el diseo bsico intrasujetos 2009).
(DMTR) a estructuras de tratamiento factoriales en relacin El anlisis estadstico asociado a los diseos experimenta-
de cruce, permitiendo la utilizacin de efectos de tratamiento les es otra cuestin de inters para el investigador aplicado.
fijos, aleatorios o mixtos (p.e., Pagn, Marn y Perea, 2012). El tradicional repertorio de pruebas basadas en el contraste
En todos estos casos, la generalizacin genera mayores difi- de hiptesis ha dejado paso al modelado estadstico, que per-
cultades en la interpretacin de las interacciones, que en ge- sigue la especificacin, ajuste y comparacin de modelos
neral son muy propensas a errores de interpretacin por par- (Ato y Vallejo, 2007; Losilla, Navarro, Palmer, Rodrigo y
te de los investigadores (Meyer, 1991, Aiken & West, 1996, Ato, 2005). Y dentro del contexto del modelado estadstico,
Pardo, Garrido, Ruiz y San Martn, 2007). el enfoque univariante mediante los modelos ANOVA y
El diseo bsico DMTR puede generalizarse con facili- ANCOVA derivados del modelo lineal general se desarroll
dad a estructuras de tratamiento factoriales, donde cada uni- para los diseos DCA y DVC donde todos los factores se
dad experimental representa un bloque que recibe todas las asuman fijos. La inclusin de factores aleatorios puede ser
combinaciones factoriales de tratamiento y el conjunto de las tolerable en situaciones muy simples y altas condiciones de
unidades constituye un grupo nico (p.e. Blanca, Luna, regularidad, pero para otras situaciones ms complejas, como
Lpez, Rando y Zalabardo, 2001). Cuando adems el con- las derivadas de los DMR y en general de los DMN, el enfo-
junto de unidades experimentales se divide en grupos en ba- que clsico no resulta recomendable por los problemas que
se a alguna variable de inters para la investigacin, el resul- genera (vease Ato, Vallejo y Palmer, 2013, Quen y van den
tado es el diseo de medidas parcialmente repetidas (DMPR) Bergh, 2004). La alternativa al enfoque clsico fue en su
o diseo mixto, as llamado porque consta de un componen- momento el enfoque multivariante, que aunque sigue siendo
te intersujetos y un componente intrasujetos, cada uno de los hoy por hoy el enfoque ms popular, en crculos acadmicos
cuales representa un tamao diferente de unidad experimen- se considera ms apropiada la utilizacin del enfoque mixto
tal y por tanto un trmino propio de error. Los dos diseos (Ato y Vallejo, 2007, Maxwell & Delaney, 2004, Milliken &
intrasujetos citados (DMTR y DMPR) constituyen de hecho Johnson, 2009, Vallejo y Fernndez, 1995), un enfoque que
un diseo comn, que en adelante llamaremos diseo de afortunadamente se incluye ya en todos los paquetes estads-
medidas repetidas (DMR), el segundo de los cuales es muy ticos profesionales (GENSTAT, SAS, SPSS, STATA y R).
similar al que en investigacin agrcola y biolgica se deno-
mina diseo de parcela dividida (split-plot design, DPD). En Diseos de caso nico
el DMR experimental que tratamos aqu se asume que los
tratamientos del componente intrasujetos son asignados alea- Los diseos de caso nico son diseos experimentales
toriamente o mediante alguna secuencia que garantice la desarrollados en la tradicin del control experimental de la-
equivalencia de los grupos. Cuando no puedan asignarse boratorio y fueron inicialmente sistematizados por Sidman
aleatoriamente, porque representan una secuencia temporal, (1960). Como sucede con los diseos de la estrategia mani-
el DMR debe ser tratado como cuasiexperimental (vase Ar- pulativa, el anlisis causal solo ser posible cuando se cum-
nau, 1995g). plan los dos requisitos bsicos (manipulacin de variables y
Una estructura factorial diferente se requiere cuando los control mediante aleatorizacin), pero puesto que slo hay
factores se encuentran en relacin de anidamiento, lo que se una unidad, o a lo sumo un reducido nmero de unidades, el
puede producir tanto con estructuras de tratamiento como principio de aleatorizacin se refiere en la mayor parte de los
con estructuras de control. En ambos casos, unidades expe- casos a la asignacin de los periodos u ocasiones de observa-
rimentales de cierto tamao se anidan dentro de otras unida- cin a los tratamientos. En los casos donde la asignacin
des de tamao mayor y el resultado es el diseo jerrquico aleatoria no sea posible, como sucede en muchas aplicacio-
(DJE). La generalizacin de esta situacin a cualquier nme- nes clnicas, el investigador debe extremar su precaucin a la
ro de variables que incluyan alguna relacin de anidamiento hora de interpretar los resultados.
conduce a la vasta familia de diseos multinivel (DMN), a la Hay dos dimensiones en la clasificacin de los diseos de
que pertenecen tambin las dos formas del diseo de medi- caso nico que, siguiendo a Arnau (1995a,b,c,e), Kennedy
das repetidas, que emplean dos o ms tamaos de unidad (2005) y Ato y Vallejo (2007), nos permite distinguirlos, en
experimental y por tanto representan estructuras de error una primera dimensin, en funcin de la reversibilidad de la
mltiple. Cabe distinguir dos diseos bsicos multinivel respuesta a los niveles de la lnea base tras retirar o alterar el
donde unidades ms pequeas (participantes, pacientes, tratamiento (diseos de reversin y de no reversin) y, en
clientes) se anidan dentro de unidades mayores (clases, clni- una segunda dimensin, en funcin de la estrategia de com-
cas, empresas): en el primero, los sujetos dentro de cada gru- paracin utilizada (diseos interseries, intraseries y mixtos), y
po se asignan a azar a los tratamientos; en el segundo, son se representan en la Figura 4.
los grupos en su conjunto los que se asignan a azar a los tra- El diseo de caso nico ms bsico es el diseo de un so-
tamientos. Referencias generales sobre los diseos multinivel lo componente en dos fases A-B, que puede ser intraserie

anales de psicologa, 2013, vol. 29, n 3 (octubre)


1046 Manuel Ato et al.

(diseo bsico con N=1, DABS) o mixto (diseo bsico con pruebas de aleatorizacin (vase Arnau, 1995d, Ato y Valle-
N mltiple, DABM). jo, 2007).
Los diseos de reversin se clasifican en dos grandes
grupos, dependiendo del proceso de reversin, en simples y Diseos cuasiexperimentales
complejos. En funcin del nmero de fases, los diseos de
reversin simple pueden ser de dos tipos: intraseries, que in- Los diseos cuasiexperimentales persiguen el mismo ob-
cluyen el diseo de tres fases (DABA) y el diseo de cuatro jetivo que los diseos experimentales, o sea, el establecimien-
fases (DABAB) y el diseo de retirada (DBAB) y mixtos, que to de relaciones causa-efecto, y cumplen con el requisito de
tambin tienen cuatro fases, y pueden ser de inversin o de la manipulacin de al menos una VI, pero no es posible (o
generalizacin (D4F). Por su parte, entre los diseos de re- no es tico) cumplir con el requisito de la asignacin aleato-
versin compleja cabe citar el diseo multinivel (DMU), el ria para asegurar que no haya diferencias entre grupos antes
diseo de tratamiento mltiple (DTM) y el diseo de interac- de asignar un tratamiento o programa. Para compensar esta
cin (DDI), que actualmente gozan de gran popularidad en ausencia se recurre al empleo de grupos de tratamiento, gru-
reas aplicadas. pos de control, medidas pretest y postest y tcnicas de con-
El ms interesante diseo de no reversin intraseries es el trol experimental (p.e., mtodos de emparejamiento, vase
diseo de cambio de criterio (DCC), un diseo de fcil apli- Stuart & Rubin, 2008) con el objeto de controlar las diferen-
cacin y alta flexibilidad. Entre los diseos de no reversin cias preexistentes entre grupos. Sin embargo, en determina-
interseries destacan el diseo de tratamientos alternantes das reas de la psicologa aplicada los diseos cuasiexperi-
(DTA), y el diseo de tratamientos simultneos (DTS). Entre mentales son ms utilizados que otras alternativas de diseo.
los diseos con comparaciones mixtas el ms popular es el Obviamente, como consecuencia de la no equivalencia inicial
diseo de lnea base mltiple (DLBM), que tiene varias acep- de los grupos, el anlisis causal presenta muchas ms dificul-
ciones dependiendo de que los datos de la lnea base se regis- tades en los diseos cuasiexperimentales que en los experi-
tren entre conductas, entre participantes o entre contextos. mentales, aunque se han propuesto algunas tcnicas de con-
Ms informacin sobre los diseos de caso nico puede con- trol estadstico tales como las puntuaciones de propensin
sultarse en Arnau (1995c), Ato y Vallejo, 2007 y Kennedy (Luellen, Shadish & Clark, 2005) para mejorar el anlisis de
(2005). datos.
Hay muchas variedades posibles de diseos cuasiexperi-
mentales. Shadish, Cook y Campbell (2002) presentan una
detallada clasificacin de los diseos cuasiexperimentales.
Una presentacin ms breve puede consultarse en Ato
(1995a), Vallejo (1995a) y Ato y Vallejo (2007). Siguiendo a
Judd & Kenny (1981), la clasificacin que utilizamos aqu re-
quiere que el investigador decida en primer lugar entre dos
formas de comparacin, transversal (comparacin intersuje-
tos o entre grupos no equivalentes) y longitudinal (compara-
cin intra sujetos o entre medidas mltiples) y en segundo
lugar en la forma de emplear la asignacin no aleatoria (co-
nocida o no conocida).
Cabe distinguir dos mdulos bsicos, que suelen deno-
minarse genricamente diseos bsicos o preexperimentales,
sobre los cuales se construyen los diseos cuasiexperimenta-
les autnticos. El primer mdulo es el diseo solamente
postest (DSP), que tiene un grupo experimental al que se le
DABS: diseo AB simple. DABM: diseo AB con N mltiple. administra el programa, intervencin o tratamiento, y otro
DABA: diseo intraseries ABA. DABAB: diseo intraseries ABAB. grupo de control, pero carece de medidas pretest, y por tanto
DBAB: diseo intraseries BAB. D4F: diseo en 4 fases. slo utiliza comparaciones intersujetos. El segundo mdulo
DMU: Diseo multinivel. DTM: Diseo de tratamiento mltiple.
DDI: diseo de interaccin. DCCr: diseo de cambio de criterio. es el diseo pretest-postest (DPP), que tiene un nico grupo
DTA: diseo de tratamientos alternantes. con medidas antes (pretest) y despus (postest) del trata-
DTS: diseo de tratamientos simultneos miento, y por tanto slo emplea comparaciones intrasujetos.
DLBM: diseo de lnea base mltiple. Una combinacin peculiar de estos dos diseos bsicos con-
duce al diseo de cuatro grupos de Solomon (D4GS), que
Figura 4. Diseos de caso nico.
cuando emplea aleatorizacin se convierte en un diseo ex-
Se han propuesto muchos y muy variados procedimien- perimental autntico (p.e., Whitman, Van Rooy, Viswesvaran
tos estadsticos para el anlisis estadstico de diseos de caso & Alonso, 2008), pero en cualquiera de sus versiones, expe-
nico, desde la simple exploracin visual hasta complejos rimental o cuasiexperimental, su principal ventaja es la capa-
procedimientos paramtricos lineales y no lineales y las

anales de psicologa, 2013, vol. 29, n 3 (octubre)


Un sistema de clasificacin de los diseos de investigacin en psicologa 1047

cidad de probar y controlar la reactividad del instrumento de Vallejo, 2007, Ato, Losilla, Navarro, Palmer y Rodrigo,
medida (Garca, Fras y Pascual, 1999). 2005). Respecto a los diseos longitudinales, para el diseo
Entre los diseos cuasiexperimentales transversales, los de medidas repetidas pueden consultarse Arnau, 1995g,h y
dos casos prototpicos son el diseo con grupos no equiva- Vallejo y Fernndez, 1995. Para el diseo DSTI lo ms apro-
lentes (DGNE), que representa tambin una combinacin piado es el anlisis de series temporales si existe un elevado
especial de los dos mdulos preexperimentales citados y nmero de medidas pretest y postest (Arnau, 1995e,f , Valle-
donde la asignacin no es aleatoria ni tampoco conocida jo, 1995a,b, 1996, Vallejo, Arnau, Bono, Cuesta, Fernndez y
(p.e., Pons, Gonzlez y Serrano, 2008), y el diseo de discon- Herrero, 2002) o bien, si existe un reducido nmero de me-
tinuidad de la regresin (DDR), que es similar al diseo didas, algunos de los procedimientos alternativos que se ex-
DGNE pero donde la asignacin a tratamiento s es al me- ponen con detalle en Arnau (1995c) y en Arnau y Bono
nos conocida, basada en la adopcin de un punto de corte. (2004). Para el diseo DLEP son apropiados los procedi-
Ambos diseos pueden mejorarse incluyendo tcnicas de mientos analticos tratados en Arnau y Gmez (1995). Los
control estadstico como el uso de covariantes. Entre los di- mtodos intensivos longitudinales constituyen hoy por hoy
seos cuasiexperimentales longitudinales destacamos el dise- una recomendable clase de modelos propuestos para analizar
o de medidas repetidas, donde los tratamientos del factor datos masivos recogidos a lo largo del tiempo (Bolger &
intrasujetos no han sido aleatorizados, el diseo de series Laurenceau, 2013).
temporales interrumpidas (DSTI), que es una extrapolacin
del mdulo DPP con un grupo y mltiples medidas pretest y Estrategia asociativa
postest y puede generalizarse tambin a mltiples grupos, y
el diseo longitudinal en panel (DLEP), que en su forma Estudios comparativos
ms simple requiere un grupo con dos variables medidas en
al menos dos momentos temporales, y puede ser generaliza- Los estudios comparativos son estudios que analizan la
do a mltiples variables y mltiples momentos. La Figura 5 relacin entre variables examinando las diferencias que exis-
resume los diseos preexperimentales y cuasiexperimentales ten entre dos o ms grupos de individuos, aprovechando las
ms utilizados en psicologa. situaciones diferenciales creadas por la naturaleza o la socie-
dad. Puesto que son en esencia estudios no experimentales,
no se utilizan variables manipuladas (o tratndose de una va-
riable susceptible de manipulacin, que no sea posible mani-
pularla por razones ticas o administrativas), ni tampoco
asignacin aleatoria de los participantes. En su forma ms
caracterstica estos estudios emplean variables atributivas
(tambin llamadas de seleccin o clasificacin) como VIs, en
contraposicin a variables manipuladas, que son ms carac-
tersticas de los estudios experimentales y cuasiexperimenta-
les, y a variables medidas, que suelen ser comunes en los es-
tudios predictivos y explicativos.
Un estudio comparativo suele adoptar uno de varios en-
foques temporales posibles. Se denomina retrospectivo (o ex
post facto) cuando la VI y la VD han ocurrido antes del co-
mienzo del estudio, transversal cuando la definicin de VI y
VD se realiza concomitantemente en el tiempo, y prospecti-
DSP: diseo solamente postest. DPP: diseo pretest-postest. vo (o longitudinal) cuando se observan al comenzar el estu-
D4GS: diseo cuasiexperimental de 4 grupos de Solomon.
DGNE: diseo con grupos no equivalentes. dio y se prolongan a lo largo del tiempo. Dentro de esta es-
DDR: diseo de discontinuidad de la regresin. tructura general pueden definirse varios diseos de investiga-
DMR: diseo cuasiexperimental de medidas repetidas. cin en psicologa que se muestran en la Figura 6.
DSTI: diseo de series temporales interrumpidas.
DLEP: diseo longitudinal en panel.
Estudios retrospectivos o ex post facto
Figura 5. Diseos cuasiexperimentales.
Los estudios retrospectivos utilizan informacin histrica
Teniendo en cuenta que todos los diseos cuasiexperi- para remontarse hacia atrs en el tiempo examinando even-
mentales pueden ser analizados con mltiples procedimien- tos que han tenido lugar con anterioridad (de ah su denomi-
tos estadsticos, las opciones analticas ms comunes son, pa- nacin alternativa de estudios ex-post-facto; vase Suchman,
ra los diseos transversales (D4GS, DGNE y DDR), alguna 1967). Aunque el periodo temporal objeto del estudio puede
de las alternativas del modelo lineal generalizado en cualquie- abarcar muchos aos, una ventaja de los estudios retrospec-
ra de sus modalidades: regresin, ANOVA, ANCOVA y tivos es el escaso tiempo que se tarda en completarlo, puesto
anlisis de las puntuaciones de cambio (Ato, 1995b,c, Ato y que solo requiere registrar y analizar los datos. Por esta razn

anales de psicologa, 2013, vol. 29, n 3 (octubre)


1048 Manuel Ato et al.

son particularmente tiles para estudiar la asociacin entre ran en trminos de su exposicin previa a las variables (vase
variables que no ocurren frecuentemente o son difciles de Figura 6).
predecir o cuando existe un largo intervalo temporal entre Por ejemplo, supongamos que un investigador se inte-
una supuesta causa y su efecto. Son tpicos de la investiga- resa por estudiar la asociacin entre asistencia a centros de
cin en ciencias de la salud (en particular, la salud mental y la educacin infantil (VI) y rendimiento acadmico en primaria
epidemiologa; vase Mann, 2003), de donde se han impor- (VD). Si se empleara un diseo de cohorte retrospectivo, el
tado a disciplinas afines tales como la psicopatologa y psico- investigador podra utilizar dos grupos de nios que difieren
loga clnica. En el contexto clnico, los estudios retrospecti- por haber asistido o no a centros de educacin infantil y
vos se utilizan usualmente en lugar de un experimento para despus comparar el rendimiento acadmico medio obtenido
plantear hiptesis causa-efecto en situaciones donde no es en primaria. Es decir, se define primero la VI de forma re-
posible utilizar variables manipuladas. trospectiva y se mide despus la VD, pero ambas variables
ocurren antes de que el estudio comience. Si se empleara el
diseo caso-control, el investigador podra utilizar dos gru-
pos de nios que muestran diferencias en rendimiento
acadmico en primaria (casos y controles) y despus exami-
nar retrospectivamente para cada caso y control la asistencia
a cursos de educacin infantil en sus primeras etapas. Es de-
cir, se define primero la VD y se evala despus retrospecti-
vamente la VI, pero ambas ocurren tambin antes de que el
estudio comience.
Un rasgo caracterstico de los estudios retrospectivos es
su inters explcito por formular hiptesis del tipo causa-
efecto con el objeto de reproducir las caractersticas de la
metodologa experimental en un contexto no experimental y
con variables que no son susceptibles de manipulacin. De
hecho en la investigacin educativa los diseos retrospecti-
vos o ex post facto se denominan tambin diseos causal-
DCR: diseo de cohortes retrospectivo. DCC: diseo caso-control. comparativos (vase Brewer & Kuhn, 2010, Gay, Mills & Ai-
DCT: diseo de cohortes transversal. DGN: diseo de grupos naturales. rasian, 2012) mientras que en la literatura estadstica se co-
DTC: diseo transcultural. DCP: diseo de cohortes prospectivo.
DCCA: diseo caso-control anidado. DTS: diseo transversal simultneo. rresponden en cierta medida con los diseos de experimen-
DTR: diseo transversal repetido. DEP: diseo (longitudinal) en panel. tos inversos (vase Loy, Goh & Xie, 2002). Sin embargo, es
DET: diseo evolutivo transversal. DEL: diseo evolutivo longitudinal. importante destacar la existencia de numerosas amenazas po-
DTL: diseo evolutivo time-lag o de retardo temporal. tenciales contra la validez interna en los estudios retrospecti-
DSC: diseo secuencial de cohorte. DSX: diseo secuencial transverso.
DSTi: diseo secuencial de tiempo. vos. Shadish, Cook y Campbell (2002, p.131-133) discuten
hasta 53 amenazas generales contra la validez en el diseo
Figura 6. Estudios comparativos. caso-control, lo que hace prcticamente inviable el estable-
cimiento de relaciones causales en estos estudios (vase no
Pueden diferenciarse dos tipos de estudios retrospecti- obstante Farrant, 1977). Con todo, los estudios retrospecti-
vos, dependiendo de si la definicin de los grupos de partici- vos/ex post facto suelen encontrar relaciones interesantes
pantes se establece en base a la variable independiente o la que pueden ser ulteriormente objeto de investigacin expe-
variable dependiente (Cohen, Manion & Morrison, 2012, rimental y en ocasiones es posible utilizar procedimientos de
Kirk, 2013). En el diseo de cohorte retrospectivo (DCR, control sofisticados para conseguir condiciones en cierta
tambin llamado de cohorte histrico), se utilizan los regis- medida similares a la obtenida mediante aleatorizacin que
tros para identificar dos grupos de sujetos en funcin de si permitan el anlisis de relaciones causa-efecto (vase Vlez,
han sido o no expuestos a la variable independiente, y des- Egurrola y Barragn, 2013).
pus se comparan en las variables dependientes (o sea, su ca-
racterstica diferencial es que hay una sola VI y una o ms Estudios transversales
VDs, p.e., Rios, Godoy y Snchez, 2011). Una cohorte re-
presenta en este contexto a un grupo de personas que han A diferencia de los estudios retrospectivos, los estudios
experimentado un evento significativo (p.e., nacimiento, di- transversales se definen en un momento temporal determi-
vorcio o enfermedad) durante un determinado intervalo nado y siguen una tradicin eminentemente asociativa donde
temporal. Por el contrario, en el diseo caso-control (DCC) el inters en el establecimiento de relaciones causa-efecto es
los registros se utilizan para identificar dos grupos en fun- secundario. Mientras los estudios retrospectivos y prospecti-
cin de si muestran evidencia de la variable dependiente (los vos de cohorte son el mejor medio para evaluar cuestiones
casos) o no la muestran (los controles), y despus se compa- de incidencia (o sea, se proponen determinar el nmero de
nuevos casos que se desarrollan durante un intervalo tempo-

anales de psicologa, 2013, vol. 29, n 3 (octubre)


Un sistema de clasificacin de los diseos de investigacin en psicologa 1049

ral especfico), los estudios transversales se utilizan primor- aunque los inconvenientes para el establecimiento de rela-
dialmente para evaluar cuestiones de prevalencia (o sea, se ciones causa-efecto siguen siendo patentes, principalmente
proponen determinar el nmero de casos que existen en una los problemas de sesgo y de confundido, que adems se
determinada poblacin en un momento temporal especfico). agravan como consecuencia del abandono de sujetos (attri-
Los estudios transversales son adems idneos para el estu- tion) que se produce en tanto mayor grado cuanto ms se
dio de VDs que permanecen estables en el tiempo, es decir, prolonga en el tiempo.
que no son susceptibles de cambio. Uno de los diseos prospectivos ms comunes es el di-
En epidemiologa y psicopatologa, los estudios transver- seo de cohorte prospectivo (DCP), cuya metodologa es
sales utilizan uno o ms grupos de participantes que son eva- similar al diseo de cohorte retrospectivo, pero la cohorte es
luados en un momento temporal determinado en una o ms evaluada hacia adelante, en varios momentos a lo largo del
VDs. El ms simple es el diseo de cohortes transversal tiempo, utilizando una o ms VDs relevantes (por ejemplo,
(Hudson, Pope & Glynn, 2005), que utiliza muestras de co- una escala de depresin). Usualmente este diseo incluye una
hortes de forma transversal y despus evalua retrospectiva- nica cohorte y se prolonga en el tiempo hasta determinar el
mente la historia de exposiciones (VIs) y resultados (VDs) en resultado de inters (por ejemplo, la incidencia de la depre-
los miembros de la cohorte en un periodo de tiempo espec- sin), en cuyo caso los miembros de la cohorte que no des-
fico (p.e., Stefani y Feldman, 2006). Es obvio que, como arrollan depresin sirven como controles internos. Pero
consecuencia del proceso de muestreo, algunos participantes tambin puede incluir ms de una cohorte, un grupo expues-
de la muestra no habrn tenido exposicin (VI) ni habrn to y otro no expuesto, en cuyo caso este ltimo grupo sirve
experimentado resultado (VD) alguno. Esta es una diferencia como control externo (Mann, 2003). Un diseo con estruc-
esencial con los estudios de cohorte (retrospectivo y pros- tura similar al diseo caso-control es el diseo caso-control
pectivo), donde el historial de exposiciones y/o resultados anidado (DCCA), en el que casos y controles se seleccionan
afecta a todos los sujetos de la cohorte (Mann, 2003). desde dentro de un estudio prospectivo, permitiendo reducir
En algunas reas de la psicologa aplicada es frecuente el sensiblemente el tiempo y el coste econmico en compara-
diseo de grupos naturales (DGN, vase Shaughnessy, cin con el diseo caso-control (vase Ernster, 1994).
Zechmeister & Zechmeister, 2012), cuyo objetivo es la com- Hay varios diseos prospectivos o longitudinales de gran
paracin en una o ms VDs de grupos preexistentes, donde inters en varias reas aplicadas de la psicologa (Arnau,
los grupos se seleccionan usando participantes que pertene- 1995d, Bijleveld et al., 1998, Taris, 2000). Aunque no tiene
cen a niveles de variables que son fuente de diferencias indi- una orientacin estrictamente longitudinal, el diseo ms
viduales (p.e., sexo, inteligencia, grupo tnico, trastorno psi- bsico es el diseo transversal simultneo (DTS), en el que
copatolgico, etc), y pertenecen a una misma cultura. Cuan- varios grupos se miden en una misma ocasin y su generali-
do los grupos naturales pertenecen a culturas diferentes el zacin constituye el diseo transversal repetido (DTR), que
resultado es el diseo transcultural (DTC, vase Matsumoto consta de al menos un DTS administrado en dos o ms
& van Vijver, 2011). El desarrollo de influyentes encuestas momentos temporales. En ambos casos, el inters de los in-
transculturales, tales como la European Social Survey o el Pro- vestigadores es estudiar el cambio a nivel individual en algu-
gram for International Assessment of Students Achievements (PISA), na variable de inters, pero no el cambio debido a la edad,
ha popularizado este tipo de investigaciones y ha permitido que es objeto de los estudios evolutivos. En el diseo en pa-
la explotacin de nuevas opciones analticas que no haban nel (DEP) uno o ms grupos de sujetos son evaluados en un
sido previamente consideradas (vase Davidov, Schmidt & nmero limitado de momentos temporales (usualmente, en-
Billiet, 2011). tre 3 y 5), mientras que en el diseo longitudinal en panel se
Los estudios transversales requieren esfuerzos mnimos ampla el nmero de momentos temporales de evaluacin, y
en economa y tiempo y son bastante eficientes cuando se es una generalizacin del diseo DCP (porque emplea mlti-
proponen hiptesis asociativas, pero plantean serios proble- ples cohortes), del DTS (porque cada una de las diferentes
mas de validez si se persiguen hiptesis causa-efecto. cohortes constituyen grupos de edad) y del DEP (porque la
muestra de participantes que constituye la cohorte es evalua-
Estudios prospectivos (o longitudinales) da en diferentes momentos temporales). Arnau (1995c,e,f) y
Gmez (1995) tratan en detalle algunas cuestiones analticas
En los estudios prospectivos o longitudinales, las VIs y de muchos diseos longitudinales. Bijleveld et al. (1998),
VDs se observan despus de haberse iniciado la investiga- Fitzmaurice, Laird & Ware (2009), Menard (2008) y Singer &
cin (aunque la VI puede en ocasiones referirse a una situa- Willett (2003) cubren en profundidad todas las cuestiones re-
cin anterior). De ah que el coste econmico y el tiempo re- levantes del diseo y el anlisis de datos longitudinales.
querido para completar un estudio prospectivo sea mucho
mayor que el requerido por un estudio retrospectivo, aunque Estudios evolutivos
como contrapartida mejora sensiblemente su fiabilidad. Y
debido a su condicin de longitudinal, algunas de las poten- En el contexto de la psicologa del desarrollo, los estu-
ciales amenazas contra la validez interna de los estudios re- dios comparativos se han interesado tradicionalmente por
trospectivos no se consideran en los estudios prospectivos, analizar las diferencias o los cambios que se producen en

anales de psicologa, 2013, vol. 29, n 3 (octubre)


1050 Manuel Ato et al.

comportamientos o habilidades de inters evolutivo en fun- den y por tanto no pueden observarse efectos debidos al pe-
cin de la edad o del desarrollo. Es muy importante deter- riodo, ya que los grupos de edad estudiados deben pertene-
minar si el inters del investigador son las diferencias de cer a diferentes cohortes. El diseo evolutivo longitudinal es
edad o los cambios debidos al tiempo para decidir si un es- menos asequible en trminos de tiempo y coste econmico
tudio es evolutivo (Schaie & Caskie, 2006). que el anterior, pero se confunden edad y periodo y por tan-
Singer & Willet (2003) han propuesto un interesante mo- to no pueden observarse efectos debidos a la cohorte. Por su
delo multinivel general que distingue dos etapas en el anlisis parte, en el diseo evolutivo de retardo temporal se confun-
del cambio en respuesta a dos objetivos diferentes y permite den los efectos de periodo y cohorte (Schaie, 1994, Schaie &
un anlisis estadstico separado del cambio inter e intraindi- Caskie, 2006).
vidual. En la primera etapa (nivel-1) el objetivo es el cambio Sin embargo, imponiendo restricciones apropiadas sobre
intraindividual a lo largo del tiempo, o sea, la trayectoria in- una de las tres dimensiones del modelo, es posible analizar
dividual de cada persona. En la segunda etapa (nivel-2) el ob- los otros dos componentes y su interaccin (Arnau, 2005,
jetivo son las diferencias individuales en el cambio intraindi- Bijleveld et al., 1999, Menard, 2008). Tres estrategias se han
vidual y la deteccin de las variables que explican tales dife- propuesto para analizar todas las combinaciones de dos de
rencias. los tres componentes, produciendo tres formas de diseo al-
Se han definido tres diseos evolutivos bsicos dentro de ternativas a los diseos evolutivos clsicos llamados genri-
esta tradicin (Baltes, Reese & Nesselroade, 1977, Schaie, camente diseos secuenciales (vase Schaie, 1994), a saber: el
1965, Rosel, 1995). En primer lugar, el diseo evolutivo diseo secuencial de cohorte (DSC), el diseo secuencial
transversal (DET), que utiliza muestras de diferentes grupos transverso (DSX) y el diseo secuencial de tiempo (DSTi).
de edad evaluados a nivel intersujetos en un mismo momen- En general, estos diseos son ms eficientes que los diseos
to temporal y persigue como objeto encontrar diferencias en evolutivos bsicos. Por ejemplo, un diseo longitudinal con
funcin de la edad en la medida de una o ms VDs. A pesar nios de 5 a 13 aos observados cada 2 aos requiere para
de su nombre, la dimensin longitudinal en este diseo se ser completado 8 aos, mientras que un diseo secuencial
debe a la comparacin entre diferentes grupos de edad. La equivalente reduce a la mitad el tiempo requerido para reali-
caracterstica diferencial que justifica la inclusin de este di- zar el estudio, utilizando un grupo de nios de 5 aos (que se
seo en los estudios evolutivos es que la variable clave es la observa a los 5, 7 y 9 aos) y otro grupo de nios 9 aos
edad, mientras que en los estudios transversales y en el dise- (que se observa a los 9, 11 y 13 aos). Ms informacin so-
o transversal simultneo la edad es una variable de control bre mtodos de investigacin en psicologa evolutiva puede
(Taris, 2000). El diseo es bastante eficiente, porque permite encontrarse en Martnez-Arias (1983) y sobre los diseos
aproximar un estudio longitudinal desde una perspectiva evolutivos en general en Vega (1983).
transversal, pero no es posible evaluar el cambio intraindivi-
dual y los efectos de edad se confunden con los efectos evo- Estudios predictivos y explicativos
lutivos. En segundo lugar, el diseo evolutivo longitudinal
(DEL), que se interesa por el anlisis del cambio que se pro- Otro tipo de investigaciones no experimentales que de-
duce en un grupo de individuos observado en repetidas oca- rivan de la estrategia asociativa son los estudios cuyo prop-
siones a lo largo del tiempo. En tercer lugar el diseo evolu- sito principal es explorar las relaciones entre variables con el
tivo de retardo temporal (DTL, time-lag design), donde se objeto de pronosticar o explicar su comportamiento. Duran-
registran observaciones en varios momentos temporales, te mucho tiempo se han conocido tambin con el nombre
como en el diseo longitudinal, pero se utiliza una muestra genrico de estudios correlacionales, pero esta denominacin
de individuos del mismo grupo de edad que es diferente para se considera hoy incorrecta porque el tipo de anlisis estads-
cada momento temporal. tico no es precisamente el tema crucial en este tipo de estu-
Estos tres diseos son casos especiales del modelo evolu- dios (Cook & Campbell, 1979). Sin embargo, para los estu-
tivo general de Schaie (1965), quien postul que cualquier dios que nicamente exploran relaciones entre variables con
cambio evolutivo puede ser potencialmente descompuesto coeficientes de correlacin simple seguiremos empleando el
en una (o ms) de tres dimensiones independientes de edad trmino de diseos correlacionales.
cronolgica (referida al nmero de aos desde el nacimiento Tres caractersticas distintivas permiten definir operati-
al momento cronolgico en que se evala el comportamien- vamente este tipo de estudios respecto de los dems estudios
to), cohorte o generacin (referida al grupo de individuos de naturaleza no experimental:
que participan de un contexto comn en un mismo momen- a) la existencia de una muestra nica de participantes que no
to cronolgico) y periodo (referida a la ocasin temporal en es usualmente seleccionada aleatoriamente;
que se realiza la medida). Las tres dimensiones se confunden b) la medida de cada participante de la muestra en dos o ms
de forma que una vez especificadas dos de ellas, la tercera variables que suelen ser de naturaleza cuantitativa (o sea,
viene determinada. Por ejemplo, un individuo de una cohor- variables medidas, no manipuladas) pero ocasionalmente
te nacida en 1950 y evaluada en el periodo 2010 se sabe que tambin de naturaleza categrica, y
tiene una edad de 60 aos en el momento de la medida. As,
en el diseo evolutivo transversal, edad y cohorte se confun-

anales de psicologa, 2013, vol. 29, n 3 (octubre)


Un sistema de clasificacin de los diseos de investigacin en psicologa 1051

c) la disponibilidad, como punto de partida para abordar el controlando una (o ms) tercera(s) variable(s). El procedi-
anlisis estadstico, de una matriz de correlaciones (o cova- miento de control ms apropiado en este caso es el control
rianzas) entre variables. estadstico mediante residualizacin o parcializacin, en cuyo
caso el diseo resultante se denomina diseo correlacional
Siguiendo a Pedhazur & Smelkin (1990), hemos clasifica- controlado (DCC). El anlisis estadstico utiliza coeficientes
do los trabajos que siguen esta lnea de investigacin, depen- de correlacin parcial o semiparcial de orden k, donde k se
diendo de la complejidad del objetivo que se persigue, en es- refiere al nmero de variables controladas, o bien una matriz
tudios predictivos y explicativos, y se representan en la Figu- de coeficientes de correlacin parcial o semiparcial (p.e.,
ra 7. Piamontesi et al., 2012).
Cuando el objetivo de la investigacin es explorar una re-
Estudios predictivos lacin funcional mediante el pronstico de alguna variable
criterio a partir de uno o ms predictores, se aplica un diseo
La forma ms bsica que suele adoptar este tipo de estu- predictivo transversal (DPT), donde es comn la utilizacin
dios ocurre cuando el objetivo de la investigacin es simple- de los trminos predictor, en sustitucin del de variable in-
mente explorar una relacin funcional entre dos o ms va- dependiente, y criterio, en sustitucin del de variable depen-
riables, sin distincin alguna entre ellas. Puesto que no se uti- diente. Con el DPT no suele emplearse ningn procedimien-
liza ninguna forma de control de variables extraas sobre la to de control de variables extraas y el procedimiento es-
relacin funcional, el diseo resultante se denomina diseo tadstico ms comn consiste en especificar un modelo de
correlacional simple (DCS). Para el anlisis estadstico de la regresin apropiado, lineal o no lineal, dependiendo de la na-
asociacin entre variables suele utilizarse algn coeficiente de turaleza y la distribucin de la variable criterio, y puede tam-
correlacin (o una matriz de coeficientes de correlacin) bin tratarse desde una perspectiva multinivel. Los modelos
apropiado a la naturaleza mtrica de las variables (p.e., Sicilia, lineales generalizados (Ato et al., 2005, Dobson, 2002, Har-
Aguila, Muyor, Orta y Moreno, 2009), pero tambin son po- din & Hilbe, 2007) y los modelos multinivel (Hox, 2010) son
sibles otras tcnicas analticas alternativas. especialmente recomendables en este contexto. Cuando la
variable criterio es numrica y distribuida normalmente, suele
especificarse un modelo de regresin normal (p.e., Jimnez,
Martnez, Mir y Snchez, 2012), cuando la variable es bina-
ria o dicotmica un modelo de regresin logstica (p.e., Pla-
nes et al., 2012) y cuando presenta una estructura jerrquica
un modelo multinivel (p.e. Nez, Vallejo, Rosrio, Tuero y
Valle, en prensa). En muchos de estos casos es tambin po-
sible, e incluso en ocasiones conveniente, evaluar la eficacia
de la prediccin mediante una clasificacin de los participan-
tes. Es til en este contexto, adems de la regresin logstica,
la aplicacin de otras tcnicas multivariantes tales como el
anlisis discriminante, la clasificacin y segmentacin jerar-
quicas y las redes neurales (vase Levy y Varela, 2003).
Si el investigador dispone de muchos predictores, hay
dos medios alternativos de introducirlos en una ecuacin de
regresin: o bien todos de una vez (introduccin simultnea)
DCS: diseo correlacional simple. DCC: diseo correlacional controlado. o bien mediante una serie de pasos (introduccin secuencial).
DPT: diseo predictivo transversal. DPL: diseo predictivo longitudinal. En este ltimo caso, hay dos opciones generales para deter-
DVO: diseo explicativo con variables observables.
DVL: diseo explicativo con variables latentes. minar un orden lgico de introduccin de los predictores: o
DCCr: diseo explicativo de curvas de crecimiento. bien mediante un procedimiento automtico, dirigido por el
DGM: diseo explicativo de grupos mltiples. computador (stepwise selection), o mediante un procedimien-
DLEP: diseo explicativo longitudinal en panel. to sustantivo, dirigido por el investigador en funcin del ob-
Figura 7. Diseos predictivos y explicativos. jetivo de la investigacin (hierarchical selection). Se han es-
grimido muchas razones para preferir la seleccin jerrquica
Resulta obvio que en el DCS el grado de control ejercido a la seleccin paso a paso (Snyder, 1991, Thompson, 1995,
sobre las terceras variables que potencialmente pueden afec- 2001), la principal de las cuales es que con la seleccin jerr-
tar a la relacin analizada es nulo y que todas las variables quica es posible incorporar en las primeras etapas del proce-
tienen el mismo estatus metodolgico (en realidad, todas se so las variables extraas que el investigador considere perti-
consideran variables criterio), por lo que este diseo es alta- nentes, para analizar los predictores objeto de la investiga-
mente propenso a padecer muchas de las amenazas contra la cin liberados de la influencia de las variables extraas en las
validez interna y externa. Puede mejorarse sensiblemente etapas finales.
cuando la relacin funcional entre las variables se explora

anales de psicologa, 2013, vol. 29, n 3 (octubre)


1052 Manuel Ato et al.

Tanto los diseos correlacionales como el diseo predic- los procesos intervinientes que producen una relacin fun-
tivo transversal son en esencia diseos de medida nica. Una cional o un efecto de tratamiento (p.e., Gartzia et al., 2012),
generalizacin del DPT al caso longitudinal conduce al dise- mientras que un modelo de moderacin se interesa por los
o predictivo longitudinal (DPL), que se caracteriza por re- procesos que afectan a la magnitud de la relacin o efecto
gistrar una medida intensiva de las variables criterio y por in- (p.e., Rodrigo et al., 2012).
tentar la eliminacin de muchos artefactos metodolgicos En segundo lugar, el diseo explicativo con variables la-
(Mindick & Oskamp, 1979), aunque adolece tambin de los tentes (DVL) distingue en un modelo una parte estructural
problemas asociados a la investigacin longitudinal en trmi- (que representa un modelo estructural de relaciones entre va-
nos de economa y tiempo requerido. riables, como en el diseo DVO) y una parte de medida (que
incluye los diferentes indicadores que definen un constructo
Estudios explicativos o variable latente) y se representa tambin mediante un sis-
tema de ecuaciones estructurales, donde algunas variables
Otro tipo de investigaciones que derivan de la estrategia son observables y otras son latentes. Se conocen como mo-
asociativa son los estudios explicativos, que se proponen con delos SEM o modelos de ecuaciones estructurales (structural
el objetivo de probar modelos acerca de las relaciones exis- equation models). Hay al menos dos enfoques estadsticos
tentes entre un conjunto de variables, tal y como se derivan apropiados para estimar los parmetros de los modelos SE-
de una teora subyacente. En un modelo de regresin, el M, un procedimiento basado en las covarianzas (covariance-
modelo estadstico bsico de los diseos predictivos, se defi- based SEM), que es el ms extendido (Kline, 2011, Levy y
nen con claridad los papeles de predictor y criterio, pero Varela, 2006) y para el que se han diseado programas de
postulan estructuras de modelado muy simples (por lo gene- anlisis especficos (AMOS, CALIS, EQS, LISREL,
ral, un criterio y varios predictores) y consideran todas las MPLUS), y un procedimiento basado en las varianzas (va-
variables como manifiestas u observables y medidas sin riance-based SEM), denominado partial least squares path mode-
error, lo que limita considerablemente su aplicabilidad. Su ling (PLS-PM) que suele aplicarse en ocasiones en que no se
generalizacin a modelos ms avanzados, incluyendo estruc- cumplen las severas condiciones que exige el primero relati-
turas de modelado simultneas y variables no observables o vas al tamao muestral, normalidad multivariante e indepen-
latentes, permiten definir un sistema de ecuaciones de regre- dencia de las observaciones (Esposito Vinci et al., 2010,
sin donde las variables pueden intercambiar sus papeles de Hair, Hult, Ringle & Sarstedt, 2013), y para el que tambin
predictor y criterio. Para aclarar en mayor medida su papel existen programas de anlisis apropiados (p.e., el programa
en el contexto de cada una de las ecuaciones de regresin del PLS-PM incluido en el paquete R).
sistema se utilizan alternativamente los trminos de variables Los DVL permiten controlar cualquier variable extraa
exgenas (ajenas al sistema) y variables endgenas (internas simplemente incluyndola en el modelo estructural como va-
al sistema), en lugar de los trminos de predictor y criterio. riables observables y especificando sus relaciones con el res-
Dos situaciones de investigacin se contemplan aqu to de variables, observables y latentes (p.e., Rosario et al.,
(vase Figura 7 anterior). En primer lugar, el diseo explica- 2012). Adems tambin es posible probar efectos de media-
tivo con variables manifiestas (DVM), que se caracteriza por cin y moderacin, usualmente comparando el ajuste de dos
definir una red estructural de relaciones entre variables que modelos alternativos que difieren entre s por incluir o no
puede representarse mediante un sistema de ecuaciones de efectos de las terceras variables (p.e., Buelga, Cava y Musitu,
regresin, asumiendo que todas las variables son manifiestas. 2012).
El procedimiento estadstico ms apropiado para analizar los Una interesante generalizacin de los DVL que puede
datos de este tipo de diseo parte de una matriz de correla- utilizarse para modelar datos longitudinales en los que se ob-
ciones (o covarianzas) y aplica despus el anlisis de senderos servan medidas repetidas de al menos una variable en un
(path analysis). El ajuste de los datos empricos al modelo nmero de ocasiones conduce al diseo de curvas de creci-
propuesto se evala utilizando medidas de ajuste apropiadas miento (DCCr). Una asequible introduccin a este tipo de
para modelos estructurales (vase Kline, 2011). Sin embargo, diseo puede consultarse en Arnau y Balluerka (2004) y
como se apunt ms arriba, los investigadores deben tener Preacher, Wichman, McCallum & Briggs (2008). Otros dise-
siempre presente que este anlisis asume que las variables os explicativos longitudinales que emplean modelos SEM,
manifiestas son manifestaciones fiables de sus correspon- tales como el diseo explicativo con grupos mltiples
dientes constructos, lo que no siempre se puede justificar (DGM) y el diseo explicativo longitudinal en panel (DLEP),
(vase Cole & Preacher, 2013). pueden consultarse en Little (2013b).
Dada una relacin funcional entre un predictor y un cri-
terio, una de las ms interesantes propiedades del diseo Estrategia descriptiva
DVO es su potencial para investigar los efectos de una o
ms terceras variables (Ato y Vallejo, 2011), lo que justifica el La estrategia descriptiva representa, junto a la estrategia aso-
incremento sensible de investigaciones que someten a prue- ciativa, una de las dos formas caractersticas de los estudios
ba modelos de mediacin y moderacin (Jose, 2013). En su no experimentales porque no cumple ninguno de los dos cri-
forma ms simple, un modelo de mediacin se interesa por terios bsicos de la investigacin experimental (manipulacin

anales de psicologa, 2013, vol. 29, n 3 (octubre)


Un sistema de clasificacin de los diseos de investigacin en psicologa 1053

de variables y control mediante asignacin aleatoria). Pero largo de un continuo que discurre desde la utilizacin de
mientras que en la estrategia asociativa los objetivos de in- mtodos sin intervencin (observacin naturalista) en el con-
vestigacin se traducen en hiptesis que persiguen las com- texto de observacin al empleo de mtodos con interven-
paraciones entre grupos y la prediccin o explicacin de cin, entre los cuales se encuentra la observacin participan-
comportamientos o procesos, en la estrategia descriptiva el te (donde el observador juega un papel dual, observando
objetivo de la investigacin es la definicin, clasificacin y/o conductas y participando en la situacin observada) y la ob-
categorizacin de eventos para describir procesos mentales y servacin estructurada (donde el observador interviene en la
conductas manifiestas, que no suele requerir el uso de hip- situacin con la finalidad de facilitar el registro de compor-
tesis. tamientos que pueden ser difciles de registrar mediante ob-
Hay dos grandes tipos de estudios incluidos dentro de la servacin naturalista como sucede en los estudios de Piaget).
estrategia descriptiva, que representan tambin formas alter- En todas estas situaciones el investigador debe tener en
nativas de recogida de datos que se utilizan en la mayora de cuenta las especficas limitaciones que presenta esta metodo-
los estudios no experimentales: los estudios observacionales, loga entre las cuales destacan: 1) el escaso control que
donde se registran comportamientos que son objeto de ob- usualmente se obtiene de las variables extraas (de hecho no
servacin y se clasifican de acuerdo con cdigos arbitrarios, y suele emplearse el rtulo de variable en este contexto); 2)
los estudios selectivos, donde se registran opiniones o acti- la posible dependencia de los juicios subjetivos y 3) los pro-
tudes en una escala de respuesta usualmente mediante cues- blemas de reactividad derivados de la situacin de observa-
tionario. Siguiendo a Kish (1987), la caracterstica esencial de cin.
un estudio observacional es el realismo con que se investigan Los estudios observacionales se adaptan bien a muchas
los comportamientos que son objeto de observacin, mien- situaciones que interesan a la investigacin cualitativa (An-
tras que la caracterstica bsica de un estudio selectivo es la guera, 1986, 1995, Marshall & Rossman, 2006), tales como
representatividad de la muestra seleccionada respecto de la po- los estudios narrativos, que exploran a un solo participante,
blacin objetivo. los estudios fenomenolgicos, que exploran a un grupo re-
Es importante advertir que el anlisis de datos que se es- ducido de participantes y los estudios etnogrficos, que se in-
pera en un estudio descriptivo no es necesariamente un an- teresan por una cultura. Especialmente apropiada es la me-
lisis descriptivo; en muchas ocasiones se requiere un anlisis todologa observacional en el estudio de casos, donde el in-
ms complejo utilizando un amplio repertorio de tcnicas vestigador estudia intensivamente aspectos especficos de la
analticas univariantes y multivariantes (por ejempo, tcnicas conducta de una entidad (que puede incluir uno o ms suje-
de clasificacin, de reduccin de la dimensionalidad o de es- to/s, dada/s, escuela/s, hospital/es, equipo/s o empresa/s)
calamiento). El tipo de estudio no depende del anlisis es- durante un periodo de tiempo (vase Woodside, 2010) y
tadstico realizado, sino del objetivo que se persigue. Cuando tambin en los estudios generadores de teora (basados en la
el objetivo de la investigacin es descriptivo, el investigador grounded theory propuesta por Strauss & Corbin, 1998) que
no suele plantear hiptesis concretas para someter a prueba se proponen generar o descubrir una teora o patrn analti-
emprica y presentar resultados que describan apropiada- co de un proceso, accin o interaccin a partir de los datos
mente comportamientos o procesos mentales, ya sea con es- recopilados de los participantes que lo han experimentado
tadsticos descriptivos o con otras tcnicas analticas ms so- (p.e., Fernndez-Alcntara et al., 2013).
fisticadas. A pesar de la diversidad de estudios posibles, la metodo-
loga que se aplica en los estudios observacionales es nica y
Estudios observacionales ... se caracteriza bsicamente por la perceptividad del com-
portamiento, la habitualidad en el contexto, la espontaneidad
Un estudio observacional es un plan de investigacin de de la conducta observada y la elaboracin a medida de ins-
gran versatilidad procedimental para registrar la conducta es- trumentos de observacin (Anguera, Blanco, Hernndez y
pontnea de una unidad (participante, dada, equipo, etc.) Losada, 2011, p. 64). En este sentido, puede definirse el di-
mediante tcnicas de observacin especficas y siguiendo un seo observacional como una gua flexible que permite to-
plan de muestreo de conductas en contextos naturales (Ra- mar decisiones acerca de la recogida de datos (incluyendo la
badn y Ato, 2003). construccin de instrumentos de observacin), as como de
Siguiendo a Anguera (1995) y a Shaughnessy, Zechmeis- la gestin y el anlisis de los datos, destacando tres criterios
ter y Zechmeister (2012), los estudios observacionales se dis- clave para distinguirlos (Anguera, Blanco y Losada, 2001,
tinguen de forma general en funcin del mtodo de observa- Anguera, Blanco, Hernndez y Losada, 2011):
cin utilizado, o bien mediante la observacin indirecta (no a) las unidades de estudio observadas se distinguen entre s
reactiva) de comportamientos que ocurrieron previamente, en funcin de su nivel de integracin en ideogrfico (una
como sucede cuando se analiza la escena de un crimen en nica unidad de observacin, individual o agregada) y no-
busca de indicios probatorios o se consultan registros de ar- mottico (una pluralidad de unidades de observacin);
chivo sobre comportamientos de inters, o bien mediante b) la temporalidad del estudio permite distinguir entre obser-
observacin directa. En este ltimo caso, el investigador de- vaciones realizadas en un corte transversal (puntual) o lon-
be crear un contexto de observacin que puede variar a lo gitudinal (seguimiento), y

anales de psicologa, 2013, vol. 29, n 3 (octubre)


1054 Manuel Ato et al.

c) la dimensionalidad del estudio, referida a los niveles de Utilizando los diseos observacionales tratados aqu, se pro-
respuesta registrados, facilita la distincin entre investiga- ponen en ocasiones analizar relaciones funcionales entre
ciones que requieren un nico nivel de respuesta (unidi- comportamientos, utilizando tcnicas muy similares a los di-
mensional) e investigaciones que requieren varios (multi- seos de caso nico (pero en general primando la validez ex-
dimensional). terna sobre la validez interna) y empleando procedimientos
de anlisis de datos que dependen de la naturaleza de los da-
El cruce de las dos opciones posibles para cada uno de tos registrados, mediante una transformacin sutil del regis-
los tres criterios citados produce ocho tipos de diseos ob- tro cualitativo en datos cuantitativos, y por tanto debern ser
servacionales que se han representado en la Figura 8. Cada ubicados dentro de la estrategia asociativa, aunque emplean-
uno de los cuatro cuadrantes de la figura se corresponde do los mismos diseos observacionales que tratamos aqu.
tambin con las categoras de una taxonoma propuesta por La caracterstica comn de todos los diseos observaciona-
Sakett (1978) relativa a la naturaleza de los datos obtenidos a les, se encajen o no dentro de la estrategia descriptiva, es el
partir de los diseos observacionales, en los que se diferencia uso de la observacin como tcnica de recogida de datos.
entre datos tipo I (secuenciales y evento-base), datos tipo II Ms informacin sobre la moderna metodologa observacio-
(concurrentes y evento-base), datos tipo III (secuenciales y nal puede consultarse en muchas publicaciones de la profe-
tiempo-base) y datos tipo IV (concurrentes y tiempo-base). sora Anguera y de otros miembros de su dilatado equipo de
Anguera, Blanco y Losada (2001) y Blanco, Losada y An- investigacin.
guera (2003) ilustran la naturaleza de cada uno de los diseos
observacionales y presentan algunos ejemplos de uso en nu- Estudios selectivos
merosas aplicaciones de la psicologa clnica, la psicologa es-
colar, la psicologa del deporte, la etologa (animal y humana) Los estudios selectivos constituyen una de las formas
y la observacin en contextos naturales, que se han recogido ms comunes de investigacin en psicologa basada en el uso
en una serie de publicaciones coordinadas por la profesora del mtodo de encuesta por muestreo, y su caracterstica dis-
Anguera (1999a,b,c,d,e). tintiva fundamental es la utilizacin de la tcnica del autoin-
forme para recabar informacin emprica (en particular, me-
diante entrevistas y cuestionarios) sobre una muestra de par-
ticipantes, que se asume representativa de una poblacin, y
cuyos elementos se determinan mediante algn plan de
muestreo, con el objeto de investigar alguna caracterstica de
la poblacin (Martnez-Arias, 1995a). Dentro de esta defini-
cin cabe incluir muchas encuestas nacionales (por ejemplo,
la Encuesta Nacional de Salud, de periodicidad quinquenal, para
conocer aspectos de la salud de los ciudadanos) e internacio-
nales (por ejemplo, la Encuesta Social Europea, de periodicidad
bianual, para recoger informacin sobre las opiniones y acti-
tudes de los ciudadanos europeos). No se incluyen aqu los
estudios selectivos que utilizan encuestas con objetivos aje-
nos a la investigacin del comportamiento.
Una cuestin esencial en la aplicacin de un estudio se-
lectivo es la representatividad de la muestra respecto de la
poblacin, una cuestin que concierne a la validez externa de
DPIM: diseo puntual ideogrfico multidimensional.
DSIM: diseo de seguimiento ideografico multidimensional. la investigacin. La representatividad de la muestra debe es-
DPNM: diseo puntual nomottico multidimensional. tablecerse utilizando un conjunto de variables sociodemogr-
DSNM: diseo de seguimiento nomottico multidimensional. ficas marcadoras no relacionadas con la temtica de la en-
DPIU: diseo puntual ideogrfico unidimensional. cuesta y comprobando que las estimaciones muestrales no
DSIU: diseo de seguimiento ideogrfico unidimensional.
DPNU: diseo puntual nomottico unidimensional. difieren de los parmetros de la poblacin dentro de un mar-
DSNU: diseo de seguimiento nomottico unidimensional. gen de error preestablecido. El mayor grado de representati-
vidad se alcanza cuando se emplea muestreo probabilstico,
Figura 8. Estudios observacionales. pero es muy comn en psicologa aplicada el uso de mues-
treo no probabilstico, y en particular los mtodos subjetivos
Los diseos observacionales que se describen aqu se cla- de muestreo, que tienen el menor grado de representatividad.
sificarn como descriptivos cuando su objetivo encaje dentro Adems del objetivo de la investigacin, el diseo de un
de una estrategia de investigacin descriptiva. Sin embargo, estudio selectivo debe tener en cuenta el procedimiento de
muchos estudios representativos de lo que hoy se conoce recogida de la informacin y adoptar una serie de decisiones
como metodologa observacional transcienden en gran medida el esenciales previas al muestreo, durante el muestreo y poste-
marco descriptivo y no tienen fcil encaje en esta categora. riores al muestreo (Martnez-Arias, 1995c). Los diseos se-

anales de psicologa, 2013, vol. 29, n 3 (octubre)


Un sistema de clasificacin de los diseos de investigacin en psicologa 1055

lectivos pueden ser clasificados en funcin de varias perspec- todas las opciones de diseo que un investigador tiene dis-
tivas. Desde una perspectiva metodolgica pueden ser des- ponibles. La intencin futura de sus autores es ampliar en
criptivos (cuando el objetivo del estudio es obtener informa- sucesivas reediciones esta presentacin preliminar, incluyen-
cin puntual de poblaciones poniendo el acento en la preci- do nuevos diseos bsicos que probablemente no se habrn
sin en las estimaciones de parmetros) y analticos (cuando tenido en cuenta, eliminando diseos que pueden resultar
el objetivo es la comparacin de grupos, la prediccin o la obsoletos y desarrollar una presentacin ms detallada donde
explicacin de comportamientos). Desde una perspectiva se traten cada uno de los diseos con sus posibles extensio-
temporal, un estudio selectivo puede ser transversal (DPT y nes, sus opciones analticas y algunos ejemplos de su aplica-
DNPT), donde se emplea una o ms muestras de una misma cin en la prctica.
poblacin, manteniendo constante el tiempo, de serie tem-
poral (DPST y DNPST), que son encuestas transversales con
una nueva muestra utilizando el mismo instrumento para ca-
da oleada, usualmente manteniendo constante la edad), lon-
gitudinal (DPL y DNPL), donde se emplea una muestra en
varios momentos temporales para evaluar el cambio, mante-
niendo constante la cohorte) y secuencial de cohorte longi-
tudinal (DPCS y DNPCS), que combina elementos de los
tres diseos anteriores estudiando cohortes longitudinamen-
te mientras nuevas cohortes se van aadiendo secuencial-
mente.
Dentro de la estrategia descriptiva, los estudios selectivos
que interesan son obviamente los descriptivos, pero no los
analticos, que como sucede con los estudios observacionales
deben ubicarse dentro de otras alternativas no experimenta-
les de la estrategia asociativa dependiendo del objetivo que se
persiga (estudios comparativos, predictivos o explicativos), DPT: diseo selectivo probabilstico transversal;
pero su caracterstica comn es el uso de la encuesta como DPST: diseo selectivo probabilstico de serie temporal;
instrumento de recogida de datos. Los diseos selectivos, ya DPL: diseo selectivo probabilstico longitudinal;
DPCS: diseo selectivo probabilstico de cohorte secuencial;
sean descriptivos o analticos, constituyen todo un arsenal de DNPT: diseo selectivo no probabilstico transversal;
procedimientos de la denominada metodologa de encuesta que se DNPST: diseo selectivo no probabilstico de serie temporal;
diferencian en funcin de su grado de representatividad DNPL: diseo selectivo no probabilstico longitudinal;
(probabilstico vs. no probabilstico) y de la perspectiva tem- DNPCS: diseo selectivo no probabilstico de cohorte secuencial unidimen-
sional.
poral de la recogida de datos y se representan en la Figura 9.
Todo el proceso de aplicacin y estimacin de una en- Figura 9. Estudios selectivos.
cuesta puede consultarse en Gmez (1990) y Martnez Arias
(1995a,b,c). Informacin ms detallada relativa a la investiga- Dada la problemtica situacin creada en nuestro pas
cin mediante encuesta puede encontrarse en una enciclope- por la necesidad de publicar para conseguir nuevas metas
dia en dos volmenes editada por Lavrakas (2008). acadmicas y profesionales, que est produciendo como con-
secuencia una mayor profundizacin en aspectos tericos en
Conclusiones los expertos sustantivos y de los aspectos metodolgicos y
analticos en los expertos metodlogos, nuestra firme re-
Partiendo de un marco contextual y de unos principios bsi- comendacin es fomentar una colaboracin ms estrecha en-
cos para fundamentar los aspectos metodolgicos del desa- tre los dos colectivos y potenciar el desarrollo de trabajos de
rrollo, la articulacin y la valoracin de un informe de inves- investigacin ms competitivos.
tigacin, en este trabajo se aborda una clasificacin de los di-
seos de investigacin ms usuales en psicologa donde se Agradecimientos.- Nuestro especial agradecimiento al equipo di-
unifican criterios metodolgicos y criterios analticos para fa- rectivo de la revista Anales de Psicologa, por darnos la oportunidad
cilitar su identificacin. de desarrollar este trabajo, y a quince expertos, sustantivos y me-
todlogos, que han respondido a nuestra llamada para revisar un
Es obvio que cualquier clasificacin ser por su propia primer borrador y nos han aportado sugerencias muy valiosas para
naturaleza ambigua, y que en algunos casos nos encontrare- mejorarlo. La versin final contiene muchas de las sugerencias reci-
mos con diseos que no tienen una fcil ubicacin. Este tra- bidas. Los errores que todava persistan en el trabajo slo deben ser
bajo presenta un total de 71 diseos bsicos, que pueden ser imputables a sus autores.
fcilmente generalizados para abarcar un gran espectro de

anales de psicologa, 2013, vol. 29, n 3 (octubre)


1056 Manuel Ato et al.

Referencias
Ader, H. J., & Mellenbergh, G. (1999). Research methodology in the life, behavioral Arnau, J. y Gmez, J. (1995). Diseos longitudinales en panel. En J. Arnau
and social sciences. London, UK: Sage Publications. (ed.). Diseos longitudinales aplicados a las ciencias sociales y del comportamiento
Aiken, L. S., & West, S. G. (1996). Multiple regression: testing and interpreting inte- (pp. 341-400). Mxico: Limusa.
ractions. Thousand Oaks, CA: Sage Publications. Arnau, J., Anguera, M.T. y Gmez, J. (1990). Metodologa de la investigacin en
Anderson, S., Auquier, A., Hauck, W. W., Oakes, D., Vandaele, W., & Ciencias del Comportamiento. Murcia: Secretariado de Publicaciones de la
Weisberg, H. I. (1980). Statistical methods for comparative studies: techniques Universidad de Murcia.
for bias reduction. New York, NY: Wiley. Ato, M. (1991). Investigacin en Ciencias del Comportamiento: Fundamentos. Barce-
Anguera, M. T. (1986). La investigacin cualitativa. Educar, 10, 23-50. lona: PPU/DM.
Anguera, M. T. (1991). Metodologa observacional en la investigacin psicolgica (vol. Ato, M. (1995a). Tipologa de los diseos cuasiexperimentales. En M. T.
I). Barcelona: PPU. Anguera, J. Arnau, M. Ato, R. Martnez-Arias, J. Pascual y G. Vallejo
Anguera, M. T. (1993). Metodologa observacional en la investigacin psicolgica (vol (Eds.), Mtodos de investigacin en psicologa (pp. 245-270). Madrid: Sntesis.
II). Barcelona: PPU. Ato, M. (1995b). Anlisis estadstico I: Diseos con variable de asignacin
Anguera, M. T. (1995). La metodologa cualitativa. En M. T. Anguera, J. Ar- no conocida. En M. T. Anguera, J. Arnau, M. Ato, R. Martnez-Arias, J.
nau, M. Ato, M. R. Martnez, J. Pascual y G. Vallejo (Eds.), Mtodos de Pascual y G. Vallejo (Eds.), Mtodos de investigacin en psicologa (pp. 271-
investigacin en Psicologa (pp. 513-22). Madrid: Sntesis. 304). Madrid: Sntesis.
Anguera, M. T. (1999a). Observacin en la escuela: Aplicaciones. Barcelona: Edi- Ato, M. (1995c). Anlisis estadstico II: Diseos con variable de asignacin
cions de la Universitat de Barcelona. conocida. En M. T. Anguera, J. Arnau, M. Ato, R. Martnez-Arias, J.
Anguera, M. T. (1999b). Observacin en deporte y conducta cintico-motriz: Aplica- Pascual y G. Vallejo (Eds.), Mtodos de investigacin en psicologa (pp. 305-
ciones. Barcelona: Edicions de la Universitat de Barcelona. 320). Madrid: Sntesis.
Anguera, M. T. (1999c). Observacin de conducta interactiva en contextos naturales: Ato, M. y Vallejo, G. (2007). Diseos experimentales en psicologa. Madrid: Pir-
Aplicaciones. Barcelona: Edicions de la Universitat de Barcelona. mide.
Anguera, M. T. (1999d). Observacin en etologa (animal y humana: Aplicaciones. Ato, M. y Vallejo, G. (2011). Los efectos de terceras variables en la investi-
Barcelona: Edicions de la Universitat de Barcelona. gacin psicolgica. Anales de Psicologa, 27, 550-561.
Anguera, M. T. (1999e). Observacin en Psicologa Clnica: Aplicaciones. Barcelo- Ato, M., Losilla, J. M., Navarro, B., Palmer, A. y Rodrigo, M. F. (2005). El
na: Edicions de la Universitat de Barcelona. modelo lineal generalizado. Girona: Documenta Universitaria - EAP, S.L.
Anguera, M. T., Blanco, A. y Losada, J. L. (2001). Diseos observacionales, Bailey, R. A. (2008). Design of comparative experiments. Cambridge, UK: Cam-
cuestin clave en el proceso de la metodologa observacional. Metodolog- bridge University Press.
a de las Ciencias del Comportamiento, 3, 135-160. Balkin, R. S., & Sheperis, C. J. (2011). Evaluating and reporting statistical
Anguera, M. T., Blanco, A., Hernndez, A. y Losada, J. L. (2011). Diseos power in counseling research. Journal of Counseling & Development, 89,
observacionales: ajuste y aplicacin en psicologa del deporte. Cuadernos 268-272.
de Psicologa del Deporte, 11, 63-76. Balluerka, N., Gmez, J. e Hidalgo, M. D. (2005). The controversy over null
Anguera, M. T., Chacn, S. y Blanco, A. (Eds.) (2008). Evaluacin de progra- hypotesis significance. Methodology, 1, 55-70.
mas sociales y sanitarios: Un abordaje metodolgico. Madrid: Sntesis. Baltes, P. B., Reese, H. W., & Nesselroade, J. R. (1977). Life-span developmental
American Psychological Association. (2010). Publication Manual of the Ameri- psychology: introduction to research methods (traduccin espaol: Ed. Morata,
can Psychological Association (6th Ed.) Washington, DC: Author. 1981). Monterey, CA: Brooks/Cole.
Arnau, J. (1995a). Metodologa de la investigacin psicolgica. En M. T. Barrada, J. R. (2012). Tests adaptativos informatizados: una perspectiva ge-
Anguera, J. Arnau, M. Ato, R. Martnez-Arias, J. Pascual y G. Vallejo neral. Anales de Psicologa, 28, 289-302.
(Eds.), Mtodos de investigacin en psicologa (pp. 23-44). Madrid: Sntesis. Bijleveld, C. J. H., van der Kamp, L. J., Moijaart, A., van der Kloot, A., van
Arnau, J. (1995b). Fundamentos metodolgicos de los diseos de sujeto der Leeden, R., & van der Burg, E. (1998). Longitudinal data analysis: De-
nico. En M. T. Anguera, J. Arnau, M. Ato, R. Martnez-Arias, J. Pas- signs, models and methods. Newbury Park, CA: Sage.
cual y G. Vallejo (Eds.), Mtodos de investigacin en psicologa (pp. 163-178). Blanca, M. J., Luna, R., Lpez, D., Rando, B. y Zalabardo, C. (2001). Proce-
Madrid: Sntesis. samiento global y local con tareas de categorizacin de la orientacin.
Arnau, J. (1995c). Diseos experimentales de sujeto nico. En M. T. Angue- Anales de Psicologa, 17, 247-254.
ra, J. Arnau, M. Ato, R. Martnez-Arias, J. Pascual y G. Vallejo (Eds.) Blanco, A., Losada, L. y Anguera, M. T. (2003). Data analysis techniques in
Mtodos de investigacin en psicologa (pp. 179-194). Madrid: Sntesis. observational designs applied to the environment-behavior relation.
Arnau, J. (1995d). Anlisis estadstico de datos para los diseos de sujeto Medio Ambiente y Comportamiento Humano, 4, 111-126.
nico. En M. T. Anguera, J. Arnau, M. Ato, R. Martnez-Arias, J. Pas- Bolger, N. & Laurenceau, J. P. (2013). Intensive longitudinal methods: An intro-
cual y G. Vallejo (Eds.) Mtodos de investigacin en psicologa (pp. 195-243). duction to diary and experience sampling research. New York, NY: The Guil-
Madrid: Sntesis. ford Press.
Arnau, J. (1995e). Diseos de investigacin longitudinal. En J. Arnau (Ed.), Bollen, K. A. (1989). Structural equations with latent variables. New York: Wiley.
Diseos longitudinales aplicados a las ciencias sociales y del comportamiento (pp. Bono, R. y Arnau, J. (1995). Consideraciones generales en torno a los estu-
35-53). Mxico: Limusa. dios de potencia. Anales de Psicologa, 11, 193-202.
Arnau, J. (1995f). Diseos longitudinales de un solo sujeto y una sola varia- Bono, R. y Arnau, J. (1996). Anlisis de la potencia del estadstico C median-
ble. En J. Arnau (Ed.), Diseos longitudinales aplicados a las ciencias sociales y te simulacin. Psicothema, 8, 699-708.
del comportamiento (pp. 79-141). Mxico: Limusa. Breiman, L., Friedman, J., Olshen, R. y Stone, C. (1984). Classification and re-
Arnau, J. (1995g). Diseo de medidas repetidas de un solo grupo de sujetos. gression trees. New York, NY: Wadsworth Publishing.
En J. Arnau (Ed.), Diseos longitudinales aplicados a las ciencias sociales y del Brewer, E. W., & Kuhn, J. (2010). Casual-comparative design. In N.J. Sal-
comportamiento (pp. 191-221). Mxico: Limusa. kind (Ed.), Encyclopedia of research design (pp. 124-131). Thousand Oaks,
Arnau, J. (1995h). Diseo de medidas repetidas II: diseos de dos grupos y CA: Sage Publication.
diseos de estructuras ms complejas. En J. Arnau (Ed.), Diseos longitu- Buelga, S., Cava, M. J. y Musitu, G. (2012). Reputacin social, ajuste psico-
dinales aplicados a las ciencias sociales y del comportamiento (pp. 223-253). social y victimizacin entre adolescentes en el contexto escolar. Anales
Mxico: Limusa. de Psicologa, 28, 180-187.
Arnau, J. y Balluerka, N. (2004). Anlisis de datos longitudinales y de curvas Byrne, D. W. (2000). Common reasons for reject manuscripts at medical
de crecimiento. Enfoque clsico y propuestas actuales. Psicothema, 16, journals: a survey of editors and peer reviewers. Science Editor, 23,39-44.
156-162. Cajal, B., Gervilla, E. y Palmer, A. (2012). When the mean fails, use an M-
Arnau J. y Bono, R. (2004). Evaluating effects in short-time series: alterna- estimator. Anales de Psicologa, 28, 281-288.
tive models of analysis. Perceptual and Motor Skills, 98, 419-432. Cohen, L., Manion, L., & Morrison, K. (2012). Research methods in Education
(6th Ed.). New York, NY: Routledge.

anales de psicologa, 2013, vol. 29, n 3 (octubre)


Un sistema de clasificacin de los diseos de investigacin en psicologa 1057

Cole, D.A. & Preacher, K.J. (2013). Manifest variable path analysis: poten- Hair, J. F., Hult, G. T. M., Ringle, C. M. & Sarstedt, M. (2013). A primer on
cially serious and misleading consequences due to uncorrected mea- partial least squares structural equation modeling (PLS-SEM). Thousand
surement error. Psychological Methods, 18. (Recuperado de Oaks, CA: Sage.
http://www.quantpsy.org/pubs/cole_preacher_%28in.press%29.pdf). Hancock, G. R., & Mueller, R. O. (Eds.) (2010). The Reviewers Guide to Quan-
Cook, T. D. y Campbell, D. T. (1979). Quasiexperimentation: Design and analysis titative Methods in the Social Sciences. New York, NY: Routledge.
issues for field settings. Chicago, IL: Rand-McNally. Hardin, J., & Hilbe, J. (2007). Generalized linear models and extensions (2nd Ed.).
Cuesta, M., Fonseca, E., Vallejo, G. y Muiz, J. (2013). Datos perdidos y College Station, TX: Stata Press.
propiedades psicomtricas en los test de personalidad. Anales de Psico- Harlow, L .L., Mulaik S. A., & Steiger, J. H. (1997). What to do if there were no
loga, 29, 285-292. significance tests? Mahwah, NJ: Erlbaum.
Cumming, G. (2012). Understanding the new statistics: effect sizes, confidence intervals Harris, A., Reeder, R., & Hyun, J. (2009a). Common statistical and research
and meta- analysis. New York, NY: Routledge. design problems in manuscripts summited to high-impact psychiatry
Cumming, G., Fidler, F., Leonard, M., Kalinowski, P., Christiansen, P., journals: what editors and reviewers want authors to know. Journal of
Kleinig, A., Lo, J., McMenamin, N., & Wilson, S. (2007). Statistical Psychiatric Research, 43, 1231-1234.
reform in psychology: is anything changing?. Psychological Science, 18, 230- Harris, A., Reeder, R., & Hyun, J. (2009b). Common statistical and research
232. design problems in manuscripts summited to high-impact public health
Dannels, SA. (2010). Research design. In G. R. Handcock & R. O. Mueller, journals. The Open Public Health Journal, 2, 44-48.
(Eds.), The reviewers guide to quantitative methods in the social sciences (pp. 343- Harris, A., Reeder, R., & Hyun, J. (2011). Survey of editors and reviewers of
355). New York, NY: Routledge. high-impact psychology journals: statistical and research design prob-
Davidov, E., Schmidt, P., & Billiet, J. (Eds.) (2011). Cross-cultural analysis: Me- lems in submitted manuscripts. The Journal of Psychology, 145, 195-209.
thods and applications. New York, NY: Routledge. Hoenig, J. M., & Heisey, D. M. (2001): The abuse of power: the pervasive
Dobson, A. J. (2002). Introduction to generalized linear models (2nd Ed.). Boca fallacy of power calculations in data analysis. The American Statistician,
Ratn, FL: Chapman & Hall. 55, 19-24.
Ellis, P. D. (2010). The essential guide to effect sizes: statistical power, meta-analysis Hox, J. (2010). Multilevel analysis: Techniques and applications. 2nd Edition.
and the interpretation of research results. Cambridge, UK: Cambridge Univer- Mahwah, NJ: Lawrence Erlbaum Associates.
sity Press. Hudson J. L, Pope H. G, Jr., & Glynn R. J. (2005). The cross-sectional co-
Ernster, V.L. (1994). Nested case-control studies. Preventive Medicine, 23, 587- hort study: an underutilized design. Epidemiology, 16, 355359.
590. Ivarsson, A., Andersen, M. B., Johnson, U., & Lindwall, M. (2013). To ad-
Esposito Vinzi, V., Chin, W. W., Henseler, J., & Sang, H. (Eds.) (2010). just or not adjust: nonparametric effect sizes, confidence intervals and
Handbook of partial least squares: Concepts, methods and applications. New real-world meaning. Psychology of Sport and Exercise, 14, 97-102.
York, NY: Springer. Jarde, A., Losilla, J. M. y Vives, J. (2012). Instrumentos de evaluacin de la
Farrant, R. H. (1977). Can after-the-fact designs test functional hypotheses, calidad metodolgica de estudios no experimentales: una revisin sis-
and are they needed in psychology? Canadian Psychological Review, 18, temtica. Anales de Psicologa, 28, 617-628.
359-364. Jimnez, M. G., Martnez, M. P., Mir, E. y Snchez, A. I. (2012). Relacin
Faul, F., Erdfelder, E., Lang, A. G., & Buchner, A. (2007). G*Power 3: A entre estrs percibido y estado de nimo negtivo: diferencias segn el
flexible statistical power analysis for the social, behavioral, and biomed- estilo de afrontamiento. Anales de Psicologa, 28, 28-36.
ical sciences. Behavior Research Methods, 39, 175-191. Johnson, B. (2001). Toward a new classification of nonexperimental quan-
Fernandes-Taylor, S., Hyun, J. K., Reeder, R. N., & Harris, A. (2011). titative research. Educational Researcher, 30, 3-13.
Common statistical and research design problems in manuscripts Jose, P. E. (2013). Doing statistical mediation and moderation. New York, NY:
submmited to high-impact medical journals. BMC Research Notes, 4, 304, The Guilford Press.
doi:10.1186/1756-0500-4-304 Judd, C., & Kenny, D. (1981). Estimating the effects of social interventions. Cam-
Fernndez-Alcntara, M., Garca-Caro, M. P., Prez-Marfil, N. y Cruz- bridge, MA: Cambridge University Press.
Quintana, F. (2013). Experiencias y obstculos de los psiclogos en el Kelley, K., & Preacher, J. (2012). On effect size. Psychological Methods, 17,
acompaamiento de los procesos de fin de vida. Anales de Psicologa, 29, 137-152.
1-8. Kennedy, C.H. (2005). Single-case designs for educational research. Boston, MA:
Fitzmaurice, G., Laird, N., & Ware, J. (2009). Applied longitudinal analysis. Allyn and Bacon.
New York, NY: Wiley. Kirk, R. E. (2005). The importance of effect magnitude. En S.F. Davis
Fras, M. D, Pascual, J. y Garca, J. F. (2000). Tamao del efecto de trata- (Ed.), Handbook of research methods in Experimental Psychology (pp. 83-105).
miento y significacin estadstica. Psicothema, 12, sup.2, 236-240. Oxford, UK: Blackwell.
Garca, J. F., Fras, M. D. y Pascual, J. (1999). Potencia estadstica del diseo Kirk, R.E. (2013). Experimental design: procedures for the behavioral sciences (3rd
de Solomon. Psicothema, 11, 431-436. Ed.). New York, NY: Wadsworth publishing.
Gartzia, L., Aritzeta, A., Balluerka, N. y Barber, E. (2012). Inteligencia Kish, L. (1987). Statistical design for research. New York, NY: Wiley.
emocional y gnero: ms all de las diferencias sexuales. Anales de Psico- Kline, R. B. (2004). Beyond significance testing: Reforming data analysis methods in
loga, 28, 567-575. behavioral research. Washington, DC: American Psychological Associa-
Gay, L. R., Mills, G. E., & Airasian, P. W. (2012). Educational research: compe- tion.
tencies for analysis and applications (10th Ed.). NJ: Pearson. Kline, R. B. (2009). Become a behavioral science researcher. A guide to producing re-
Gennetian L. A., Magnuson, K., & Morris P. A. (2008) From statistical as- search that matters. New York, NY: The Guilfond Press.
sociation to causation: What developmentalists can learn from instru- Kline, R. B. (2011). Principles and practice of structural equation modeling (3rd Ed.).
mental variables techniques coupled with experimental data. Developmen- New York, NY: The Guilford Press.
tal Psychology, 44, 381-384. Knapp, T. R., & Mueller, R. O. (2010). Realibility and validity of instru-
Gliner, J. A., Leech, N. L., & Morgan, G. A. (2002). Problems with null hy- ments. In G. R. Hancock & R. O. Mueller (Eds.), The reviewer guide to
pothesis significance testing (NHST): what do the textbooks say? The quantitative methods in the social sciences (pp. 337-341). New York, NY:
Journal of Experimental Education, 7, 83-92. Routledge.
Gmez, J. (2005). Anlisis de datos de medidas repetidas mediante modelos Kraemer, H., & Thiemann, S. (1987). How many subjects? Statistical power analy-
de ecuaciones estructurales. En J. Arnau (Ed.), Diseos longitudinales apli- sis in research. Newbury Park, CA: Sage Publications.
cados a las ciencias sociales y del comportamiento (pp. 255-304). Mxico: Limu- Lavrakas, P. J. (Ed.) (2008). Encyclopedia of survey research methods. Thousand
sa. Oaks, CA: Sage Publications.
Graham, J. W. (2012). Missing data: Analysis and design. New York, NY: Lenth, R. V. (2001). Some practical guidelines for effective sample size de-
Springer. termination. American Psychologist, 55, 187-193.
Grissom, R. J., & Kim, J. J. (2012). Effect sizes for research: A broad practical ap-
proach, (2nd Ed.). Mahwah, NJ: Lawrence Erlbaum Associates.

anales de psicologa, 2013, vol. 29, n 3 (octubre)


1058 Manuel Ato et al.

Lenth, R. V. (2007). Post hoc power: tables and commentary (Technical Report n Mindick, B., & Oskamp, S. (1979). Longitudinal predictive research: an ap-
378). The University of Iowa: Department of Statistics and Actuarial proach to methodological problems in studying contraception. Journal of
Science. Population, 2, 259-264.
Levin, J. R., & Robinson, D. H. (2000). Statistical hypothesis testing, effect- Montero, I. y Len, O.G. (2007). A guide for naming research studies in
size estimation, and the conclusion coherence of primary research stu- psychology. International Journal of Clinical and Health Psychology, 7, 847-
dies. Educational Researcher, 29, 3436. 862.
Levine, M., & Ensom, M. H. (2001). Post hoc power analysis: an idea Muiz, J., Elosua, P. y Hambleton, R. K. (2013). Directrices para la traduc-
whose time has passed?. Pharmacotherapy, 21, 405-409. cin y adaptacin de los tests: segunda edicin. Psicothema, 25, 151-157.
Levy, J. P. y Varela, J. (Eds.) (2003). Anlisis multivariable para las Ciencias So- Nez, J. C., Vallejo. G., Rosrio, P., Tuero, E. y Valle, A. (en prensa). Va-
ciales. Madrid: Pearson Educacin, S.A. riables del estudiante, del profesor y del contexto en la prediccin del
Levy, J. P. y Varela, J. (Eds.) (2006). Modelizacin con estructuras de covarianzas rendimiento acadmico en Biologa: anlisis desde una perspectiva mul-
en Ciencias Sociales. La Corua: Netbiblo, S.L. tinivel. Revista de Psicodidctica, 19. Recuperado de
Light, R. J., Singer, J. D., & Willett, J. B. (1990). By design: Planning research on http://www.ehu.es/ojs/index.php/psicodidactica/article/view/7127.
higher education. Cambridge, MA: Harvard University Press. Onwuegbuzie, A.J., & Leech, N.L. (2004). Post hoc power: a concept whose
Little, T. D. (Ed.) (2013a). The Oxford Handbook of quantitative methods. New time has come. Understanding Statistics, 3, 201-230.
York, NY: Oxford University Press USA. Orgils, M., Mndez, F. X., Rosa, A. I. e Ingls, C. (2003). La terapia cogni-
Little, T. D. (2013b). Longitudinal structural equation modeling. New York, NY: tivo-conductual en problemas de ansiedad generalizada y ansiedad por
The Guilford Press. separacin: un anlisis de su eficacia. Anales de Psicologa, 19, 193-204.
Losilla, J. M., Navarro, B., Palmer, A., Rodrigo, M. F. y Ato, M. (2005). Del Pagn, A., Marn, J. y Perea, M. (2012). El papel de la slaba en la codifica-
contraste de hiptesis al modelado estadstico. Girona: Documenta Universita- cin posicional de las representaciones ortogrficas. Anales de Psicologa,
ria - EAP, S.L. 28, 954-962.
Loy, C., Goh, T. & Xie, M. (2002). Retrospective factorial fitting and re- Pardo, A. y Ferrer, R. (2013). Significacin clnica: falsos positivos en la es-
verse design of experiments. Total Quality Management, 13, 589-602. timacin del cambio individual. Anales de Psicologa, 29, 301-310.
Luellen, J. K., Shadish, W. R. & Clark, M. H. (2005). Propensity scores: an Pardo, A., Garrido, J., Ruiz, M. A. y San Martn, R. (2008). La interaccin
introduction and experimental test. Evaluation Review, 29, 530-538. entre factores en el anlisis de varianza: errores de interpretacin. Psicot-
Mann, C. J. (2003). Observational research methods. Research design II: hema, 19, 343-349.
cohort, cross-sectional and case-control studies. Emergency Medical Jour- Pascual, J., Fras, M. D. y Garca, J. F. (2004). Usos y abusos de la significa-
nal, 20, 54-60. cin estadstica (NHST): propuestas de futuro (Necesidad de nuevas
Marshall, C. & Rossman, G. B. (2006). Designing qualitative research (4th Ed.). normativas editoriales?). Metodologa de las Ciencias del Comportamiento,
Thousand Oaks, CA: Sage. nmero especial, 465-469.
Martnez-Arias, M. R. (1983). Mtodos de investigacin en psicologa evolu- Payne, R. W., Harding, D. A., Murray, D. M. et al. (2009). A guide to Anova
tiva. En A. Marchesi, M. Carretero y J. Palacios (Eds.), Psicologa evolutiva and Design in Genstat release 12. H.Hempsted, UK: VSN International.
I: Teora y mtodos (pp. 323-372). Madrid: Alianza Universidad. Pearl, J. (2009). Causality: models, reasoning and inference. (2nd Ed.). Cambridge,
Martnez-Arias, M. R. (1995a). El mtodo de las encuestas por muestreo: MA: Cambridge University Press.
conceptos bsicos. En M. T. Anguera, J. Arnau, M. Ato, R. Martnez, J. Pedhazur, E. J., & Smelkin, L. P. (1991). Measurement, Design and Analysis: an
Pascual y G. Vallejo (Eds.), Mtodos de investigacin en Psicologa (pp. 385- integrated approach. Hillsdale, NJ: Lawrence Erlbaum Associates.
421). Madrid: Sntesis. Peng, C-Y., Chen, L-T., Chiang, H-M., & Chiang, Y-C. (2013). The impact
Martnez-Arias, R. (1995b). Diseos muestrales probabilsticos. En M. T. of APA and AERA guidelines on effect size reporting. Educational Psy-
Anguera, J. Arnau, M. Ato, R. Martnez, J. Pascual y G. Vallejo (Eds.), chological Review, 25, 157-209.
Mtodos de investigacin en Psicologa (pp. 433-484). Madrid: Sntesis. Pierce, C. A., Block, R. A. & Aguinis, H. (2004). Cautionary note on report-
Martnez-Arias, R. (1995c). Las decisiones posteriores al muestreo. En M. T. ing eta-squared values from multifactor ANOVA. Educational and Psycho-
Anguera, J. Arnau, M. Ato, R. Martnez, J. Pascual y G. Vallejo (Eds.), logical Measurement, 64, 915-923.
Mtodos de investigacin en Psicologa (pp. 485-510). Madrid: Sntesis. Planes, M., Prat, F. X., Gmez, A. B., Gras, M. E. y Font-Mayolas, S.
Martnez-Arias, R. (1995d). Psicometra: teora de los tests psicolgicos y educativos. (2012). Ventajas e inconvenientes del uso del preservativo con una pa-
Madrid: Sntesis. reja afectiva heterosexual. Anales de Psicologa, 28, 161-170.
Martnez-Arias, R., Hernndez, M. V. y Hernndez-Lloreda, M. J. (2006). Pons, R. M., Gonzlez, M. E. y Serrano, J. M. (2008). Aprendizaje coopera-
Psicometra. Madrid: Alianza Universidad. tivo en matemticas: un estudio intracontenido. Anales de Psicologa, 24,
Matsumoto, D. & van de Vijver, F. J. R. (Eds.) (2011). Cross-cultural research 253-261.
methods in psychology. New York, NY: Cambridge University Press. Preacher, K. J., Wichman, A. L., McCallum, R. C., & Briggs, N. E. (2008).
Maxwell, S. E. & Delaney, H. D. (2004). Designing experiments and analyzing da- Latent growth curve modeling. Quantitative Applications in the social
ta: a model comparison perspective. (2nd Ed.). New York, NY: Psychology sciences, 157. Thousand Oaks, CA: Sage.
Press. Quen, H., & Van Den Bergh, H. (2004). On multi-level modeling of data
Maxwell, S. E., Kelley, K., & Rausch, J. R. (2008). Sample size planning for from repeated measured designs: a tutorial. Speech Communication, 43,
statistical power and acuracy in parameter estimation. American Review of 103-121.
Psychology, 59, 537-563. Rabadn, R. y Ato, M. (2003). Tcnicas cualitativas para investigacin de mercados.
McConway, K .J., Jones, M. C., & Taylor, P. C (1999). Statistical modeling using Madrid: Pirmide.
Genstat. Oxford, UK: Oxford University Press. Ramos, M. y Catena, A. (2004). Normas para la elaboracin y revisin de
Menard, S. (2008). Separating age, period, and cohort effect in developmen- artculos originales experimentales en Ciencias del Comportamiento. In-
tal and historical research. In S. Menard (Ed.), Handbook of longitudinal re- ternational Journal of Clinical and Health Psychology, 4, 173-189.
search: design, measurement, analysis (pp. 219-232). San Diego, CA: Aca- Richardson, J. T. E. (2011). Eta squared and partial eta squared as measures
demic Press. of effect size in educational research. Educational Research Review, 6, 135-
Meyer, D. L. (1991). Misinterpretation of interacton effects: A reply to Ros- 147.
now and Rosenthal. Psychological Bulletin, 110, 571-573. Ros, M. I., Godoy, C. y Snchez, J. (2011). Sndrome de quemarse por el
Miller, G. A., & Chapman, J. P. (2001). Misunderstanding analysis of cova- trabajo, personalidad resistente y malestar psicolgico en personal de
riance. Journal of Abnormal Psychology, 110, 40-48. enfermera. Anales de Psicologa, 27, 71-79.
Milliken G.A., & Johnson, D. E. (2002). Analysis of messy data: Analysis of cova- Rodrigo, M. F., Molina, J. G., Garca-Ros R. y Prez-Gonzlez, F. (2012).
riance. New York, NY: Van Nostrand. Efectos de interaccin en la prediccin del abandono en los estudios de
Milliken G. A., & Johnson, D. E. (2009). Analysis of messy data: Designed expe- Psicologa. Anales de Psicologa, 28, 113-119.
riments (2nd Ed.). New York, NY: Van Nostrand.

anales de psicologa, 2013, vol. 29, n 3 (octubre)


Un sistema de clasificacin de los diseos de investigacin en psicologa 1059

Rosa, A. I., Iniesta, M. y Rosa, A. (2012). Eficacia de los tratamientos cogni- Stuart, E. A., & Rubin, D. B. (2008). Best practices in quasi-experimental
tivo-conductuales en el trastorno obsesivo-compulsivo en nios y ado- designs: matching methods for causal inference. In Osborne, J. (Ed.),
lescentes: una revisin cualitativa. Anales de Psicologa, 28, 313-326. Best practices in quantitative methods (p. 155-176). Thousand Oaks, CA:
Rosa, A. I., Olivares, J. y Snchez, J. (1999). Meta-anlisis de las interven- Sage.
ciones conductuales de la enuresis en Espaa. Anales de Psicologa, 15, Suchman, E. A. (1967). Evaluative research: principles and practices in public service
157-167. and social action programs. New York, NY: Russell Sage.
Rosario, P., Loureno, A., Paiva, M. O., Nez, J. C., Gonzlez-Pienda, J. Sun, S., Pan, W. & Wang, L. (2010). A comprehensive review of effect size
A. y Valle, A. (2012). Autoeficacia y utilidad percibida como condicio- reporting and interpreting practices in academic journals in Education
nes necesarias para un aprendizaje acadmico autorregulado. Anales de and Psychology. Journal of Educational Psychology, 102, 989-1004.
Psicologa, 28, 37-44. Taris, T. W. (2000). A primer in longitudinal data analysis. Newbury Park, CA:
Rosel, J. (1995). Problemas metodolgicos de muestreo en los diseos longi- Sage.
tudinales. En J. Arnau (Ed.), Diseos longitudinales aplicados a las ciencias so- Thompson, B. (1995). Stepwise regression and stepwise discriminant analy-
ciales y del comportamiento (pp. 55-75). Mxico: Limusa. sis need not apply here: a guidelines editorial. Educational and Psychological
Rosnow, R. L., & Rosenthal, R. (2009). Effect sizes: why, when and how to Measurement, 55, 525-534.
use them. Zeirschrift fr Psychologie, 217, 6-14. Thompson, B. (2001). Significance, effect sizes, stepwise methods and other
Sakett, G. P. (Ed.) (1978). Observing behavior (Vol II: Data collection and analysis issues: strong arguments move the field. Journal of Experimental Educa-
methods). Baltimore: University Park Press. tion, 70, 80-93.
Salkind, N. J. (Ed.) (2010). Encyclopedia of Research Design. Thousand Oaks, Thompson, B. (2002a). Statistical, practical, and clinical: How many
CA: Sage. kinds of significance do counselors need to consider? Journal of Counsel-
Snchez, V., Ortega, R. y Menesini, E. (2012). La competencia emocional de ing and Development, 80, 64-71.
agresores y vctimas de bullying. Anales de Psicologa, 28, 71-82. Thompson, B. (2002b). What future quantitative social science research
Snchez-Meca, J. y Marn-Martnez, F. (2010). Meta-analysis in psychologi- could look like: confidence intervals for effect sizes. Educational Re-
cal research. International Journal of Psychological Research, 3, 151-163. searcher, 31, 24.31.
Snchez-Meca, J., Rosa, A. I. y Olivares, J. (2004). El tratamiento de la fobia Thompson, B. (2007). Effect sizes, confidence intervals, and confidence in-
social especfica y generalizada en Europa: un estudio meta-analtico. tervals for effect sizes. Psychology in the Schools, 44, 423-432.
Anales de Psicologa, 20, 55-68. Vallejo, G. (1995a). Diseos de series temporales interrumpidas. En M. T.
Schaie, K. W., & Caskie, G. I. L. (2006). Methodological issues in aging re- Anguera, J. Arnau, M. Ato, R. Martnez, J. Pascual y G. Vallejo (Eds.),
search. In D.M. Teti (Ed.), Handbook of Research Methods in Developmental Mtodos de investigacin en Psicologa (pp. 321-334). Madrid: Sntesis.
Science (pp. 21-39). Oxford, UK: Blackwell Publishing. Vallejo, G. (1995b). Anlisis de los diseos de series temporales interrumpi-
Schaie, K. W. (1965). A general model for the study of developmental prob- das. En M. T. Anguera, J. Arnau, M. Ato, R. Martnez, J. Pascual y G.
lems. Psychological Bulletin, 64, 9-107. Vallejo (Eds.), Mtodos de investigacin en Psicologa (pp. 335-352). Madrid:
Schaie, K. W. (1994). Developmental designs revisited. In S. H. Cohen & H. Sntesis.
W. Reese (Eds.), Life-span developmental psychology (pp.45-64). Hillsdale,NJ: Vallejo, G. y Fernndez, P. (1995). Diseo de medidas parcialmente repeti-
Erlbaum. das con ausencia de independencia en los errores. En J. Arnau (Ed.),
Schmidt, F. (1996). Statistical significance testing and cumulative knowledge Diseos longitudinales aplicados a las ciencias sociales y del comportamiento (pp.
in psychology: implications for the training of researchers. Psychological 223-253). Mxico: Limusa.
Methods, 1, 115-129. Vallejo, G., Ato, M., Fernndez, P., & Livacic-Rojas, P. E., (en prensa). Mul-
Schmidt, K., & Teti, D. M. (2006). Issues in the use of longitudinal and tilevel bootstrap analysis with assumptions violated. Psicothema, 25.
cross-sectional designs. In D.M. Teti (Ed.), Handbook of Research Methods Vallejo, G., Arnau, J., Bono, R., Cuesta, M., Fernndez, P. y Herrero, J.
in Developmental Science (pp. 3-20). Oxford, UK: Blackwell Publishing. (2002). Anlisis de diseos transversales de series temporales cortas
Shadish, W. & Clark, M. H. (2004). An introduction to propensity scores. mediante procedimientos paramtricos y no paramtricos. Metodologa de
Metodologa de las Ciencias del Comportamiento, 4, 291-300. las Ciencias del Comportamiento, 4, 301-323.
Shadish, W., Cook, T. D., & Campbell, D. T. (2002). Experimental and quasi- Vandenbroucke, J. P., von Elm, E., Altman, D. G., Gotzshe, P. C., Mulrow,
experimental designs for generalized causal inference. Boston, MA: Houghton C. D., Pocock, S. J., Poole, C., Schlesselman, J. J. & Egger, M. (2007),
Mifflin Company. Strengthening the reporting of observational studies in epidemiology
Shaughnessy, J., Zechmeister, E., & Zechmeister, J. (2012). Research methods (STROBE): explanation and elaboration. Epidemiology, 18, 805-835.
in psychology (9th Ed.). New York, NY: McGraw-Hill. Vega, J. L. (1983). Metodologa longitudinal. En A. Marchesi, M. Carretero y
Sicilia, A., Aguila, C., Muyor, J.M., Orta, A. y Moreno, J.A. (2009). Perfiles J. Palacios (Eds.), Psicologa evolutiva: Teora y mtodos (pp. 323-372). Ma-
motivacionales de los usuarios en centros deportivos municipales. drid: Alianza Universidad.
Anales de Psicologa, 25, 160-168. Vlez, M., Egurrola, J. y Barragn, F.J. (2013). Ronda clnica y epidemiolgi-
Sidman, M. (1960). Tactics of scientific research: Evaluating experimental data in psy- ca: uso de la puntuacin de propensin (propensity score) en estudios
chology. Boston, MA: Authors Cooperative Inc. no experimentales. Iatreia, 26, 95-101.
Singer, J. D., & Willett, J. B. (2003). Applied longitudinal data analysis: modeling Whitman, C., Van Rooy, D.L., Viswesvaran, C., & Alonso, A. (2008). The
change and event occurrence. New York, NY: Oxford University Press. susceptibility of a mixed model measure of emotional intelligence to
Snijders, T. A. B., & Bosker, R. J. (2011). Multilevel analysis. An introduction to faking: a Solomon four-group design. Psychology Science Quarterly, 40, 44-
basic and advanced multilevel modeling (2nd Ed.). Newbury Park, CA: Sage. 63.
Snyder, P. (1991). Three reasons why stepwise regression methods should Wilkinson, L. and the Task Force on Statistical Inference (1999). Statistical
no be used by researchers. En B. Thompson (Ed.), Advances in social methods in psychology journals: guidelines and explanations. American
science methodology (Vol.1, pp. 99-105). Greenwich, CT: JAI Press. Psychologist, 54, 594-604.
Stefani, D. y Feldberg, C. (2006). Estrs y estilos de afrontamiento en la ve- Woodside, A. G. (2010). Case study research: theory, methods and practice. Bingley,
jez: un estudio comparativo en senescentes argentinos institucionaliza- UK: Emerald.
dos y no institucionalizados. Anales de Psicologa, 22, 267-272.
Strauss, A., & Corbin, J. (1990). Basics of qualitative research: grounded theory pro- (Artculo recibido: 3-6-2013; revisado: 3-7-2013; aceptado: 4-7-2013)
cedures and techniques. Newbury Park, CA: Sage.

anales de psicologa, 2013, vol. 29, n 3 (octubre)