Está en la página 1de 63

Técnicas y construcción de instrumentos

de recolección de datos.

Validez del instrumento. Validez de juicio


de expertos, validez de contenidos.
Sesión 3

Mg.
@ucvvirtual.edu.pe
Motivación
Analizamos las siguientes situaciones:

Situación A Situación B Situación C Situación D


DÍA EL
Objetivo

Conocer si los trabajadores Analizar el perfil clínico y Conocer el perfil de un


Determinar las condiciones
en construcción usan los epidemiológico de candidato según su
de vida de las familias,
equipos de protección y pacientes hospitalizados en experiencia, formación y
integrantes en hogar,
seguridad durante la una clínica local durante el motivación a un puesto
servicios básicos.
jornada laboral periodo 2010 - 2020 laboral

¿Qué técnica de recolección de datos usarías en cada situación?


Participa en el chat de forma ordenada o usa la opción levantar mano de zoom para intervenir.
EVIDENCIAS DE APRENDIZAJE

• Al finalizar la sesión, el estudiante


aprende a elaborar un instrumento
de recolección de datos adecuado.
Introducción

https://www.youtube.com/watch?v=1gM3QPRTbFQ
Técnicas e instrumentos de
recolección
Técnicas de recolección:
Estrategias que sigue el investigador
para recolectar información.

Instrumentos de recolección:
Medio físico o virtual que utiliza el
investigador para registrar la
información obtenida.
Técnicas e instrumentos de recolección
TÉCNICA INSTRUMENTO

1 ENCUESTA CUESTIONARIO

GUÍA DE ENTREVISTA o CUESTIONARIO NO


2 ENTREVISTA
ESTRUCTURADO

3 ANÁLISIS DOCUMENTAL FICHA DE REGISTRO DE DATOS

4 OBSERVACIÓN
- EXPERIMENTAL HOJA O FICHA DE REGISTRO DE DATOS

- NO EXPERIMETAL GUIA DE OBSERVACION


1 Encuest
avarias personas, cuyas opiniones interpersonales interesan al
Es una técnica destinada a obtener datos de
investigador.
Instrumento: cuestionario. Es un conjunto de preguntas que miden una o más variables, para ser tabuladas.

Muestra: Debe ser representativa del Universo


Características
Es estructurada y sistematizada

Preguntas: Es la forma interrogativa del indicador. El cual se obtiene de la Operacionalización de Variables. Es el


dato más empírico de este proceso.
•Las primeras Preguntas: se las considera socialmente básicas. Como introducción en el tema.
•Preguntas de control: Corroboran la información.
•Categorías: Todas las respuestas deben ser exhaustivas y mutuamente excluyentes. No deben solaparse las
respuestas.
Encuesta
Rol del Encuestador: Cualquiera puede suministrar la técnica

Pre-Test: sirve para corroborar y verificar el método de Recolección de datos, que se va


a utilizar, antes del suministro de la técnica para garantizar su confiabilidad y validez.

Ventajas Desventajas
•Se puede suministrar a todo tipo de
población. •No hay posibilidades de re-preguntas.
•No se entrena al personal que suministra la •No existe el cara a cara.
encuesta.
•Puede enviarse por correo, vía e-mail
•Puede aplicarse a mayor cantidad de
Unidades de Análisis
Anonimato

https://www.youtube.com/watch?v=2kecjMkMzzc
Instrumento: Cuestionario

https://www.youtube.com/watch?v=W8loPmJu1Vs
ESCALA DE LIKERT
(Creador:Rensis Likert)

La escala de Likert se clasifica dentro de las escalas llamadas sumativas, ya que el puntaje que arroja se
obtienen sumando los puntajes de las respuestas a las distintas preguntas o estímulos.
Para construir una escala Likert hay que realizar el siguiente procedimiento: 
. Definición conceptual de la actitud que se va a medir, de acuerdo a cierto contexto teórico.
. Recopilación de ítems o indicadores de la variable (operacionalización). La posibilidad de las
respuestas (valores de la variable) se presentan en forma de alternativas, como por ejemplo:

Muy de De Indiferente En Muy en


acuerdo acuerdo desacuerd desacuerd
o o
1 2 3 4 5

De acuerdo, En
Lista de No
desacuerdo cotejo

Bueno
Escala Para Escala de Regular
investigar
Guttman actitudes estimación Malo

Para estudiar
ansiedad,
depresión
Totalmente de acuerdo,
Escala De acuerdo,
Escala Likert Ni de acuerdo ni en
Golbert desacuerdo,
Totalmente en desacuerdo

Moderadamente,
Bastante, Mucho, Muchísimo,
Otras escalas
No, Un poco
REDACCIÓN DE ITEMS

1.- NORMAS: En forma de opiniones (actitud verbalizada), con las que se puede estar o no
de acuerdo, o de conductas o rasgos personales y nunca hechos objetivos.

2.- ITEMS FAVORABLES Y DESFAVORABLES: ITEM + : Estar de acuerdo muestra actitud


favorable. “ESTUDIAR ES DIVERTIDO”.
ITEMS - : Estar de acuerdo manifiesta actitud desfavorable. “ ESTUDIAR ES ABURRIDO”.

3.- ORDEN DE ITEMS: Pueden presentarse por “dimensiones”, pero siempre en el mismo
orden.

4.- NÚMERO DE ITEMS: No hay número óptimo, pero a mayor número de items “buenos”,
mayor fiabilidad.
Ejemplo 2:

TOTALMENTE EN TOTALMENTE DE
ITEMS EN DESACUERDO INDIFERENTE DE ACUERDO
DESACUERDO ACUERDO

Siento que soy


una persona 1 2 3 4 5
digna

Pienso que soy un


inútil. 5 4 3 2 1
2 Entrevist
a
Es la comunicación interpersonal establecida entre el investigador y el sujeto de
estudio, con el fin de obtener información o respuestas verbales a los interrogantes
planteados sobre un problema determinado.
Diálogo entre dos personas (entrevistador - entrevistado)
Se utiliza en la metodología cualitativa

Instrumento: Guía de preguntas (abiertas o semi-estructuradas)

Rol del Entrevistador: Establecer un vínculo, focalizar la charla, dejar hablar, guia para
no perder el objetivo, evitar el riesgo de las sanciones sociales a las posibles
respuestas
Entrevist
a
Cara a cara
Flexible
Características Abierta

Aplicable a toda clase de sujetos, en diferentes situaciones


Posibilidad de profundizar en temas de interés
Orienta hipótesis
Se utiliza cuando la población es pequeña.
Ventajas
Mayor costo.
Cuando se considera necesario que haya diálogo
Posibilidad de preguntar y re-preguntar..

Requiere más tiempo


Desventajas Requiere habilidad técnica para obtener información y
conocimiento del problema
LA ENTREVISTA- GUÍON
3
Análisis
documental
Es la recopilación de datos mediante el análisis de
documentos o fuentes secundarias. Según Castro (2010), es
el hecho de trabajar materiales ya elaborados de tipos
secundarios determinan lógicamente las principales ventajas
e inconvenientes. Complementará el estudio de a través de la
utilización de fuentes primarias y secundarias como textos,
trabajos de grado pertinentes al estudio, manuales, folletos,
revistas, historias clínicas, expedientes, libros contables,
internet entre otros recursos.
4
Observació
n
⮚ Permite obtener información sobre un fenómeno o acontecimiento tal y como éste se produce
⮚ Registro visual de una situación real.
⮚ Se utiliza en ambos modos de abordajes (cuantitativo – cualitativo)

• Campo
• Laboratorio
Modalidades • Individual
• Equipos
• Otras ...

•Determinar el objeto, situación o caso que se va a


Pasos a seguir observar.
•Determinar los objetivos.
•Determinar la forma de registrar los datos
•Observar cuidadosamente
•Registrar los datos observados

Rol del observador Participante / (-) participante / No


Directa – Indirecta
participante
OBSERVACIÓN : Lista de cotejo
Su formato puede variar de acuerdo a la naturaleza del estudio, pero
fundamentalmente se incluye fecha, registros de las observaciones y
comentarios del observador

EJEMPLO: Sirve para anotar acontecimientos diarios que el investigador observa en el espacio.
Tutorial: Crear formularios virtuales de Google

https://www.youtube.com/watch?v=PrnH8qLuf1Y
Trabajo de aplicación grupal
• Reunirse en grupo y elaborar su
instrumento de recolección de datos para
su investigación propuesta y exponerla en
clase.
Tener en cuenta los objetivos de investigación
propuestos y los instrumentos elaborados en sus
antecedentes revisados en la sesión de aprendizaje
anterior.
Autoevaluación: Analizo mi aprendizaje
Respondemos en el chat o activando su audio las siguientes interrogantes:

• ¿Crees que es importante saber elegir una técnica de recolección específica para recolectar
la información?
SÍ ( ) NO( )
• ¿Es importante la confidencialidad de la información?
SÍ ( ) NO( )
• ¿Qué técnicas de recolección de datos aprendiste?
…………………………………………………………
• ¿Qué instrumentos de recolección de datos aprendiste?
…………………………………………………………
• ¿Qué características debe tener todo instrumento de recolección de datos?
…………………………… y ..……………………………
Validez del instrumento. Validez de juicio de
expertos, validez de contenidos.
Imagina que deseas evaluar la temperatura y el TERMÓMETRO que vas a usar esta descalibrado

No Importa:

▪ Si el proyecto de investigación es perfecto


▪ Si la muestra y muestreo es adecuado
▪ Si usas las pruebas estadística mas potentes y
complejas.
▪ Simplemente tus resultados no sirven.

Por lo tanto los resultados y las conclusiones obtenidas


en la investigación no sirven.
VALIDEZ

Longitud Peso Tiempo Psicoeducativas

Es necesario probar empíricamente


que el instrumento es VÁLIDO en
todos los casos

¿Qué características deseamos que


prediga? CRITERIO

La exactitud con que pueden hacerse Ausencia se sesgos. Representa Grado en que un instrumento
mediciones significativas y adecuadas con la relación entre lo que se mide y realmente mide la variable
un instrumento, en el sentido que mide aquello que realmente se quiere que pretende medir
realmente el rasgo que pretende medir medir (Palella y Martins; 2006) (Hernández, Fernandez y
(Ruiz; 2003) Baptista; 1998)
¿ QUÉ ES MEDIR ?

Medir es parte de nuestro vivir, Bostwick (2005).

Medir es “asignar números símbolos o


valores a las propiedades de objetos de
acuerdo a ciertas reglas” Stevens (1951)

Actualmente se concibe a la medición como al “proceso de vincular


conceptos abstractos con indicadores empíricos” Carmines (1991).
¿Y qué es un instrumento de medición?
Es el documento que se utiliza para registrar la información que se quiere
obtener.

El instrumento debe demostrar ser confiable y válido a la vez


(Hernández Sampieri)
CONFIABILIDAD

Ejm: Si se midiera en este momento la


Grado en que un instrumento produce resultados temperatura ambiental usando un
consistentes y coherentes. Es decir en que su termómetro y este indicara que hay 22 ° C,
aplicación repetida al mismo sujeto u objeto un minuto mas tarde 5 ° C, tres minutos
produce resultados iguales. Kerlinger (2002). después 40 ° C; dicho termómetro no sería
confiable.

RANGOS MAGNITUD
Grado en que un instrumento 0,81 A 1,00 Muy Alta
produce resultados 0,61 A 0,80 Alta
consistentes y coherentes 0,41 A 0,60 Moderada
0,21 A 0,40 Baja
Hernández Sampieri 0,01 A 0,20 Muy Baja

Importante: se sugiere repetir la validación del instrumento puesto que es recomendable que el
resultado sea mayor o igual a 0,81
FUENTE: RUIZ (2002).
CONFIABILIDAD

Se refiere al grado en que su aplicación de un instrumento repetida al


mismo sujeto produce iguales resultados” Hernández, Fernández y
Bastita (1998) “(p.21)

Se refiere a la consistencia de los resultados. En el análisis de la


confiabilidad se busca que los resultados de un cuestionario concuerden
con los resultados del cuestionario en otra ocasión. Menéndez (2009)

Se refiere al grado en que su aplicación repetida al mismo sujeto u objeto


produce iguales resultados. Silva (2009)

Estabilidad y Consistencia
Reproducibilidad Seguridad Precisión Interna u
Predictibilidad Homogeneidad
Métodos

Método: TEST – RETEST


Características:
El investigador debe aplicar el mismo instrumento dos veces al
mismo grupo después de cierto período.

aplicación definitiva del mismo.


Coeficiente de Correlación de Pearson altamente positivo
= Instrumento confiable.
Debilidades:
El periodo de tiempo (corto – largo) entre las mediciones puede
confundir el coeficiente de confiabilidad.
Métodos
Método: FORMAS EQUIVALENTES
Características:
Métodos
Técnica: Alfa de Cronbach
Características:
Requiere sólo una aplicación del instrumento de medición. Produce valores
que oscilan entre cero (0) y uno (1).
No es necesario dividir en mitades los ítems del instrumento. Se aplica la
medición y se calcula el coeficiente.

Técnica: Kuder – Richardson KR - 20


Permite calcular la confiabilidad con una sola aplicación del instrumento.
No requiere el diseño de pruebas paralelas.
Es aplicable sólo en instrumentos con ítems dicotómicos, que puedan ser
codificados con 1–0 (correcto–incorrecto, presente – ausente, a favor – en
contra, etc.) .
Métodos
CONFIABILIDAD DIVISIÓN DE DOS
MITADES
Spearman- Brown

Pasos:
1.Dividir los itemes de la prueba en dos partes iguales.
2.Correlacionar las puntuaciones totales de las dos mitades.
3.Multiplicar el coeficiente obtenido por 2 y dividir el término 1 más
la correlación de las dos mitades, como se expresa en la fórmula
que aparece en la siguiente lamina:
Métodos
CONFIABILIDAD DIVISIÓN DE DOS
MITADES
Spearman- Brown

FÓRMULA:

rtt= coeficiente de confiabilidad de las mitades.


rhh= correlación de Spearman entre las dos mitades
o los puntajes pares e impares.
Métodos
CONFIABILIDAD DIVISIÓN DE DOS MITADES
Guttman y Flanagan (1939)

FÓRMULA:

rtt= coeficiente de confiabilidad


Sd2= varianzade la diferencia de puntajes pares e impares.
St2= Varianza total de la prueba o escala.
Métodos
CONFIABILIDAD DIVISIÓN DE DOS
MITADES
Guttman y Flanagan (1939)

Alumnos I1 I2 I3 I4 I5 I6 I7 I8 I9 I10 IMPAR PAR TOTAL


1 2 1,75 1 0 1 0,75 1,75 1 0 0 5,75 3,5 9,25
2 0 2 1 1 1 1 0,75 0 1 0
3 1 0,75 1 0,75 1 1 2 1 0 2
4 1 1 1 1 1 0,75 1 1 1 1
5 1 1 1 0 0,75 0 0 1 1 0
6 1 1 0 1 0,75 0 1 0 0 0
7 0 0 0 0 0,75 0 1,75 0 1 1
8 1 1 1 1 1 1 1 1,75 1 1
9 0 1 0 1 0 1 1 0 1 0
10 1 1 1 1 1 0 1 0 1 0
Media
IMPARES: 1+3+5+7+9
Varianza
PARES:2+4+6+8+10
CONFIABILIDAD KUDER – RICHARDSON (KR-20)

PROCEDIMIENTO:
Correlación a través de proporciones de aciertos y
desaciertos y varianza del total de aciertos.

APLICABLE EN:

Lista de Cotejo y preguntas cerradas con respuestas dicotómicas


(SÍ- NO)
CONFIABILIDAD KUDER – RICHARDSON
(KR-20)

K= Número de Ítems.
∑p.q= sumatoria de proporciones de aciertos por
desaciertos.
S2 T= Varianza del total de aciertos.
CONFIABILIDAD KUDER – RICHARDSON
(KR-20)

Sujetos 1 2 3 4 5 6 Total

1 1 0 1 1 1 1 5
2 0 0 1 1 0 0 2
3 1 1 1 0 1 1 5
1 1 0 1 1 0
4
4
5 1 1 0 0 0 1 3
p

p.q
CONFIABILIDAD ALFA DE CRONBACH
PROCEDIMIENTO:
Correlación a través de la varianza de cada ítem
asociado por variables y la varianza de las
puntuaciones totales.

APLICABLE EN :

Escalas de estimación, Escala de Lickert,


cuestionarios de preguntas cerradas con opciones
policotómicas, test de aptitud verbal, test de
aptitud no verbal , test psicológico.
CONFIABILIDAD ALFA DE CRONBACH

K= Número de Ítems.
S2= Varianza de los puntajes de
cada ítems.
S2T= Varianza de los puntajes
totales.

α = 0.81
CONFIABILIDAD ALFA DE CRONBACH
CONFIABILIDAD ALFA DE CRONBACH
CONFIABILIDAD ALFA DE CRONBACH
CONFIABILIDAD ALFA DE CRONBACH

Estadísticos de fiabilidad

Alfa de Cronbach N de elementos

0.810 10

Se alcanzó un Nivel de Confiabilidad


Bueno con un Alpha = 0.81, siendo este
test consistente y adecuado para el
estudio.

La correlación debe ser superior a


0.35 (Cottien-Manium ,1990) para
ser considerado en el cuestionario.
El ítem 10 no cumple
CONFIABILIDAD ALFA DE CRONBACH

Estadísticos de fiabilidad

Alfa de Cronbach N de elementos

0.839 5

Se alcanzó un Nivel de Confiabilidad


Bueno con un Alpha = 0.839

Para la motivación extrínseca :


Estadísticos de fiabilidad

Alfa de Cronbach N de elementos

0.523 5

Se alcanzó un Nivel de Confiabilidad


Moderado con un Alpha = 0.523
Prueba Piloto
▪ Se refiere a versiones en miniatura
de un estudio a gran escala es
crucial de un buen diseño del
estudio.
▪ Proporciona información valiosa
para la investigación.
▪ Permite la prueba de adecuación
(validez cultural) de los
instrumentos de investigación.

▪ Sin embargo, un estudio piloto también puede ser la prueba previa de


un instrumento de investigación en particular (Baker 1994).
validez
• Grado en que un instrumento mide la variable
que pretende medir. La validez implica
congruencia en la manera de plantear las
preguntas.
Grado en que un instrumento refleja un dominio específico
Contenido de contenido de lo que se mide. Es el grado en que la
medición representa al concepto medido.

Validez Se establece la validez comparándolo con algún criterio


Criterio externo. Es un criterio estándar con el que se juzga la
Total validez de un instrumento.

Se refiere al grado en que una medición se relaciona


consistentemente con otras mediciones de acuerdo con
Constructo hipótesis derivadas teóricamente y que conciernen a los
conceptos (o constructos) que están siendo medidos .
TIPOS DE VALIDEZ MÉTODO

Juicio de expertos (Coeficiente


de Proporción de Rangos,
Contenido coeficiente de Lawshe, V de
Aitken)

Análisis de Correlación con la


Criterio prueba criterio

Análisis estadístico multivariado


Constructo ( Factorial, convergente y
discriminante)
ÍNDICE DE VALIDEZ DE CONTENIDO (IVC):

Lawshe (1975) propuso un índice de validez basado en la valoración de


un grupo de expertos de cada uno de los ítems del test como que el
elemento sea esencial para evaluar el constructo, que resulte útil, pero
prescindible o que se considere innecesario. El índice se calcula a través
de la siguiente fórmula:

Donde:
n: es el número de expertos que han valorado el ítem como esencial
N es el número total de expertos que han evaluado el ítem.
Índice de Validez de Contenido (IVC) : Promedio de la validez de
contenido de todos los ítems seleccionados en el paso previo.
VALIDACIÓN DEL CUESTIONARIO (MÉTODO LAWSHE)
Se realiza el conteo de los expertos según su evaluación ( Por
ejemplo: 5 expertos calificaron como esencial al ítem 1, sin embargo
el ítem 16 fue calificado como esencial sólo por 2 expertos)

: (5- 5/2)
Para cada uno de los ítems se desarrolla la fórmula 5/2
dada:
• Y luego sumando todos los totales, para este ejemplo se
obtuvo como resultado una validez de contenido de IVC:
0.94.
• Para interpretar podemos tomar el criterio de Davis (1992),
quien nos dice que el índice obtenido tiene que ser superior
a 0,80 para definir el conjunto de ítems como adecuado.
• En este caso nos indica que la Validez de Contenido se
encuentra en un nivel adecuado , sin embargo analizando la
validez ítem por ítem, se sugiere la eliminación del ítem 16,
ya que este ha sido considerado como esencial sólo por 2
expertos.
❑ Validez de criterio

Dentro del concepto de validez de criterio cabe distinguir a su vez


entre:

▪ Validez externa y validez interna


▪ Validez concurrente y validez predictiva

Los procedimientos estadísticos utilizados en la validación


referida a un criterio varían según el número de predictores
utilizados (uno o más tests) y el número de criterios empleados
(criterio único y criterio compuesto o múltiple).
❑ Validez de criterio

Cálculo del coeficiente de validez , Martínez Arias (1995)


distingue los siguientes casos:
1. Un único test y un solo criterio: se emplearían los
procedimientos de correlación y regresión lineal simple.
2. Varios predictores (tests) y un solo criterio: se emplea la
correlación y regresión lineal múltiple o el análisis
discriminante.
3. Varios predictores y varios criterios: regresión lineal
multivariante y la correlación canónica
❑ Validez de constructo

• Establece y especifica la relación teórica entre los


conceptos.

• Correlaciona ambos conceptos y se analiza


cuidadosamente la correlación.

• Interpreta la evidencia empírica de acuerdo a que


tanto clarifica la validez de constructo una medición
particular.
❑ Validez de constructo

Técnicas correlaciónales

Las técnicas correlaciónales o de consistencia interna relativa, se emplea en


la validez de constructo con procedimientos de correlación entre:
Item – Test
Item – Escala (Subtests)
Escala – Test o Test – Subtests

 
ESCALA DE VALORACIÓN PARA INTERPRETAR LA CORRELACIÓN EN LA VALIDACIÓN
 
ri.t Nivel de discrimación
0.40 a más Muy Bueno
0.30 – 0.39 Bueno
0.20 - 0.29 Deficiente
0 - 0.19 Insuficiente

Fuente: Elosua Oliden y Bully Garay (2012). Pág. 58.  


Escala de valoración del coeficiente de correlación de Pearson

Grado de correlación
-1.00 Correlación negativa Perfecta
-0.90 Correlación negativa Muy fuerte
-0,75 Correlación Negativa Considerable
-0.50 Correlación Negativa Media
-0,25 Correlación Negativa débil

0.00 No existe correlación alguna entre las variables

+0.10 Correlación Positiva Muy Débil


+0.25 Correlación Positiva Débil
+0.5 Correlación Positiva Media
+0.75 Correlación Positiva Considerable
+0.90 Correlación positiva Muy fuerte
+1.00 Correlación positiva Perfecta
Hernández, Fernández y Baptista ( 2010)
2.- Fiabilidad de la escala: Consistencia:
El cálculo del coeficiente de alfa de
Crombach fue 0,771; por cada pregunta
se obtuvo un puntaje mayor de 0,7
(Tabla Nº 02). La Correlación corregida
elemento-total” es el denominado en la
TCT (Índice de discriminación del ítem),
que es un criterio importante para la
selección de ítems, recomendándose
que en general su valor sea ≥0,30. En
este constructo no se eliminaron
preguntas posteriores al consenso final.

http://www.scielo.org.pe/scielo.php?script=sci_arttext&pid=S1022-51292011000400008
Gracias a tu esfuerzo por
aprender está cambiando el
mundo..!!
REFERENCIAS
Mason, R., Lind, L. y Marshall, W. (2004). Estadística para Administración y Economía. México:
Alfaomega.
Montero, J. (2008). Problemas resueltos de Estadística Descriptiva para Ciencias Sociales. Madrid:
Thomson Editores.
Montgomery, E. y Runger, G. (2006), Probabilidad y estadística aplicada a la ingeniería. México:
Limusa Wiley.
Pagano, R. (2011). Estadística para ciencias del comportamiento. Novena Edición. México: Cengage
Learning Editores Corporativo Santa Fe.
Esnaola, I. (2005). Elaboración y validación del cuestionario Autokontzeptu Fisikoaren Itaunketa
(AFI) de autoconcepto físico. Apuntes Educación Física y Deportes, (82), .[fecha de Consulta 3 de
Agosto de 2021]. ISSN: 1577-4015. Disponible en: https://www.redalyc.org/articulo.oa?
id=551656963013
Ventura, J., Jara, S., García, C. y Ortiz, C. (2018). Validación de una escala de perfeccionismo en
niños peruanos. Actualidades en Psicología, 32(124),16-33.[fecha de Consulta 3 de Agosto de 2021].
ISSN: 0258-6444. Disponible en: https://www.redalyc.org/articulo.oa?id=133257151003

MG. JESSICA VICUÑA VILLACORTA

También podría gustarte