Facultad de Ingeniera Civil y Ambiental - 2013

Validacin.

Sistemas de Informacin Geogrfica 2-2013

Facultad de Ingeniera Civil y Ambiental - 2013

Validacin
- Una vez generado un modelo es necesario
verificar su calidad.
- Para ello se debe comparar con algo.
- Es usual comparar los resultados de un
modelo con datos reales (observaciones).
- La diferencia entre los valores generados y los
observados da una medida del error de la
superficie generada.
Sistemas de Informacin Geogrfica 2-2013

Facultad de Ingeniera Civil y Ambiental - 2013

Validacin
- A veces no se cuenta con informacin
suficiente como para dividir la muestra en dos
grupos: interpolacin y validacin.
- Se introduce el criterio de validacin cruzada.

Sistemas de Informacin Geogrfica 2-2013

Facultad de Ingeniera Civil y Ambiental - 2013

Validacin cruzada.
- Es un mtodo estadstico de evaluacin y
comparar algoritmos en este caso de
interpolacin.
- Se divide a los datos en dos segmentos: el
primero se usa para aplicar el algoritmo y el otro
para validar el modelo.
- La interpolacin y validacin se realizan
sucesivas veces de forma cruzada, dando la
opcin de que cada punto sea validado.

http://es.wikipedia.org/wiki/Validaci%C3%B3n_cru
zada

Sistemas de Informacin Geogrfica 2-2013

Facultad de Ingeniera Civil y Ambiental - 2013

Validacin cruzada.
- El objetivo de la validacin cruzada dado un
modelo con uno o ms parmetros de ajuste
desconocidos y unos datos de entrenamiento,
el proceso de ajuste optimiza los parmetros
del modelo para que se ajuste a los datos de
entrenamiento tan bien como pueda.
- Es una manera de predecir el ajuste de un
modelo a un conjunto de datos de prueba
cuando no se dispone de un grupo explcito de
datos de prueba.
http://es.wikipedia.org/wiki/Validaci%C3%B3n_cru
zada

Sistemas de Informacin Geogrfica 2-2013

Facultad de Ingeniera Civil y Ambiental - 2013

Validacin cruzada.
- Tipos:
- V.C k-iteraciones: divide a la muestra en K
subconjuntos, uno de los conjuntos se usa como datos
de prueba y el resto como datos de entrenamiento
(interpolacin), el proceso se repite durante K
iteraciones.
- Es lento computacionalmente.

http://es.wikipedia.org/wiki/Validaci%C3%B3n_cru
zada

Sistemas de Informacin Geogrfica 2-2013

Facultad de Ingeniera Civil y Ambiental - 2013

Validacin cruzada.
- Validacin cruzada aleatoria.
- Divide aleatoriamente el conjunto de datos de prueba,
el resultado final es la media aritmtica de los valores
obtenidos para las diferentes divisiones.
- El mtodo no depende del nmero de iteraciones,
pero algunos valores no son evaluados y otros pueden
evaluarse mas de una vez.

http://es.wikipedia.org/wiki/Validaci%C3%B3n_cru
zada

Sistemas de Informacin Geogrfica 2-2013

Facultad de Ingeniera Civil y Ambiental - 2013

Validacin de un modelo.
- Siempre existen errores, pues se trata de un
modelo, no importa el mtodo de
interpolacin aplicado.
- Cuando se trata de MDE, es crtico conocer el
error, pues de el se derivan otros modelos.
- La calidad de un MDE depende del tipo y de la
magnitud de los errores implicados.

Pons, 2012,
Felicsimo, 2012

Sistemas de Informacin Geogrfica1-2013

Facultad de Ingeniera Civil y Ambiental - 2013

Tipos de errores:
- Posicionales (cartogrficos): Implican una
deficiente localizacin geogrfica de una cota.
- Atributivos (temticos): Asignacin incorrecta
de una altitud (cualquier variable
representada).
- Los e. posicionales, afectan a los datos
vectoriales.
- Los atributivos afectan a ambos modelos.
- En el modelo raster, generalmente son un
problema de interpolacin.
Sistemas de Informacin Geogrfica1-2013

Facultad de Ingeniera Civil y Ambiental - 2013

El error atributivo (raster).

- Cmo determino el error?
- Comparaciones entre un grupo de datos
conocidos y su homlogo en el modelo.
- Se establecen pruebas estadsticas
convencionales.
- Estas pruebas deben calcularse con un nmero
suficiente de datos distribuidos homogneamente
en el mapa.

Sistemas de Informacin Geogrfica1-2013

Facultad de Ingeniera Civil y Ambiental - 2013

Seleccin de muestras: ejemplo.

Puntos de prueba.

Puntos para interpolar

Sistemas de Informacin Geogrfica1-2013

Facultad de Ingeniera Civil y Ambiental - 2013

Cuntos puntos?
- No existe una frmula mgica o una
recomendacin que se ajuste a cada
caso.
- La nica forma es realizar pruebas
sucesivas.
- Se determina el grupo a escoger (%)
cuando el error se estabiliza.
Sistemas de Informacin Geogrfica1-2013

Facultad de Ingeniera Civil y Ambiental - 2013

Error cuadrtico medio.

- Considera los errores aleatorios del modelo
generado.
- Se aplica una vez removidos de la superficie
generada los errores gruesos: agujeros, falta
de datos, curvas incorrectas.
- Y el error sistemtico, que generan sesgo en la
distribucin del error.

Pons, 2012.

Sistemas de Informacin Geogrfica1-2013

Facultad de Ingeniera Civil y Ambiental - 2013

RMS.
- Se debe obtener el valor del error en cada punto:
=
Donde:
Zc: es el valor en el punto de control.
Zm: es el valor generado por el DEM en el mismo
punto.
Si se usa un interpolador exacto el error es cero,
pero eso no quiere decir que la interpolacin sea
perfecta.
Pons, 2012.

Sistemas de Informacin Geogrfica1-2013

Facultad de Ingeniera Civil y Ambiental - 2013

RMS:
- Con los valores calculados del error:
- Como se supone que no tienen sesgo (sin errores
sistemticos) la media del error es cero (debera).

- Se calcula el RMS:

Donde: e: es el error calculado.

n: es el nmero de puntos calculados.
Sistemas de Informacin Geogrfica1-2013

Facultad de Ingeniera Civil y Ambiental - 2013

Interpretacin del RMS:

- Se supone que el error tiene una distribucin
normal.

Sistemas de Informacin Geogrfica1-2013

Facultad de Ingeniera Civil y Ambiental - 2013

Interpretacin del RMS:

- El RMS permite tratarlo como una desviacin.

Pons, 2012.

Sistemas de Informacin Geogrfica1-2013

Facultad de Ingeniera Civil y Ambiental - 2013

Ejemplo:
- Qu significa un RMS de 2.5 m.?
- El 68% de los puntos esta acotado entre los +2.5m.
- El 95% de los puntos est acotado entre los +-5m.
- El 99% de los puntos est acotado entre los 7.5 m.

Sistemas de Informacin Geogrfica1-2013

Facultad de Ingeniera Civil y Ambiental - 2013

Prctica:
- De la capa de puntos acotados escoger el 30% de
puntos de forma aleatoria que sern utilizados
como puntos de control.
- EL restante 70% se emplear como puntos para la
interpolacin.
- Realizar interpolaciones sucesivas empleando
distintos valores de tensin con el mtodo spline.
- Instalar el plugin Point Sampling Tool y obtener
los valores de las superficies creadas.
- Estimar el RMSE de cada interpolacin y
determinar el valor ptimo de tensin.
Sistemas de Informacin Geogrfica1-2013