TECNICAS DE MIGRACION DE DATOS Y ETCL

Cuando, como sucede en todo proceso de migración, se ha de proceder a integrar dos o más

sistemas pueden usarse diferentes técnicas, siendo las más comunes:

Perfilado de datos: permite explorar los propios datos, agregando a los de origen las

reglas necesarias. Esta técnica hace posible también el obtener resultados acerca de

duplicidades o errores en los datos.

Limpieza de datos: que puede llevarse a cabo empleando para ello una herramienta

de Data Quality que ayude a eliminar errores, incorrecciones o duplicidades, entre otras

inconsistencias; y que, al mismo tiempo, enriquezca y homologue los datos,

preparándolos para el sistema de destino. Conexión a distintas fuentes de datos: una

técnica que precisa de una herramienta ad hoc que garantice el hacerlo en

condiciones de simultaneidad.

Las ventajas que proporciona el usar estas tecnologías se traducen en un aumento de la

precisión, reducción del índice de errores, mayor agilidad y optimización del tiempo; ya que su

automatización evita los procesos manuales, algo que supone su principal beneficio.

Qué se debe tener en cuenta para la elección del software de ETL

Existen muchas herramientas de ETL diferentes, como también hay infinidad de bases de

datos, sistemas y organizaciones distintas. En el momento de seleccionar la que liderará la

migración e integración de datos pueden tomarse en consideración las recomendaciones de

Gartner en cuanto a las cualidades que la herramienta ha de presentar:

 Adaptabilidad a distintos sistemas operativos y plataformas hardware. Capacidades de

gestión de datos: en cuanto a minería, perfilado y calidad. Habilidades para monitorizar,

gestionar y controlar los procesos de integración de datos: en lo relativo a gestión

de errores, recolección de estadísticas de ejecución, controles de seguridad, etc.

Capacidades SOA.

Capacidades de diseño y entorno de desarrollo: como soporte para test,

representaciones gráficas, modelos y flujos de datos y flujos de datos, etc. Cualidades

de arquitectura e integración referidas al grado de interoperabilidad, compactación y

consistencia de los diferentes componentes que la formen.

Aunque la elección de un software de ETL no es sencilla, su repercusión en el curso del

proyecto es decisiva. Una decisión correcta pasa por la automatización y en base a ella

quedan garantizados:

Unaumento en la velocidad de desarrollo del proyecto.

La descentralización del control de la ejecución y de todos los procesos. Una mayor

agilidad en el negocio.

Mayor precisión.

Minimización de errores.

HERRAMIENTAS ETL

IBM Cognos Data Manager

Oracle Warehouse Builder

Microsoft Integration Services

Informatica PowerCenter
IBM Cognos Data Manager

Características:

IBM® Cognos Data Manager proporciona funciones dimensionales de extracción,

transformación y carga (ETL) para conseguir una inteligencia empresarial de alto

rendimiento.

Se puede integrar con la GUI de IBM Data Manager Designer para diseñar y crear

prototipos

Se pueden ejecutar compilaciones y secuencias de trabajos en sistemas remotos

desde un sistema de entorno de diseño de Data Manager.

Data Manager Engine se tiene que instalar en un sistema UNIX o Linux.

ORACLE DATABASE 11G ORACLE WAREHOUSE BUILDER ENTERPRISE ETL

OPTION

Caracteristicas:

La opción empresarial ETL (Enterprise ETL Option) para Warehouse Builder es una

opción que puede ser adquirida con Oracle Warehouse Builder como parte de la edición

empresarial del motor de base de datos. Permite ejecutar cargas de datos usando

métodos rápidos y eficientes tales como el Oracle Data Pump y transportable

tablespaces.

Permite prever el efecto que puedan tener los cambios que se hagan en cualquier

lugar de los metadatos del sistema ETL

Es posible generar un modelo para configurar los ambientes de desarrollo, pruebas y

producción a niveles separados.

Microsoft SQL Server Integration Services

Caracteristicas:

Puede extraer y transformar datos de diversos orígenes como archivos de datos XML,

archivos planos y orígenes de datos relacionales y, después, cargar los datos en uno o

varios destinos.

Se pueden realizar tareas de migración fácilmente usando tareas visuales. Si se desea

crear nueva funcionalidad, se pueden crear scripts en c# o VB. Puede conseguir

conectividad mediante CLI vía DLLs tipo ensamblador.

Informatica PowerCenter:

Caracteristicas:

Calidad de datos generalizada para todos los grupos de interés, proyectos y aplicaciones

utilizando una sola plataforma unificada.

Descubrimiento y análisis de datos, detección de riesgos ocultos, localización de

problemas estructurales y detención de la propagación de los problemas de calidad.

Acceso, integración y entrega de los datos rápidamente, de forma rentable y sin

codificación manual.

Normalización de los datos en los formatos de tabla de destino y carga en los nuevos

sistemas.

Garantía de acceso y entrega de datos críticos a toda la empresa donde y cuando se

necesiten, asegurando la conectividad sin límites a una amplia variedad de fuentes de

datos.

Aplicación de test de validación para garantizar que los datos se mantiene libres de

daños y que no han sufrido menoscabos durante su traslado o transformación.

Interesantes opciones de integración de metadatos, que marcan la

Visibilidad y control para todos los usuarios de negocio, que les otorga la libertad

necesaria para crear, administrar y compartir información empresarial de carácter

crítico contextualizada durante el proceso de migración.

Enmascaramiento de datos sensibles efectivo antes de producirse el traslado a

los nuevos sistemas de destino.

Creación de subconjuntos seguros de datos de producción procedentes de grandes

bases de datos sin restricciones.

Extracción rápida de datos de los sistemas de legado con cero impacto en el

desempeño operativo durante el proceso de migración de datos.

COMPARATIVA
 FACILIDAD DE USO

IBM: Se puede integrar con la GUI de IBM Data Manager Designer pero este es un
módulo aparte.

Oracle: Fácil cuando se trata de información almacenada en bases de datos Oracle,

debido a las herramientas Data Pump y transportable tablespaces, pero no ofrece
mucha compatibilidad a otras BD.

Microsoft: Se pueden realizar tareas de migración fácilmente usando tareas visuales.

PowerCenter: Tiene una GUI fácil de utilizar, pero requeriere entrenamiento para
aprovecharla.

SOPORTE:

IBM: Soporte mundial contratando en paquete.

Oracle: Vía soporte local Oracle Latinoamérica.
Microsoft: Soporte vía plataforma TechNet.
PowerCenter: Soporte mundial vía web y consultoría.

IMPLEMENTACION
 VELOCIDAD

IBM: Muy rápido cuando se trabaja con DB2 sin embargo la capa de
compatibilidad disminuye la velocidad de conexión con distintos manejadores de base de
datos.

Oracle: La velocidad es proporcional al servicio Oracle en el cual este trabajando.

Microsoft: La velocidad es proporcional al servicio MSSQL en el cual este trabajando.

PowerCenter: Herramienta más rápida gracias a PushDown, sin embargo los cambios son
en momento y no permite hacer Rollback a un estado anterior.

CALIDAD DE LA INFORMACION

IBM: Mediante Cognos Data Manager Packages se pueden incorporar

herramientas para DQ.

Oracle: Permite DQ mediante el uso de Oracle Warehouse Builder Data Profiling

Features.

Microsoft: Requiere del software SQL Server Data Quality Services para ofrecer
herramientas DQ.

PowerCenter: Ofrece DQ a través de otro producto llamado Informatica Data Quality.

MONITOREO

IBM: Maneja registro de históricos.

Oracle: Tiene herramientas prácticas y extensivas de monitoreo y registro histórico.

Microsoft: Tiene herramientas prácticas y extensivas de monitoreo y registro histórico.

PowerCenter: Tiene herramientas prácticas y extensivas de monitoreo y registro

histórico.

bases de datos, archivos planos, xml, Excel, servicios web puede exportar como servicio
web.