Diseño de ETL - Los ojos de un desarrollador ciego

Existe un viejo programa de televisión llamado los caquitos que fue hecho por el gran actor mexicano Roberto Gomez Bolaños y su compañero de aventura Ruben Aguirre y allí ellos salían con ideas locas y se cuestionaban algo, "¿estamos locos lucas?".
 
De la misma forma me cuestiono yo muchas veces en el tema del diseño de ETL's que a veces he leido y me cuestiono siempre lo mismo, "¿estaré loco lucas?". Lo digo porque he leido diseños de OBIAPPS, de IBM para su herramienta Datastage y sus modelos de industria e incluso el de muchos de mis compañeros.
 
Problematica: Sencillo, cuando se tiene un desarrollador de ETL tratando de decifrar diseños que están mal construidos (principalmente el mapeo), hace que toque recurrir al "código" para tener certeza de la veracidad del diseño y peor aún, entender lo que se está haciendo, debido a la falta de claridad que existe dentro de los documentos de diseños.
 
Esta es una problemática a nivel mundial que no todos tienen y esa es la buena noticia, porque he visto colegas que hacen unos diseños geniales y de los cuales he quedado sorprendido debido a la claridad que manejan, pero los que no lo hacen así creo que puede ser por dos factores:
  1. No saben diseñar. Es algo realmente difícil porque debe ser alguien con mucha experiencia.
  2. No quiere mostrar lo que hizo para que exista una dependencia del cliente. Lo mas sucio y anti ético del mundo porque raya con el profesionalismo.
Ojala todo pueda mejorar en este sentido y con las nuevas tecnologías el diseño no se quede atrás porque no podemos dejar que nuestros desarrollos dependan de una persona.
 
El diseño debería ser casi un lenguaje universal que lo comprenda cualquier colega.
:D

Comentarios

Publicar un comentario

Entradas populares de este blog

Como Construir la dimension tiempo en SQL SERVER

Hola, Quería traer a consideración una forma de crear la dimensión de tiempo, en una topología en copo de nieve. Si quieren modificar algo o ven algún error les agradezco que me comuniquen el error y en la mayor brevedad lo podré organizar: Tablas y vistas: -- --- -- Table 'Dia' --  -- --- DROP TABLE  Mercurio_Datawarehouse.dbo.TDWH_DIA ; CREATE TABLE Mercurio_Datawarehouse.dbo.TDWH_DIA (   NMSEC_DIA DATE PRIMARY KEY,   DIA_MES INTEGER,   FECHA_INT INTEGER,   NMSEC_MES INTEGER ); Create View Dbo.VTDWH_DIA (NMSEC_DIA,DIA_MES,NMSEC_MES, FECHA_INT) AS Select NMSEC_DIA,DIA_MES,NMSEC_MES,FECHA_INT From Mercurio_Datawarehouse.Dbo.TDWH_DIA with(nolock) ; -- --- -- Table 'Mes' --  -- --- DROP TABLE  Mercurio_Datawarehouse.Dbo.TDWH_MES; CREATE TABLE Mercurio_Datawarehouse.Dbo.TDWH_MES (   NMSEC_MES INTEGER PRIMARY KEY,   DSNOMBRE_MES VARCHAR(20),   NMSEC_ANO INTEGER ); Create View Dbo.VTDWH_MES (NMSEC_MES,DSNOMBRE_MES,NMSEC_A
Leer más

Reiniciar el Intelligence Server de Microstrategy

Imagen
Existen varias formas de realizar un reinicio del Intelligence Server (IS) de Microstrategy, a continuación enumeramos las existentes: Reinicio de los servicios por comando de Sistema Operativo . Desde el Command Manager . Otra alternativa es el Service Manager . Desde MSTR Developer COMANDO POR SISTEMA OPERATIVO (OS) Para realizar el reinicio por esta alternativa, se debe conocer el sistema operativo en el cual se aloja el Intelligence Server. Si se hace desde un OS Linux el procedimiento es el siguiente: Abrimos la consola de comando de Linux. Nos vamos a la ruta <MicroStrategy HOME>/bin directory,  Se corre el comando ' mstrctl -s IntelligenceServer start ', <MicroStrategy HOME> esta es la carpeta home donde se realizó la instalación. Revisamos si el Intelligence se encuentra arriba con el comando ' mstrctl -s IntelligenceServer gs '. Luego de verificar que se encuentra arriba el IS, se ejecuta el siguiente comando ' mstrctl -s In
Leer más

Extraccion, Transformación y Carga

Imagen
Este es un tema clave para poder tener éxito en una buena plataforma de Inteligencia de Negocios. Revisemos inicialmente la definición de ETL. Buscando rápidamente en google vemos la primera definición de ETL que nos proporcionan es la de wikipedia y dice: " Extract, Transform and Load (Extraer, transformar y cargar en inglés, frecuentemente abreviado a ETL) es el proceso que permite a las organizaciones mover datos desde múltiples fuentes, reformatearlos y limpiarlos, y cargarlos en otra base de datos, data mart, o data warehouse para analizar, o en otro sistema operacional para apoyar un proceso de negocio. " (wikipedia: ETL). En la anterior imagen se ve el esquema general de una solución BI, la parte que esta dentro del círculo es la que llamamos proceso ETL. Ahora veamos un zoom dentro de lo que se hace en este proceso: Podemos decir que está definición es una definición a muy groso modo de todo lo que comprende el proceso ETL, sin embargo este es un t
Leer más