A2 -ETL-DataWareHouse-FABG - analis de datos

A2 -ETL-DataWareHouse-FABG

1. A2 ETL- DataWareHouse Presentado por: FELIPE Antonio Bermúdez Giraldo Ingeniero de sistemas y telecomunicaciones Fecha de entrega: 17/01/2025

2. Prerrequisitos MÍNIMOS NECESARIOS SU EQUIPO DE CÓMPUTO

3. Objetivos específicos

4. Objetivo 1: Siguiendo los pasos para la creación del DataLake , procederemos a crear las ETL necesarias para alimentar el Data Warehouse (DWH). El primer paso será crear el paquete correspondiente a la tabla DIM_Departamento . Pasos: Crear paquete ETL para cargar Departamentos al Data Warehouse . 1

5. Objetivo 1: La primera conexión será al DataLake , siguiendo los mismos pasos realizados durante su creación. Pasos: Crear paquete ETL para cargar Departamentos al Data Warehouse . 1

6. Objetivo 1: Como ya existía un historial de la conexión al DataLake , se selecciona directamente, tal como se muestra en la imagen. Creamos la conexión para el Data Warehouse (DWH) siguiendo los mismos pasos. Esta vez, seleccionamos la base de datos correspondiente al DWH y realizamos la prueba de conexión para asegurarnos de que todo funciona correctamente. Pasos: Crear paquete ETL para cargar Departamentos al Data Warehouse . 1 2

7. Objetivo 1: iguiendo la misma lógica utilizada para la creación del DataLake , construiremos las ETL necesarias para el Data Warehouse (DWH). En el primer paso del flujo de datos, se realiza la eliminación de la tabla existente. En este paso, se procede a crear la tabla en el Data Warehouse (DWH). En este paso, se consulta la información del DataLake y se transfiere al Data Warehouse (DWH). Pasos: Crear paquete ETL para cargar Departamentos al Data Warehouse . 1 2 3

8. Objetivo 1: Primero, se selecciona un origen ADO.NET (ADO.NET Source ) para indicar de qué base de datos (BD) se obtendrá la información; en este caso, del DataLake . Seleccionamos un destino ADO.NET (ADO.NET Destination ) para indicar en qué base de datos (BD) se guardará la información. Pasos: Crear paquete ETL para cargar Departamentos al Data Warehouse . 1 2

9. Objetivo 1: Primero, se selecciona un origen ADO.NET (ADO.NET Source ) para indicar de qué base de datos (BD) se tomará la información; en este caso, del DataLake . Seleccionamos un destino ADO.NET (ADO.NET Destination ) para indicar en qué base de datos (BD) se almacenará la información. En el destino, seleccionamos la conexión del Data Warehouse (DWH). Seleccionamos la tabla de destino en nuestro Data Warehouse (DWH). Pasos: Crear paquete ETL para cargar Departamentos al Data Warehouse . 1 2 3 4

10. Objetivo 1: Cambiamos los nombres y, de esta manera, quedaría configurado el consumo y almacenamiento de los datos en nuestro Data Warehouse (DWH). Pasos: Crear paquete ETL para cargar Departamentos al Data Warehouse . 1

11. Objetivo 1: Realizamos la prueba de ejecución de toda la ETL y obtenemos un resultado exitoso. Pasos: Crear paquete ETL para cargar Departamentos al Data Warehouse . 1

12. Seguimos los mismos pasos utilizados para la ETL de DL_Departamento , esta vez para crear DL_Municipios . Luego, realizamos la prueba correspondiente. Pasos: Objetivo 2: Crear paquete ETL para cargar Municipios al Data Warehouse . 1

13. Para la DIM_Zona , seguimos los mismos pasos que en las dimensiones anteriores, pero el consumo de la información será ligeramente diferente. Pasos: Objetivo 3: Crear paquete ETL para cargar Zonas al Data Warehouse . 1

14. Para el consumo de datos, seleccionamos la tabla DL_Homicidios . Dado que el nombre de la zona viene con un tipo de dato nvarchar (50) , pero en realidad solo necesitamos un nvarchar (8) que es el tamaño máximo requerido y así está configurado en el DWH, realizaremos una conversión de datos. Almacenamos la información en el DWH, en la tabla DIM_Zonas . Pasos: Objetivo 3: Crear paquete ETL para cargar Zonas al Data Warehouse . 1 2 3

15. Para el consumo de datos, tomaremos el campo ZONA de la tabla DL_Homicidios . De esta tabla, debemos consumir los datos mediante una consulta ( query ) que nos permita obtener solo los valores únicos. Así es como configuraremos el campo ZONA para que pase de nvarchar (50) a nvarchar (8). Pasos: Objetivo 3: Crear paquete ETL para cargar Zonas al Data Warehouse . 2 1

16. Validamos la ejecución completa y verificamos que todo haya salido exitoso. Pasos: Objetivo 3: Crear paquete ETL para cargar Zonas al Data Warehouse . 1

17. Realizamos el mismo procedimiento anterior para la tabla DIM_Sexos . Validamos que se registraron correctamente los 3 registros únicos del campo SEXO. Pasos: Objetivo 4: Crear paquete ETL para cargar Sexos al Data Warehouse . 1 2

18. Realizamos los primeros pasos de eliminación y creación de la tabla, siguiendo los mismos pasos anteriores. Pasos: Objetivo 5: Crear paquete ETL para cargar Homicidios al Data Warehouse .. 1

19. Vamos a agregar un nuevo ítem que nos ayudará a encontrar los demás campos que conforman la tabla FAC. Pasos: Objetivo 5: Crear paquete ETL para cargar Homicidios al Data Warehouse .. 1

20. brimos el elemento, nos dirigimos a "Conexión" y hacemos clic en "Nuevo". Se configura la conexión según lo indica la imagen. Pasos: Objetivo 5: Crear paquete ETL para cargar Homicidios al Data Warehouse .. 1 2

21. Configuramos la tabla "Zona" para que nos traiga el campo "COD_ZONA", que irá en la tabla FAC. Pasos: Objetivo 5: Crear paquete ETL para cargar Homicidios al Data Warehouse .. 1

22. Realizamos el mismo procedimiento para el campo "COD_SEXO". Pasos: Objetivo 5: Crear paquete ETL para cargar Homicidios al Data Warehouse .. 1

23. Ejecutamos las ETL para probar que todo se ejecute con normalidad. Pasos: Objetivo 5: Crear paquete ETL para cargar Homicidios al Data Warehouse .. 1

24. Configuramos la tarea para que cada uno de los paquetes se ejecute en una sola ejecución, de modo que se ejecuten todas las ETL creadas. Pasos: Objetivo 6: Crear paquete ETL Principal. 1

25. Probamos la ejecución del paquete principal y observamos que se ejecuta sin problemas. Pasos: Objetivo 6: Crear paquete ETL Principal. 1

26. Dificultades y Soluciones

27. Recursos utilizados

28. Conclusiones

29. Conclusiones