Ssis Handson

Data Warehouse & Olap 1

SQL Server Integration Services

Objetivos:

Identificar los procesos para poblar un Data Warehouse. Utilizar SSIS para poblar el Data Warehouse

Temas:

1. Poblar el data warehouse2. Herramientas para implementar procesos ETL3. Crear paquetes SSIS a través del SQL Server Business

Intelligence Development Studio.4. Recomendaciones para la conversión de tipos de datos

CIBERTEC

Cap

ítu

lo 3

b


Ejercicio 1: Crear conexiones y transformaciones a través de un proyecto de Integration Services.

1. En el menú Inicio, seleccione All Programs > Microsoft SQL Server 2005 > SQL Server Business Intelligence Development Studio. Se abrirá el entorno de desarrollo de .Net.

2. En el menú File, seleccione New y luego seleccione Project. Aparecerán los distintos tipos de proyecto que se pueden crear.

Seleccione la plantilla Integration Services Project. En la casilla Location, seleccione la ruta donde desea crear el proyecto. En la casilla Name, escriba “AdventureWorks_SSIS_Demo1”. La ventana debe quedar como se muestra en la figura anterior. Presione el botón OK para crear el proyecto.3. Aparecerá el entorno de desarrollo de proyectos de Integration

Services. En la ventana del Solution Explorer, observe los elementos constituyentes del proyecto: Data Sources, Data Source Views, SSIS Packages y Miscellaneous.

CIBERTEC


4. El primer paso es la definición de un Data Source. En el Solution Explorer, seleccione el nodo Data Sources, dé un clic derecho y seleccione New Data Source:

5. Aparecerá la pantalla de bienvenida del asistente para la definición de orígenes de datos (Data Source Wizard). Presione el botón Next. Aparecerá la ventana de definición de conexiones con datos.

CIBERTEC


6. Para definir una nueva conexión con datos, presione el botón New. Aparecerá la ventana del Connection Manager. Seleccione el conector “.Net Providers\SqlClient Data Provider”, el servidor local y la base de datos AdventureWorks, como se muestra en la siguiente figura:

CIBERTEC


7. Presione el botón OK. A continuación, presione el botón Next. Aparecerá la ventana final del asistente.

8. Presione el botón Finish para finalizar el asistente. A continuación, se definirá un Data Source View, que proporciona una vista desconectada de la estructura de las tablas en el origen de datos. Para esto, seleccione el nodo Data

CIBERTEC


Source Views en el Solution Explorer, haga un clic derecho y seleccione New Data Source View:

9. Aparecerá la ventana inicial del asistente de definición de vistas de datos (Data Source View Wizard). Presione el botón Next. La ventana siguiente muestra los orígenes de datos definidos en el proyecto. Seleccione el data source Adventure Works.

10. Presione el botón Next. La siguiente ventana permite seleccionar las tablas del origen de datos cuya estructura se desea visualizar. Seleccione las tablas Production.Product y Production.ProductSubCategory. La ventana debe quedar como se muestra en la siguiente figura:

CIBERTEC


11. Presione el botón Next. Aparecerá la ventana final del asistente.

12. Presione el botón Finish para finalizar el asistente. Observe que el entorno de diseño muestra la estructura de las tablas seleccionadas en el Data Source View.

CIBERTEC


13. La base de datos AdventureWorks será utilizada como origen de datos. En este ejercicio, el destino de datos será una nueva base de datos llamada AWorks_MartDemo. Esta nueva base de datos será creada a través del Server Explorer del entorno de desarrollo de Integration Services. En el menú View, seleccione la opción Server Explorer.

14. La ventana del Server Explorer se abrirá en el lado izquierdo del entorno de desarrollo. Seleccione el nodo Data Connections, haga un clic derecho y seleccione Create New SQL Server Database.

CIBERTEC


15. En la ventana de creación de bases de datos, ingrese la información que se muestra en la siguiente figura:

16. Pulse el botón OK. Esto creará la base de datos AWorks_MartDemo.

17. Cierre el Server Explorer. 18. Repita los pasos del (4) al (7) para crear un nuevo Data

Source llamado AWorks MartDemo, dirigido hacia la base de datos AWorks_MartDemo. Para este data source, debe elegir el conector “Native OLEDB\SQL Native Client”:

CIBERTEC


Finalmente, la ventana del Solution Explorer debe quedar de la siguiente manera:

19. El siguiente paso es la definición del paquete de Integration Services para implementar la lógica de la transformación de datos. Los paquetes de Integration Services se ubican en el nodo SSIS Packages del Solution Explorer. Obsérvese que en el proyecto se ha agregado automáticamente un paquete llamado Package.dtsx. Haga un clic derecho sobre el paquete y seleccione la opción Delete:

CIBERTEC


20. Pulse el botón OK en la ventana de confirmación para confirmar la eliminación del paquete.

21. A continuación se creará el primer paquete SSIS. Para esto, seleccione el nodo SSIS Packages en el Solution Explorer, haga un clic derecho y seleccione la opción New SSIS Package:

CIBERTEC


22. Obsérvese que se ha creado un nuevo paquete llamado Package1.dtsx. Para renombrarlo, haga un clic derecho sobre el paquete en el Solution Explorer y seleccione la opción Rename:

23. Renombre el paquete como “CopiaProductos.dtsx”, y presione la tecla Enter. Se mostrará la siguiente ventana de confirmación:

Pulse el botón Yes. Esto cambiará tanto el nombre físico del archivo del paquete, como el nombre del paquete en el entorno de desarrollo.

24. El siguiente paso es definir las tareas de transformación. En Integration Services, estas tareas están representadas en los Tasks, cada uno de los cuales puede efectuar una labor específica de procesamiento o transformación de datos. Estas tareas pueden visualizarse a través de la caja de herramientas (Toolbox) del entorno de desarrollo. Para visualizar el Toolbox, expanda el menú View, y seleccione la opción Toolbox:

CIBERTEC


25. Se abrirá el Toolbox de SQL Server Integration Services. La siguiente figura muestra una vista parcial de la caja de herramientas:

CIBERTEC


26. En el toolbox, seleccione la tarea Data Flow Task y arrástrela hacia la ventana de diseño del paquete (en la parte central del entorno de desarrollo). Se creará una tarea llamada Data Flow Task. El entorno de desarrollo quedará de la siguiente manera:

27. A continuación, se renombrará la tarea de transformación. Para esto, seleccione la tarea “Data Flow Task” en el diseñador del paquete, y cambie su propiedad Name a “Copiar productos” en la ventana de propiedades (para abrir la ventana de propiedades, expanda el menú View y seleccione la opción Properties Window. La ventana de propiedades se abrirá en la parte inferior derecha, debajo del Solution Explorer).

CIBERTEC


28. Cada tarea de flujo de datos consiste en varias transferencias de información entre orígenes de datos. A continuación, se definirán los flujos de información al interior de la tarea “Copiar productos”. Para esto, haga un doble clic sobre la tarea “Copiar productos”. Se abrirá en el entorno de desarrollo la pestaña “Data Flow”.

29. Cada paquete posee un conjunto de administradores de conexión (Connection Managers). Los connection managers definen los posibles orígenes y destinos de datos al interior del paquete, y pueden crearse a partir de los data sources

CIBERTEC


especificados en el proyecto. En la pestaña “Connection Managers”, haga un clic derecho en cualquier parte de esta ventana, y seleccione la opción “New connection from data source”:

30. Aparecerá una ventana que muestra los data sources disponibles:

31. Seleccione el data source “Adventure Works” y pulse el botón OK. Repita los pasos (30) y (31) para crear otro connection manager que apunte hacia el data source “AWorks MartDemo”.

CIBERTEC


32. En el Toolbox, expanda la pestaña Data Flow Sources, seleccione el ítem Data Reader Source y arrástrelo sobre la ventana de diseño. Se creará un nuevo origen de registros llamado “Data Reader Source”. Selecciónelo y, en la ventana de propiedades, cambie su propiedad Name a “Consulta Adventure Works”. La pantalla debe quedar de la siguiente manera:

33. Haga doble clic sobre el origen “Consulta Adventure Works”. Aparecerá el editor de propiedades del Data Reader Source. Seleccione la pestaña Connection Managers. En la columna Connection Manager, seleccione el data source Adventure Works.

CIBERTEC


34. Seleccione la pestaña Component Properties. En el grupo Custom Properties, seleccione la fila SqlCommand, y pulse el

botón .

35. Aparecerá una ventana que permite escribir una sentencia SQL para obtener un conjunto de filas. En dicha ventana, escriba la siguiente sentencia:

CIBERTEC


36. Pulse el botón “OK”. Seleccione la pestaña Column Mappings, y observe que las columnas de la consulta han sido detectadas:

37. Pulse el botón “OK”. Con estos pasos, se ha completado la creación de un origen de registros, basado en una consulta SQL.

38. En el Toolbox, expanda la pestaña Data Flow Destinations, seleccione el ítem OLE DB Destination y arrástrelo sobre la ventana de diseño. Se creará un nuevo destino de registros llamado “OLE DB Destination”. Selecciónelo y, en la ventana de

CIBERTEC


propiedades, cambie su propiedad Name a “Destino AWorks MartDemo”. La pantalla debe quedar de la siguiente manera:

39. Seleccione el origen “Consulta Adventure Works”. Observe que aparece una flecha verde y una flecha roja saliendo del origen de registros. La flecha verde representa el flujo de datos que se produce en caso de que la lectura de registros transcurra sin problemas; la flecha roja representa el flujo que tendrá lugar ante un error en la lectura de los registros del origen.

40. Seleccione la flecha verde que sale de “Consulta Adventure Works”, y arrástrela con el mouse sobre el destino “Destino AWorks MartDemo”. Esta acción define el flujo de los datos entre el origen y el destino de registros. Al finalizar, la ventana debe mostrarse de la siguiente forma:

CIBERTEC


41. Haga doble clic sobre el destino “Destino AWorks MartDemo”. Se abrirá el editor de propiedades del destino de registros. La ventana debe quedar de la siguiente manera:

42. A continuación se creará una tabla en el destino AWorks MartDemo. En la propiedad Name of the table or the view, pulse el botón New. Se abrirá una ventana que permite escribir una sentencia CREATE TABLE. Modifique la sentencia de la siguiente manera:

CIBERTEC


43. Pulse el botón OK para crear la tabla. A continuación, seleccione la opción Mappings en el lado izquierdo del editor de propiedades del destino de registros. Esto generará automáticamente los mapeos de columnas entre el origen (la consulta SQL escrita en el paso 35) y el destino de registros (la tabla ResumenProductos):

44. Pulse el botón OK para aceptar los cambios y finalizar la configuración del destino de registros.

45. Para depurar el paquete, pulse el botón en la barra de herramientas del entorno de desarrollo, o seleccione la opción Start Debugging en el menú Debug. Al finalizar la ejecución, el entorno de desarrollo mostrará la transferencia de datos en la siguiente forma:

CIBERTEC


46. Para finalizar la depuración, presione el botón en la barra de herramientas del entorno de desarrollo, o seleccione la opción Stop Debugging en el menú Debug.

CIBERTEC


Ejercicio 2: Definir flujos de control.

1. En el entorno de desarrollo, en el paquete “CopiaProductos.dtsx”, regrese a la pestaña Control Flow. En el Toolbox, seleccione el ítem Execute SQL Task, y arrástrelo sobre la ventana de diseño. La pantalla debe quedar de la siguiente manera:

2. En la ventana de propiedades, seleccione la propiedad Name de la tarea que acaba de crear, y cámbiela por “Borrar Datos”.

3. Haga doble clic sobre la tarea “Borrar Datos”. Se abrirá el editor de propiedades de la tarea. Seleccione la propiedad Connection, y cambie su valor para que apunte hacia la conexión “AWork MartDemo”:

CIBERTEC


4. A continuación, seleccione la propiedad SQLStatement, y

presione el botón . Escriba la siguiente sentencia SQL:

5. Pulse el botón OK para confirmar la sentencia escrita. Pulse nuevamente el botón OK para aceptar los cambios en la tarea.

6. En la ventana de diseño, seleccione la tarea “Borrar datos”. Seleccione la flecha verde que sale de esta tarea, y arrástrela sobre la tarea “Copiar productos”. Esto define una precedencia

CIBERTEC


en el flujo de control del paquete, que establece que la tarea “Borrar datos” debe ejecutarse antes de la tarea “Copiar productos”:

7. Ejecute el paquete para probar su funcionamiento.

Ejercicio 3: Crear transformaciones personalizadas a través del Script Component.

1. Abra el paquete CopiaProductos.dtsx. Agregue una nueva tarea de tipo Data Flow Task, y asígnele el nombre “Copiar territorios”. A continuación, haga un doble clic sobre la tarea “Copiar territorios” para definir el detalle del flujo de datos.

2. En la pestaña Connection managers, agregue una nueva conexión de tipo File. Para esto, haga un doble clic sobre cualquier lugar de la ventana Connection Managers, y seleccione la opción New File Connection:

CIBERTEC


3. Se abrirá la ventana Flat File Connection Manager Editor. Establezca los siguientes valores para las opciones de esta ventana:

Opción ValorConnection manager name

Archivo de territorios

Descripción Información de territorios en formato de texto plano

File name Utilice el botón Browse para ubicar el archivo Territorios.txt

Format DelimitedText qualifier " (comillas dobles)Column names in the first data row

Desmarcado

CIBERTEC


4. En el panel izquierdo de la ventana Flat File Connection Manager Editor, seleccione la opción Preview para observar una vista preliminar de la información. Observe que se han asignado automáticamente los nombres “Column 0”, “Column 1” y “Column 2” a las columnas del archivo de texto.

5. Pulse el botón OK para finalizar la configuración de la conexión al archivo de texto.

6. En el Toolbox, expanda la pestaña Data Flow Sources. Seleccione el ítem Flat File Source, y arrástrelo sobre la

CIBERTEC


ventana de diseño. Renombre el origen resultante como “Territorios”.

7. Haga doble clic sobre “Archivo de territorios”. Se abrirá la ventana Flat File Source Editor. En la propiedad Flat file connection manager, seleccione “Archivo de territorios”.

8. En el panel izquierdo de la ventana Flat File Source Editor, seleccione la opción Columns. Observe que cada columna del archivo de texto ha sido reconocida.

CIBERTEC


9. Pulse el botón OK para finalizar la configuración del origen del Flat File Source.

10. En el ToolBox, expanda la pestaña Data Flow Transformations. Seleccione el ítem Script Component y arrástrelo sobre la ventana de diseño. Se abrirá una ventana que permite determinar el tipo de componente que se desea crear. Elija la opción Transformation:

11. Pulse el botón OK. Renombre la transformación como “Transformación de regiones”. A continuación, oonecte el origen

CIBERTEC


“Territorios” con “Transformación de regiones”. Al finalizar, su editor debe quedar de la siguiente manera:

12. A continuación, haga doble clic sobre “Transformación de regiones” para abrir su ventana de propiedades.

13. En la opción Input Columns del lado izquierdo de la ventana de propiedades, marque los checkboxes que señalan las columnas “Column 0”, “Column 1” y “Column 2” (estas columnas representan los inputs provenientes del origen “Territorios”).

CIBERTEC


14. Seleccione la opción Inputs and Outputs del lado izquierdo de la ventana de propiedades. Expanda Output 0. Expanda Output Columns. Presione el botón Add Column para agregar un nuevo Output a la transformación. Establezca las siguientes propiedades para el output:

Opción ValorName RegionData Type Seleccione STRING [DT_STR]Length 10

CIBERTEC


15. Seleccione la opción Script del lado izquierdo de la ventana de propiedades, y presione el botón Design Script:

CIBERTEC


16. Se abrirá el entorno de desarrollo de .Net para scripts de SSIS. Escriba el siguiente código para definir la transformación en la función Input0_ProcessInputRow:

17. Grabe el script presionando el botón . Cierre el entorno de desarrollo de scripts y pulse el botón OK para finalizar la edición de la transformación.

CIBERTEC


18.En el Toolbox, expanda la pestaña Data Flow Destinations. Seleccione el ítem OLE DB Destination y arrástrelo sobre la ventana de diseño. Renombre el destino como “Tabla de territorios”. A continuación, conecte “Transformación de regiones” con “Tabla de territorios”. La ventana del editor debe quedar como sigue:

19.Haga doble click sobre el destino “Tabla de territorios” para abrir su ventana de propiedades. Seleccione la opción Connection Manager del lado izquierdo de la pantalla, y establezca los siguientes valores para las propiedades:

Opción ValorOLE DB Connection Manager

Seleccione AWorks MartDemo

Data Access Mode Table or view – Fast loadName of the table or the view

Pulse el botón New para crear una nueva tabla. Escriba la siguiente sentencia SQL:CREATE TABLE Territorios (ZipCode char(5), Territorio varchar(50), Region varchar(10))

20.Seleccione la opción Mappings del lado izquierdo de la pantalla. Establezca los siguientes mapeos entre las columnas definidas

CIBERTEC


en “Transformación de regiones” y el destino “Tabla de territorios”:

Column 0 ZipCodeColumn 1 TerritorioRegion Region

21.Presione el botón OK para finalizar la edición del destino.22.Guarde el paquete y ejecútelo. Verifique que en la columna

Region de la tabla Territorios se han insertado los valores transformados.

23.Actividad sugerida: Modifique la tarea “Borrar Datos” para eliminar los datos de la tabla Territorios antes de iniciar las transferencias de datos.

CIBERTEC

Documents

Ssis Handson