23
Automatizando la limpieza de datos con SSIS 5 de Marzo de 2014 José L. Rivera, MBA, MCITP, MCSA MCITP SQL Server 2008 (DBA, DD, BI) PASS Global Spanish Chapter Leader Consultant at Nagnoi, LLC

Automatizando la limpieza de datos con SSIS

Embed Size (px)

Citation preview

Page 1: Automatizando la limpieza de datos con SSIS

Automatizando la limpieza de datos con SSIS5 de Marzo de 2014

José L. Rivera, MBA, MCITP, MCSAMCITP SQL Server 2008 (DBA, DD, BI)PASS Global Spanish Chapter LeaderConsultant at Nagnoi, LLC

Page 2: Automatizando la limpieza de datos con SSIS

• Líder del Capítulo Global PASS en Español• VP - Puerto Rico PASS• Azure VC Webmaster

• Profesional de Bases de Datos con mas de 10 años usando SQL Server y tecnologías relacionadas

• Especializado en ETL e Inteligencia de Negocios

• Blog: http://sqlconqueror.com• Email: [email protected]

/SQLConqueror

Page 3: Automatizando la limpieza de datos con SSIS

Agenda

• Resumen de las capacidades de Data Quality Services (DQS)

• Soporte nativo para limpieza de datos en SSIS• Soporte a normas de coincidencia (Matching Policy) en

SSIS• Manejo de Dominios en Excel (export/import)

Page 4: Automatizando la limpieza de datos con SSIS

Resumen de las capacidades de Data Quality Services (DQS)

Page 5: Automatizando la limpieza de datos con SSIS

Data Quality Services (DQS)

Page 6: Automatizando la limpieza de datos con SSIS

Data Quality Services (DQS)

• Descubrimiento de Conocimiento(Knowledge Discovery)

• Manejo de Dominios(Domain Management)

• Normas de Coincidencia (Matching Policy)

• Servicios de Referencia de Datos(Reference Data Services)

http://technet.microsoft.com/en-us/library/hh213015.aspx

Page 7: Automatizando la limpieza de datos con SSIS

Data Quality Services (DQS)

• Limpieza de Datos(Data Cleansing)

• Coincidencia de Datos(Data Matching)

• Perfilado y Notificaciones(Profiling and Notifications)

http://technet.microsoft.com/en-us/library/hh213015.aspx

Page 8: Automatizando la limpieza de datos con SSIS

Data Quality Services (DQS)

• Monitoreo de Actividades(Activity Monitoring)

• Configuración(Configuration)

• Seguridad de DQS(DQS Security)

http://technet.microsoft.com/en-us/library/hh213015.aspx

Page 9: Automatizando la limpieza de datos con SSIS

Soporte nativo para limpieza de datos en SSIS

Page 10: Automatizando la limpieza de datos con SSIS

Componente SSIS – Limpieza de Datos

Page 11: Automatizando la limpieza de datos con SSIS

Componente SSIS – Actualización de Dominios

• Este componente maneja la retroalimentación de los dominios con la información de los proyectos

• CodePlexSSIS DQS Domain Value Importhttps://domainvalueimport.codeplex.com/

Page 12: Automatizando la limpieza de datos con SSIS

Soporte a normas de coincidencia (Matching Policy) en SSIS

Page 13: Automatizando la limpieza de datos con SSIS

Componente SSIS – Normas de Coincidencia

• No hay un componente nativo para realizar estas operaciones

• CodePlexSSIS DQS Matching Transformationhttps://ssisdqsmatching.codeplex.com/

Page 14: Automatizando la limpieza de datos con SSIS

Componente SSIS – Normas de Coincidencia

Page 15: Automatizando la limpieza de datos con SSIS

Manejo de Dominios en Excel (export/import)

Page 16: Automatizando la limpieza de datos con SSIS

Excel ->DQS

Page 17: Automatizando la limpieza de datos con SSIS

DQS -> Excel

1

2

3

Page 18: Automatizando la limpieza de datos con SSIS

Manténgase conectado a nosotros!

Visítenos en http://globalspanish.sqlpass.org

/SpanishPASSVC

lnkd.in/dtYBzev

/user/SpanishPASSVC

/SpanishPASSVC

Page 19: Automatizando la limpieza de datos con SSIS

Calendario de SesionesFecha Conferenciante Tema

19 MarzoGuillermo TaylorSQL Server MVP….

….…

9 AbrilEnrique CátalaSQL Server MVPMentor para SolidQ

Diagnóstico y resolución de problemas en SQL ServerEn mi día a día como consultor me encuentro con una gran variedad de problemas relacionados directa o indirectamente con SQL Server. El diagnóstico de las causas reales de estos problemas suele requerir analizar tanto el hardware como el software de la plataforma. Presentar el diagnóstico y la resolución de problemas reales así como los procesos y herramientas utilizadas es el objetivo de esta sesión.

Page 20: Automatizando la limpieza de datos con SSIS

Programa de Reconocimiento

Programa de Voluntario Sobresaliente

• PASS le invita a nominar a su voluntario favorito para ser “Voluntario Sobresaliente del Mes”

• Enviar nominaciones en todo momento a: [email protected] Favor proveer:• Información de contacto del nominado,• una lista breve de los programas de PASS que a participado el nominado• los años que lleva activo en la comunidad• una corta descripción por el cual considera que esta persona debe ser reconocida

• Los nominados seleccionados serán anunciados en la edición del boletín PASS Connector y recibirán un certificado de apreciación.

Page 21: Automatizando la limpieza de datos con SSIS

JOIN US for our second annual event to get the best learning for analyzing, managing, and sharing business information and insights through the Microsoft Data Platform of technologies.

Page 23: Automatizando la limpieza de datos con SSIS

Manténganse Conectados!

• Solicite su suscripción gratuita en sqlpass.org

• Linked In: Professional Association for SQL Server• Facebook: Professional Association for SQL Server Group• Twitter: @SQLPASS• The PASS Blog: sqlpass.org