17
MDW: Azure Data Factory V2 Orquestando datos y procesos

MDW: Azure Data Factory V2 - Data fact… · Azure V2 Qué es Novedades Demo: Copia de datos incrementales On Prem – Azure SSIS en la nube IR Dataflows con Azure Databricks for

  • Upload
    others

  • View
    6

  • Download
    0

Embed Size (px)

Citation preview

Page 1: MDW: Azure Data Factory V2 - Data fact… · Azure V2 Qué es Novedades Demo: Copia de datos incrementales On Prem – Azure SSIS en la nube IR Dataflows con Azure Databricks for

MDW: Azure Data Factory V2Orquestando datos y procesos

Page 2: MDW: Azure Data Factory V2 - Data fact… · Azure V2 Qué es Novedades Demo: Copia de datos incrementales On Prem – Azure SSIS en la nube IR Dataflows con Azure Databricks for

Presentándonos Miguel Egea Mentor Father of dragons

Dani Gil DPE “DeMayorQuieroSerComo

Miguel”

Page 3: MDW: Azure Data Factory V2 - Data fact… · Azure V2 Qué es Novedades Demo: Copia de datos incrementales On Prem – Azure SSIS en la nube IR Dataflows con Azure Databricks for

Agenda Azure V2 Qué es Novedades

Demo: Copia de datos incrementales On Prem – Azure SSIS en la nube IR Dataflows con Azure Databricks for dummies

Page 4: MDW: Azure Data Factory V2 - Data fact… · Azure V2 Qué es Novedades Demo: Copia de datos incrementales On Prem – Azure SSIS en la nube IR Dataflows con Azure Databricks for

Azure Data Factory

Page 5: MDW: Azure Data Factory V2 - Data fact… · Azure V2 Qué es Novedades Demo: Copia de datos incrementales On Prem – Azure SSIS en la nube IR Dataflows con Azure Databricks for

ADF V2 novedades Se suprime La disponibilidad de DS (Availability) Las ventanas de tiempo en el Pipeline La dependencia de los DS al orquestar el Pipeline

Page 6: MDW: Azure Data Factory V2 - Data fact… · Azure V2 Qué es Novedades Demo: Copia de datos incrementales On Prem – Azure SSIS en la nube IR Dataflows con Azure Databricks for

ADF V2 novedades Se añaden Nuevas actividades (Condicionales, bucles, lookups, web…) Parámetros Triggers Jobs “tradicionales”, eventos, ventanas Ejecución de paquetes SSIS

Page 7: MDW: Azure Data Factory V2 - Data fact… · Azure V2 Qué es Novedades Demo: Copia de datos incrementales On Prem – Azure SSIS en la nube IR Dataflows con Azure Databricks for

Demo Actividades para control de la orquestación Parámetros

Page 8: MDW: Azure Data Factory V2 - Data fact… · Azure V2 Qué es Novedades Demo: Copia de datos incrementales On Prem – Azure SSIS en la nube IR Dataflows con Azure Databricks for
Page 9: MDW: Azure Data Factory V2 - Data fact… · Azure V2 Qué es Novedades Demo: Copia de datos incrementales On Prem – Azure SSIS en la nube IR Dataflows con Azure Databricks for

SSIS en la nube Catálogo SSISDB

Integration Runtime

Page 10: MDW: Azure Data Factory V2 - Data fact… · Azure V2 Qué es Novedades Demo: Copia de datos incrementales On Prem – Azure SSIS en la nube IR Dataflows con Azure Databricks for

Integration Runtime Azure Azure – SSIS Self – Hosted

Page 11: MDW: Azure Data Factory V2 - Data fact… · Azure V2 Qué es Novedades Demo: Copia de datos incrementales On Prem – Azure SSIS en la nube IR Dataflows con Azure Databricks for

Demo Desplegar y orquestar paquete SSIS Arrancar y parar Azure – SSIS IR

Page 12: MDW: Azure Data Factory V2 - Data fact… · Azure V2 Qué es Novedades Demo: Copia de datos incrementales On Prem – Azure SSIS en la nube IR Dataflows con Azure Databricks for
Page 13: MDW: Azure Data Factory V2 - Data fact… · Azure V2 Qué es Novedades Demo: Copia de datos incrementales On Prem – Azure SSIS en la nube IR Dataflows con Azure Databricks for

Data Flows Public preview Desarrollo de dataflows completamente visual Azure Databricks basado en Apache Spark

Page 14: MDW: Azure Data Factory V2 - Data fact… · Azure V2 Qué es Novedades Demo: Copia de datos incrementales On Prem – Azure SSIS en la nube IR Dataflows con Azure Databricks for

Demo Creando un Data Flow

Page 15: MDW: Azure Data Factory V2 - Data fact… · Azure V2 Qué es Novedades Demo: Copia de datos incrementales On Prem – Azure SSIS en la nube IR Dataflows con Azure Databricks for

Resumen Más parecido a un SSIS en la nube… … con SSIS en la nube

Nueva programación de tareas Más actividades para el control del flujo de trabajo

Data Flows con Azure Databricks

Page 16: MDW: Azure Data Factory V2 - Data fact… · Azure V2 Qué es Novedades Demo: Copia de datos incrementales On Prem – Azure SSIS en la nube IR Dataflows con Azure Databricks for

PreguntasPreguntas

Page 17: MDW: Azure Data Factory V2 - Data fact… · Azure V2 Qué es Novedades Demo: Copia de datos incrementales On Prem – Azure SSIS en la nube IR Dataflows con Azure Databricks for

¡Dos días más de Summit! https://blogs.solidq.com/es/ #SQSummit19