Servicios de migración de datos a profundidad

João Paulo (JP) Santana

Arquitecto de Soluciones [email protected]

Agosto 2017

Servicios de migración de datos a profundidad

© 2017, Amazon Web Services

El almacenamiento es el centro de gravedad delas aplicaciones Cloud


Batch y Streams

DirectConnect

Snowball, Snowball Edge,

Snowmobile

3rd Party Connectors TransferAcceleration

StorageGateway

Kinesis Firehose

Archivo

Amazon EFS

Bloque

Amazon EBS (persistente)

Objeto

Amazon GlacierAmazon S3 Amazon EC2 Instance Store

(efímero)

Internet/VPN CloudFront


Ingesta vía Internet / VPN


¿Qué es la ingesta vía Internet / VPN?

Disponible globalmente

Método por defecto para cargar contenido en Amazon S3

Conexión simple basada en estándares (HTTP)

Usa su conexión existente de Internet

Funciona desde VPC y con VPN

Aceleración utilizando multipart upload

La transferencia de datos hacía AWS no tiene costo


Acelera la transferencia de datos

usando multipart upload

Ingesta los datos directamente en S3

con la conexión existente

S3 bucket

AWS Region

y

Usando la consola o APIs

customer

gateway

endpoints

VPN

connection

Internet Internet through VPN +

VPC

¿Cómo funciona la ingestión Internet/VPN?


Amazon S3 Transfer Acceleration


¿Qué es el Amazon S3 Transfer Acceleration?

Servicio de transferencia de datos basado en redes y

protocolos

Aceleración del ingreso/egreso de datos en Amazon S3

Del 50% al 300% mas rápido. Se activa a nivel bucket S3

Disponible en todas las regiones donde hay Amazon S3

No requiere software cliente/servidor, sin cambios al

código de su aplicación, sin excepciones en el firewall

Modelo de pago simple


Bucket S3

Usuario

Utiliza las 74 ubicaciones Edge

AWS determina la mejor

ubicación Edge

Transferencia optimizada entre

Edge-cliente, y Edge-S3

Los datos no son almacenados en el

cache Edge

Ingreso & egreso con S3 Transfer Acceleration


Amazon

Route 53

Resolve

b1.s3-accelerate.amazonaws.com

HTTPS PUT/POST upload_files.zip

HTTP/S PUT/POST

“upload_files.zip”

Carga de un archivo a Amazon S3

S3 bucket

b1.s3-accelerate.amazonaws.com

EC2 proxy

AWS region

AWS edge location

Customer client

1

2

3

4Los datos no son cacheados

en la ubicación Edge

Transferencia de archivos

completamente administrada usando

todas las AWS ubicaciones Edge

Flujo de tráfico en Amazon S3 Transfer Acceleration


¿Qué tan rápido es Amazon S3 Transfer Acceleration?


AWS Direct Connect


¿Qué es AWS Direct Connect?

Canales privados dedicados de 1 o 10 Gbps hacia AWS

Interfaces virtuales privadas y públicas

Transferencia saliente a precio reducido (los datos

entrantes no tienen costo)

Rendimiento de red consistente

Múltiples proveedores de circuito (Partners)

Consulte la sesión “NET305 Extendiendo su centro de datos a la nube de AWS” para obtener información mas detallada


Almacenamiento de archivos

Migración de datosa Amazon EFS

Amazon EFSOn-Premises AWS Direct Connect

Expansión del almacenamiento a la nube híbrida:Amazon EFS vía AWS Direct Connect


AWS Storage Gateway


• Trabaja con sus aplicaciones existentes

• Almacenamiento seguro y durable en AWS

• Baja latencia para datos usados frecuentemente

• Almacenamiento escalable y costo-efectivo on-premises - $.01/GB escritos en AWS + costos de S3/Amazon Glacier

Servicio para conectar una aplicación on-premises con

almacenamiento Cloud

¿Qué es el AWS Storage Gateway?


Habilitador de cargas de trabajo CloudMover datos hacia AWS para Big Data, desbordamiento a la nube,

o migración

Respaldos, Históricos y Disaster RecoveryAlmacenamiento en AWS de costo-efectivo con restauración local o

en la nube

AWS Storage Gateway: Casos de uso y arquitecturas


Habilita el acceso a los servicios de almacenamiento de AWS usando protocolos de almacenamiento estándar

Oficinas del cliente

AWS

Storage

Gateway

Amazon EBS

snapshots

Amazon

S3

Amazon Glacier

AWS Identity and Access

Management (IAM)

AWS Key Management

Service (KMS)

AWS CloudTrail

Amazon

CloudWatch

Enterprise storage

Devices

Applicationservers

Arquitectura híbrida con AWS Storage Gateway


File gateway Interface NFS (v3 y v4.1)

• Almacenamiento local de archivos que se guardan como objetos en Amazon S3

Volume gateway Interface de bloque iSCSI

• Almacenamiento local de bloques resguardado en Amazon S3 como snapshots de EBS

Tape gateway Interface iSCSI virtual tape library (VTL)

• Almacenamiento virtual de cintas en Amazon S3 and Glacier con gestión de VTL

AWS Storage Gateway: Archivo, volumen y cinta


Interface NFS ElasticidadBucket Amazon S3

Fácil integración Escala CloudAcceso Cloud

AWS File Gateway para Amazon S3


Ecosistema de Partners de almacenamiento


Backup• AWS Storage Gateway VTL

• Directo hacía Amazon S3

File SystemsObject Storage

Block Storage

Ecosistema híbrido de almacenamiento en la nube


Amazon S3

Amazon

GlacierAWS

Direct

Connect

Internet

Amazon S3-IA

Application

servers

Cloud gateway

Local disk

Media

server

Cloud gateway

Application

servers

Conector de Backup por Software

Local disk

Media

server with cloud

connector

Esquema de respaldo hacía AWS


Desborde

Migración

Niveles

Acceso EFSvía Direct Connect

Storage Gateway

SnowballEdge

Ecosistema de Partners

Esquema de respaldo hacía AWS (cont.)


AWS Server Migration Service


Replicación automatizada incremental hacía AWS

Orquestación de migraciones de gran escala, monitoreo de progreso

Migraciones rápidas reduciendo el consumo de ancho de banda

Migre servidores en una forma costo-efectiva

Minimice el tiempo fuera durante cortes

Fácil de comenzar

Beneficios de utilizar AWS Server Migration Service


Migración de maquinas virtuales hacía AWS

Migración de maquinas virtuales VMWare hacía AWS

No se requiere agente en las maquinas a migrar

Soporte de múltiples versiones de Windows y Linux

Cree y gestione un programa de replicación

personalizado, monitoree el progreso de cada migración

La migración de datos es incremental, hasta 90 días

Gratuito, solo paga los recursos usados durante la

migración


Windows Linux

Server 2003, 2003 R2 Red Hat Enterprise Linux 5,6,7

Server 2008, 2008 R2 SUSE Linux Enterprise Server 11-12

Server 2012, 2012 R2 CentOS 5,6,7

Server 2016 Ubuntu 12,13,14,15

Windows 7 Oracle Linux 6,7

Windows 8, 8.1 Debian 6,7,8

Windows 10 Fedora Server 19,20,21

Sistemas Operativos por AWS SMS


AWS Database Migration Service


Comience su primer migración en 10 minutos o menos

Mantenga sus aplicaciones operando durante la migración

Replique hacía o desde Amazon EC2 o Amazon RDS

Mueva datos al mismo motor o un motor de DB diferente

AWS Database Migration Service (AWS DMS)


Oficina del

cliente

Usuarios de la

aplicación

AWS

Internet

VPN

Comience una replicación

Conecte el origen y el destino

Seleccione las tablas, esquemas o

bases de datos

AWS DMS creará las tablas, cargará los datos y las mantendrá sincronizadas

Cambie las aplicaciones al destino según le convenga

AWS

DMS

Mantenga sus aplicaciones operando durante la migración


Instancia de replicación

Origen Destino

La carga se hace tabla por tabla


Características

• Conversión de Oracle y Microsoft SQL Server hacía Amazon Aurora, MySQL, MariaDB, y PostgreSQL

• O bien, convierta su esquema entre PostgreSQL y cualquier motor MySQL

• Creación de reporte de migración para escoger el mejor destino de base de datos

• Exploración de código que destaca los puntos que requieren una edición manual

• Conexiones seguras hacías sus bases de datos usando SSL

Ayuda a automatizar tareas de conversión de bases de datos y conversiones de código cuando se migra entre motores de bases de datos o data warehouse

AWS Schema Conversion Tool


Convierta bases relacionales Convierta warehouses

AWS Schema Conversion Tool

GreenplumVerticaNetezzaSQL Server


SequencesUser-defined typesSynonymsPackagesStored proceduresFunctionsTriggersSchemasTablesIndexesViewsSort and distribution keys

AWS SCT ayuda a convertir tablas, vistas y código


AWS Direct Connect https://aws.amazon.com/directconnect/

Amazon Elastic File System https://aws.amazon.com/efs/

AWS Storage Gateway https://aws.amazon.com/storagegateway/

AWS Snowball https://aws.amazon.com/snowball/

AWS Snowball Edge https://aws.amazon.com/snowball-edge/

AWS Marketplace https://aws.amazon.com/marketplace/

AWS Server Migration Service https://aws.amazon.com/server-migration-service/

AWS Database Migration Service https://aws.amazon.com/dms/

AWS Schema Conversion Tool https://aws.amazon.com/documentation/SchemaConversionTool/

Amazon S3 Transfer Acceleration http://docs.aws.amazon.com/AmazonS3/latest/dev/transfer-acceleration.html

Recursos disponibles

https://aws.amazon.com/directconnect/

https://aws.amazon.com/efs/

https://aws.amazon.com/storagegateway/

https://aws.amazon.com/snowball/

https://aws.amazon.com/snowball-edge/

https://aws.amazon.com/marketplace/

https://aws.amazon.com/server-migration-service/

https://aws.amazon.com/dms/

https://aws.amazon.com/documentation/SchemaConversionTool/

http://docs.aws.amazon.com/AmazonS3/latest/dev/transfer-acceleration.html


¡No olvide llenar su

evaluación!

¡Gracias!

Technology

Servicios de migración de datos a profundidad