Migração de Dados com Azure Data Factory Orlando Gomes BI Consultant @Lambda3 Microsoft Student Partner (MSP) medium.com/@_orlandogomes linkedin.com/in/orlandomariano.

Apresentação em tema: "Migração de Dados com Azure Data Factory Orlando Gomes BI Consultant @Lambda3 Microsoft Student Partner (MSP) medium.com/@_orlandogomes linkedin.com/in/orlandomariano."— Transcrição da apresentação:

1 Migração de Dados com Azure Data Factory Orlando Gomes BI Microsoft Student Partner (MSP) linkedin.com/in/orlandomariano facebook.com/orlandomaiuri

2 Patrocinadores Observação –
Citar que o evento é gratuito e que os patrocinadores são os responsáveis por garantir o welcome kit, a infraestrutura básica do evento e os brindes. Em contrapartida eles desejam mostrar seus produtos e serviços. É bacana que vocês (público) conheçam eles e aceitem receber mailing.

3 Olá , meu nome é Orlando  Curso Técnico em Informática – Fundação Bradesco; Formado em Redes de Computadores – FIAP; Graduando do 3º Ano de Engenharia Mecatrônica - FIAP; Experiência focada em SharePoint e Power BI; MSP - Microsoft Student Partner; Fã de Pokémon / Futebol.

4 Agenda Azure Data Factory; Principais Elementos;
Azure Data Factory x Integration Services (SSIS); Referencias; Demo.

5 Azure Data Factory Solução baseada em cloud que permite a criação e administração de tarefas para transformação e movimentação de dados (Source/Destination).

6 Azure Data Factory Modelo PaaS (Platform as a Service);
Trabalha com processamento de dados em batch, integrado com outras soluções como HDInsight, Hadoop, Spark, Data Lake Analytics e Azure Machine Learning; Realiza uso de workflows (pipelines) que podem consumir diferentes origens de dados; Publica informações para fontes como SQL Azure (consumível via Power BI).

7 Principais Elementos Activity: Ações realizadas sobre o dado a ser trabalhado, seja a migração de uma origem (source) a um destino (destination) ou uma transformação. Pipeline: Grupo de Activities que, juntas, formam uma task, um Data Factory pode ter um ou mais pipelines; Datasets: Podem estar contidos dentro de uma ou mais activities, usados para referencial qual a fonte vai ser trabalhada no source/destination (Blob Storage/SQL Azure); Linked Services: Define as strings de conexão necessárias para que a autenticação aos datasets ocorra (Exemplo: Login e Senha de um SQL Azure).

8 Principais Elementos Activity Activity Pipeline / Task
Dataset (Source) Dataset (Destination) Linked Services Linked Services

9 Azure Data Factory x Integration Services (SSIS)
Fator de Comparação Azure Data Factory Integration Services Development Tool Portal do Azure SQL Server Data Tools Pricing Pay as You Go Basic / Standard / Advanced Environment Suportado no Azure Depende de um servidor, variando da quantidade de informação. Deployment Power Shell Scripts Deployment Wizard Security Role Based (Deploy,Execute,Monitor) Role Based (Owner,Contribrutor,Reader) Monitoring Diagram View SSIS Logging Prerequisite Azure Subscription SQL Server License

10 Referencias Copy data from Blob Storage to SQL Database using Data Factory Introduction to Azure Data Factory Reza Rad – SSIS vs Azure Data Factory

11 Saiba mais em: http://sqlsaturday.com/
Próximos Eventos SÃO PAULO #804 | SET 29 SALVADOR #799 | OUT 20 RIO DE JANEIRO #811 | NOV 24 Observação – Ressaltar e convidar os participantes aos próximos SQL Saturdays que acontecerão ainda neste ano no Brasil. Saiba mais em:

12 Mais de 7 horas de treinamento! R$150 convertidos em doações
Observação – Ressaltar e convidar os participantes para o posconf com o Fabiano Amorim

13

14 Obrigado! =D

15 Demo: Migrando Dados com Azure Data Factory