Fundamentos Engenharia de dados e Bigdata com Azure
What you’ll learn
Fundamentos de Big data
Fundamentos de Datalake
Fundamentos de Lake house
Fundamentos de engenharia de dados
Requirements
Conhecimento básico em dados ou programação
Description
Neste curso eu mostrarei o caminho para quem deseja começar a trabalhar com Bigdata na Azure.Você aprenderá todo os conceitos chaves para criar pipelines usando o que há de mais inovador no mercado de dados.Você aprenderá:· Criação dos componentes na Azure;· Arquitetura base para projetos de Bigdata e Analytics;· Definição de camadas de dados no Data lake;· Diferenças entre Data warehouse, Bigdata e Lake house;· Ingestão de dados: Como se conectar às suas fontes de dados on-premises e trazer os dados para dentro do Data Lake na Azure.· Transformações e manipulações de dados com Pyspark e Spark SQL;· Utilização de particionamentos em formato Parquet e Delta lake;No módulo Hands-on, abordaremos de forma prática a utilização básica de Azure Data Factory, Azure Data Lake Storage gen2 (ADLS gen2), Azure Databricks e muito mais.Abordaremos desde a parte teórica até demonstrações práticas, para facilitar o entendimento de cada step de um processo de engenharia de dados utilizando stack Azure.O curso ainda conta com alguns exercícios práticos de ingestão, manipulação e exploração de dados, onde você poderá praticar os conceitos aprendidos e estar preparado para os desafios profissionais de engenharia e análise de dados.Após concluir o curso, você estará apto a entender como funciona um sistema de Bigdata e engenharia de dados na Azure e conseguirá dar os primeiros passos em direção ao sucesso!
Overview
Section 1: Introdução
Lecture 1 Boas vindas
Section 2: Teoria e História da Engenharia de dados
Lecture 3 Definição de Camadas e Arquiteturas de Dados
Section 3: Hands-on
Lecture 4 Criação de Datalake e permissionamento
Lecture 5 Criação de Banco de Dados Sample
Lecture 6 Ingestão com Azure Data Factory
Lecture 7 Inestão Sakila completa
Lecture 8 Preparação Databricks
Lecture 9 Transformações silver
Lecture 10 Dicas de estudos e ferramentas
Lecture 11 Finalização
Iniciantes em Engenharia de dados,Iniciantes em Azure
Course Information:
Udemy | Português | 1h 44m | 789.57 MB
Created by: Eliab Sturaro Bueno
You Can See More Courses in the Developer >> Greetings from CourseDown.com