Formao Engenharia de Dados [2022]: Domine Big Data!

Totalmente atualizado em Setembro de 2022! Faa o utilizando ferramentas na nuvem, tudo o que voc precisa de um computador com acesso a internet!A Engenharia de Dados uma das profisses que mais cresce no mundo, com alta demanda de profissionais e consequentemente salrios cada vez maiores, alm de muitas oportunidades para trabalhar para empresas estrangeiras ou mesmo para uma carreira no exterior! Este mais completo e acessvel curso para voc entrar ou se especializar no mundo dos Dados! OEngenheiro de Dados o profissional que constri, mantm e disponibiliza dados em empresas.Com ambientes cada vez mais complexos, este profissional deve conhecer diversas estruturas e tecnologias de dados. Neste curso, voc vai ter um panorama geral sobre as principais modelos e tecnologias de dados que encontramos no mundo da cincia de dados. Entre outras coisas, voc vai estudar: Conceitos e FundamentosArmazenamentos de dados distribuidos Modelo Relacional e Linguagem SQL: Operao. Modelos relacionais esto em toda parte, so sistemas contabeis, folhas de pagamento, estoque, finanas etc. Embora este seja um modelo mais antigo de dados, sem dvida ainda o mais importante! Modelo Dimensional: Tomada de Deciso. Modelos dimensionais so utilizados para construir armazns de dados, que nada mais so “depsitos"de informao utilizada para apoiar a tomada de deciso. Data Warehouse Moderno e Data Lake: Os armazens de dados modernos so estruturados em colunas e otimizados atravs de partiesNoSQL: Orientado a Documento e Chave Valor: Dados semi-estruturados com MongoDB e Redis. NoSQL uma familia de bancos de dados para modelos diferenciados, para armazenar informaes que no tem as restries encontradas em sistemas de transaes. Introduo do Ecossistema Hadoop: Este ecossistema que foi o pioneiro no processamento de grandes volumes de dadosSpark: OSpark uma das mais importantes ferramentas de Engenharia e Cincia de Dados, capaz de processar grandes volumes de dados com alta performance. Engenharia de Dados com Python: OPython se tornou a mais importante linguagem imperativa no mundo dos dados. Aplicaes em Streaming: Real Time e Near Real Time: Dados em streaming so aqueles que so produzidos e forma contnua, e que precisam ser processados de forma contnua. ETL e Data Crawlers: Extrair, transformar e entregar dados uma tarefa de rotina na engenharia de dadosGerenciamento de servios pela CLIAlgumas das ferramentas que sero utilizadas e estudadas durante o curso: PostgresqlS3EC2RedshiftMongodbRedisDatabricksRDSKinesisGlueAthenaVoc tambm ter dois grandes projetos prticos para desenvolver ao final do curso: Construo de um Data LakeConstruo de um Pipeline de Extrao e Transformao de DadosO curso ainda traz todo material, como slides e scripts, disponveis para voc baixar.