Um dos treinamentos mais esperados pelos profissionais de dados, que unem duas grandes ferramentas muito utilizadas pelos engenheiros de dados e que esto em qualquer projeto que utilize principalmente streaming de dados, estamos falando do uso do Databricks Delta Lake e do APACHENIFI. Vamos iniciar nosso curso de forma incrvel, trabalhando com que h de mais moderno no tratamento de dados na nuvem, faremos tudo isso no Databricks com o uso do Delta Lake. O Delta Lake uma camada de armazenamento de cdigo aberto que traz confiabilidade aos Data Lakes, fornecendo recursos semelhantes a data warehouse, em cima do Data Lake. Ele tambm pode lidar com dados de Batch e Streaming perfeitamente. E esses componentes e recursos podem ajudar a construir uma arquitetura otimizada e bem integrada do Lakehouse. Depois vamos mergulhar no uso do APACHENIFI, foi construdo para automatizar o fluxo de dados entre os sistemas, As empresas tm mais de um sistema, onde alguns dos sistemas criam dados e alguns dos sistemas consomem dados, ento o NIFI nasce no contexto de permitir a integrao entre os softwares via fluxo de dados. Comumente aqui no nosso curso voc vai ouvir falar um FlowFile representa cada objeto movendo-se atravs do sistema e para cada um. Ento, vamos comear nosso treinamento para aprender a trabalhar com estes dois gigantes da rea de engenharia de dados?
