Aulas

• Aula 26 - Entendendo Processamento em Batch cloud_download
• Aula 27 - Entendendo o processamento em Streaming cloud_download
• Aula 28 - Processamento em Batch vs Processamento em Streaming - Arquitetura Lambda e Kappa. cloud_download
• Aula 29 - Entendendo o framework Apache Spark cloud_download
• Aula 30 - Entendendo as APIs do Apache Spark cloud_download
• Aula 31 - Spark Vs Hadoop cloud_download
• Aula 32 - Conhecendo a Cloud do Databricks cloud_download
• Aula 33 - Criando a conta no Databricks Community cloud_download
• Aula 34 - Criando um Cluster Spark no Databricks cloud_download
• Aula 35 - Conhecendo o notebook no Databricks cloud_download
• Aula 36 - Entendendo os Dataframes e boas práticas para gestão de Data Lakes. cloud_download
• Aula 37 - Fazendo Upload do Dataset no Databricks. cloud_download
• Aula 38 - Lendo dataset e Monitorando jobs com Spark Ui cloud_download
• Aula 39 - Contando a quantidade de registros do Dataframe Spark cloud_download
• Aula 40 - Entendendo o formato de dados Parquet cloud_download
• Aula 41 - Diferenças entre arquivos CSV e Parquet cloud_download
• Aula 42 - Convertendo arquivos CSV para Parquet com Spark cloud_download
• Aula 43 - Entendendo a arquitetura e modos de Deploy do Spark. cloud_download
• Aula 44 - Conceitos sobre o Spark Submit cloud_download
• Aula 45 - Boas práticas para desenvolvimento de Aplicações Spark cloud_download
• Aula 46 - Conhecendo o ambiente On-premises. cloud_download
• Aula 47 - Conhecendo o MinIO (Object Storage Server) cloud_download
• Aula 48 - Instalando o MinIO localmente. cloud_download
• Aula 49 - Criando as zonas Landing, Processing e Curated no MinIO cloud_download
• Aula 50 - Fazendo upload dos datasets na Landing Zone no Data Lake. cloud_download
• Aula 51 - Instalando o Spark localmente. (Tutorial em PDF anexo) cloud_download
• Aula 52 - Fazendo o Setup do Spark no Visual Studio Code cloud_download
• Aula 53 - Entendendo as configurações para integração do Spark com protocolo S3a. cloud_download
• Aula 54 - Entendendo linha a linha da aplicação Spark. cloud_download
• Aula 55 - Entendendo linha a linha da aplicação Spark - Parte2 cloud_download
• Aula 56 - Executando aplicação Spark via Spark Submit cloud_download
• Aula 57 - Corrigindo erro da falta de bibliotecas do protocolo s3a. cloud_download
• Aula 58 - Lendo a saída da aplicação Spark. cloud_download
• Aula 59 - Acompanhando o processamento da aplicação usando Spark UI cloud_download